【发布时间】:2019-07-06 16:07:38
【问题描述】:
我正在研究来自 Kaggle 的 APTOS 失明检测挑战数据集。发布上传文件;当我尝试解压缩火车图像文件夹时;我收到文件大小限制错误,说明 RAM 和磁盘上的可用空间有限。任何人都可以建议一种替代方法来处理大量图像数据。
【问题讨论】:
标签: google-colaboratory upload-max-filesize
我正在研究来自 Kaggle 的 APTOS 失明检测挑战数据集。发布上传文件;当我尝试解压缩火车图像文件夹时;我收到文件大小限制错误,说明 RAM 和磁盘上的可用空间有限。任何人都可以建议一种替代方法来处理大量图像数据。
【问题讨论】:
标签: google-colaboratory upload-max-filesize
如果您在解压缩存档时遇到该错误,则这是磁盘空间问题。 Colab 默认为您提供大约 80 gb,尝试将运行时切换到 GPU 加速,除了在某些任务期间使用 tensorflow 时性能更好,您将获得大约 350 gb 的可用空间。
从 Colab 转到 Runtime -> Change runtime type,然后在 hardware acceleration 菜单中选择 GPU。
【讨论】:
如果您需要更多磁盘空间,Colab 现在提供了Pro version 服务,免费版提供双倍磁盘空间。
【讨论】: