【问题标题】:Google Colab Disk space vs Google Drive disk spaceGoogle Colab 磁盘空间与 Google Drive 磁盘空间
【发布时间】:2020-07-12 09:00:55
【问题描述】:

我正在使用 Google Colab 做一些机器学习项目。我已经安装了我的驱动器,激活了 GPU,从谷歌驱动器购买了额外的存储空间,并且在谷歌驱动器上有超过 100Gb 的可用空间,但是我的 Colab 笔记本中的“驱动器”监视器显示驱动器正在装满。下面是我的 Colab notbook 和 Google Drive 存储的屏幕截图。

为什么笔记本显示驱动器已满?我已经多次刷新了我的谷歌驱动器,以确保显示的存储空间是准确的。

【问题讨论】:

  • 请更新您的帖子,说明您在 Google 云端硬盘中购买了额外空间。
  • Google Drive Help 中的类似问题自 2020 年 3 月以来仍未得到解答。

标签: google-drive-api google-colaboratory


【解决方案1】:

Google Drive 存储空间和 Google Colab 磁盘空间不同。

谷歌驱动器存储是谷歌云中提供的空间。而 colab 磁盘空间是当时分配给您的机器中的存储量。您可以通过更改运行时来增加存储空间。

具有 GPU 的机器比仅具有 cpu 的运行时具有更多的内存和磁盘空间。 同样,如果您想要更多,您可以将运行时更改为 TPU 机器。

【讨论】:

  • 感谢您的解释。您能否详细说明“更改运行时”的含义?在运行时下拉菜单下,我看到“更改运行时类型”,但这只是设置我的 Python 版本以及我是否激活了加速器。我正在考虑执行“恢复出厂设置运行时”选项?
  • 是的。更改运行时类型。您必须选择硬件加速器。 GPU 或 TPU。看你要哪台机器。如果我有帮助,请标记为答案
  • 嗯,正如我在原帖中提到的,我已经选择并激活了 GPU。所以我仍然不确定在这里做什么。即使在停止运行时并关闭笔记本后,我似乎仍然无法清除或显着减少 Colab 磁盘上的占用空间。
  • 虽然问题本身不是很清楚,但从第一个屏幕截图中可以明显看出 OP 在 Google Drive (200 GB) 中购买了额外的存储空间,并且它们依次安装了 i> Colab 中的 Google 云端硬盘。问题本质上是关于两个屏幕截图之间的存储差异,您的回答虽然作为一个非常笼统的描述是正确的,但在这里与上下文无关。
  • 我在这方面花了一周时间,其中包括约 1 小时与 Google 支持人员聊天。即使是您所做的 GPU/CPU 区别也不一定总是这样 - 我使用 GPU 获得的存储更少 比使用 CPU/TPU(取决于地区,也许?)。您始终可以使用 GD 的额外存储来读取和访问已经存在的内容,但不能在代码执行期间动态写入。这样的东西(和研究)有望得到一个体面的答案。
【解决方案2】:

Google drive storage 和 google colab disk 是不同的。 Google 驱动器存储是对象存储系统,而 google colab 磁盘是您在 colab 运行时使用的文件系统(主要是 SSD 或 HDD)。两者都不同并且有不同的用法(阅读here了解更多信息)。

您面临的问题是运行时 SSD 磁盘不足。谷歌 colab 没有选择增加这个。您需要转移到 cloud notebooks 以增加运行时 SSD 的大小。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2013-12-08
    • 2014-11-29
    • 1970-01-01
    • 1970-01-01
    • 2019-12-12
    相关资源
    最近更新 更多