【问题标题】:How to increase Google Colab storage capacity如何增加 Google Colab 存储容量
【发布时间】:2021-06-15 16:45:18
【问题描述】:

我正在使用 GPU 处理 70gb 的数据集。

有人可以建议任何可能的方法来制作具有超过 300Gbs 可用的新笔记本或任何可能的方法来回到以前的状态。

【问题讨论】:

    标签: google-colaboratory


    【解决方案1】:

    您可以通过以下方法来制作一个超过300GB的新笔记本:

    1. 在相应的帐户中购买额外的空间,它会在 gdrive 或 GCP 存储中,然后安装在 Notebook 中。
    2. 另外,还有一个挂载多个驱动源的选项,分享下面的例子来挂载多个gdrive供大家参考。如果您有多个 gdrive 帐户总共有更多空间,并且可以从不同的挂载点使用大空间,这将非常有用。

    #代码库挂载第一个挂载点:

    from google.colab import drive
    drive.mount('/content/drive01')
    

    #按照验证流程,输入token

    #代码库挂载第二个挂载点:

    !apt-get install -y -qq software-properties-common module-init-tools
    !add-apt-repository -y ppa:alessandro-strada/ppa 2>&1 > /dev/null
    !apt-get update -qq 2>&1 > /dev/null
    !apt-get -y install -qq google-drive-ocamlfuse fuse
    
    from google.colab import auth
    from oauth2client.client import GoogleCredentials
    import getpass
    
    auth.authenticate_user()
    creds = GoogleCredentials.get_application_default()
    prompt = !google-drive-ocamlfuse -headless -id={creds.client_id} -secret={creds.client_secret} < /dev/null 2>&1 | grep URL
    vcode = getpass.getpass(prompt[0] + '\n\nEnter verification code: ')
    !echo {vcode} | google-drive-ocamlfuse -headless -id={creds.client_id} -secret={creds.client_secret}
    !sudo mkdir /content/drive02
    !google-drive-ocamlfuse /content/drive02
    

    按照验证过程,输入两次令牌。请, 注意需要点击两次账号认证URL 并单独输入令牌。

    信用(一些问题已得到修复)- https://www.youtube.com/watch?v=qQ3CUHjbJ0w

    【讨论】:

      猜你喜欢
      • 2018-10-19
      • 2021-11-11
      • 1970-01-01
      • 2020-02-25
      • 1970-01-01
      • 2020-04-30
      • 1970-01-01
      • 1970-01-01
      • 2020-04-08
      相关资源
      最近更新 更多