【问题标题】:uploading zip files to google cloud with command line gsutil使用命令行 gsutil 将 zip 文件上传到谷歌云
【发布时间】:2020-08-16 12:53:07
【问题描述】:

我们有使用 Backup4All 创建的 zip 文件,我们想使用 gsutil rsync 命令行工具上传到 GCP。我最初使用拖放来查看 GCP 的当前备份,并且它们正常复制。当我运行 rsync 命令时,我得到一长串输出行。

Resuming upload for file://G:\BU4A\CVV backup\273_E001.zip
Catching up md5 for file://G:\BU4A\CVV backup\273_E001.zip...
/ [0 files][265.3 MiB/ 10.0 GiB]
\ [0 files][266.3 MiB/ 10.0 GiB]
| [0 files][268.6 MiB/ 10.0 GiB]
- [0 files][270.9 MiB/ 10.0 GiB]
\ [0 files][273.2 MiB/ 10.0 GiB]
/ [0 files][276.1 MiB/ 10.0 GiB]
- [0 files][278.9 MiB/ 10.0 GiB]
| [0 files][281.8 MiB/ 10.0 GiB]
/ [0 files][284.6 MiB/ 10.0 GiB]
\ [0 files][287.4 MiB/ 10.0 GiB]
/ [0 files][290.3 MiB/ 10.0 GiB]    2.7 MiB/s
- [0 files][293.1 MiB/ 10.0 GiB]    2.7 MiB/s
| [0 files][295.9 MiB/ 10.0 GiB]    2.7 MiB/s
/ [0 files][298.8 MiB/ 10.0 GiB]    2.7 MiB/s
\ [0 files][301.6 MiB/ 10.0 GiB]    2.7 MiB/s
/ [0 files][304.4 MiB/ 10.0 GiB]    2.7 MiB/s
- [0 files][307.3 MiB/ 10.0 GiB]    2.7 MiB/s
| [0 files][310.1 MiB/ 10.0 GiB]    2.7 MiB/s
/ [0 files][313.0 MiB/ 10.0 GiB]    2.7 MiB/s
\ [0 files][315.8 MiB/ 10.0 GiB]    2.7 MiB/s
| [0 files][318.6 MiB/ 10.0 GiB]    2.7 MiB/s
- [0 files][321.5 MiB/ 10.0 GiB]    2.7 MiB/s
| [0 files][324.3 MiB/ 10.0 GiB]    2.7 MiB/s
/ [0 files][327.1 MiB/ 10.0 GiB]    2.7 MiB/s
...
...
...

我正在使用

gsutil rsync -r "G:\BU4A\CVV backup" "gs://backup4all/CVV Backup"

将文件同步到 GCP。这是正常行为吗?这只发生在压缩文件上吗?我上传到另一个存储桶的数据库备份文件没有发生这种情况。我只想将 zip 文件复制到 GCP。不需要比较 zip 中的文件,因为它们不会更改。我搜索了有关上传 zip 文件的文档,但我只能找到有关动态创建 gzip 的说明。

【问题讨论】:

  • 不清楚您的实际问题是什么。你能把问题和问题说得更清楚吗?

标签: google-cloud-platform google-cloud-storage gsutil


【解决方案1】:

输出内容如下: 传输文件时出现中断。进程尝试在被中断的地方恢复。

无论如何,rsync 在文件级别进行检查(无论是通过校验和还是通过 mtime 检查),而不是提取 zip 文件。

这似乎是一个 10GiB 的上传。您正在对文件夹“G:\BU4A\CVV backup”使用递归选项,“273_E001.zip”是该文件夹内的一个文件。

如果您真的想以 2.7MiB/s 的速度上传 10GiB,这些行可以被读取为活动通知,在一定时间后将进度简单地写入标准输出。

【讨论】:

  • 那么这个输出和使用网站上传时更新进度条是一样的吗?
  • 不是“相同的”,但是是的,它是一种显示进度的方式,并且该过程仍然处于活动状态并正在转移一些东西。
猜你喜欢
  • 2016-04-30
  • 2014-11-26
  • 1970-01-01
  • 2018-08-01
  • 1970-01-01
  • 1970-01-01
  • 2014-08-03
  • 1970-01-01
  • 2014-09-04
相关资源
最近更新 更多