0
我试图上传一个大的目录(1TB)与成千上万的'小'文件(gsutil -m cp -R -q/dir/* gs:// bucket_name)。但几个小时后,我可以看到CPU使用率猛增至100%,网络流量永久降至0。似乎在md5sum应该花费不到一秒的随机文件中遇到“赶上md5进行恢复上传”。gsutil和大批量上传
我试图上传一个大的目录(1TB)与成千上万的'小'文件(gsutil -m cp -R -q/dir/* gs:// bucket_name)。但几个小时后,我可以看到CPU使用率猛增至100%,网络流量永久降至0。似乎在md5sum应该花费不到一秒的随机文件中遇到“赶上md5进行恢复上传”。gsutil和大批量上传
我们现在已经在gsutil 3.18版中解决了这个问题。您可以通过运行得到它 :
GSUtil的更新
请让我们知道,如果你继续有应用此更新后的问题。
我正在运行一些测试,目前为止这么好;光滑如黄油。 – user1345178