gsutil

1热度

1回答

我正尝试使用GS Python库中提供的代码示例从Google云端存储下载大文件（2.5GB）。这适用于较小的文件（我已经在一些1-2KB文件上测试过）。我在Windows 7 dest_dir = c:\\downloadfolder networkbucket = bucketname uri = boto.storage_uri(networkbucket,'gs') for obj

1热度

1回答

谷歌云存储与gspythonlibrary

我必须写一个python脚本，我应该能够列出其他已准备好大访问权限的人拥有的其他受保护的存储桶。为此，我创建了一个项目，并在Google API控制台中启用了Google云端存储，然后安装了gsutil并将“我的凭据”存储在“.boto”文件中。现在我必须列出我有权访问的所有存储桶的元数据。我的问题是我或其他存储桶所有者必须做什么来授予对我/我的项目的访问权限，以便我的脚本可以列出存储桶中所有存储

2热度

2回答

gsutil cp -Rn s3：// foo gs：// bar比较慢，消耗的入口比出口大很多

我试图在S3中复制数据。我们正在谈论数十万个合理的大斑点（许多在1GB-100GB范围内）。这些操作是在美国东部的一台机器上执行的，用于美国标准中的S3 blob。 gsutil 3.34似乎需要比出口更多的入口，即使在运行几个小时后。我试图调整一些选项，但没有得到任何地方。示例度量值：78387.82 KB/s vs 3154.36 KB/s out。我可以很好地获得2倍的比例，但10倍+真

0热度

1回答

谷歌存储桶上传权限

我试图创建“卖方收存箱”，利用指令Google cloud storage documntation 的folloing组命令被执行：创建铲斗 gsutil mb gs://customer-10 添加外部用户权限 gsutil chacl -u [email protected]:FC gs://customer-10 添加默认的ACL gsutil chdefacl -u -u [

0热度

1回答

Google云端存储客户端库 - 默认公开检查共享

我正在使用Google云端存储客户端库动态上传文件并向其提供文件。上传部分工作正常。这没有问题。我面临的问题是上传后，如果我尝试访问我的应用程序中的文件，服务链接被破坏。因此，我去了Google云端控制台，我注意到的一件事是Shared Publicly没有被选中。如果我选中Shared Publicly复选框，那么我可以在我的应用程序中访问该文件。我已经尝试过使用public-read和

2热度

4回答

GSUtil的不GCE工作

所以，当我提出用标准的Debian 7图像GCE实例，并出具了“的gsutil配置”命令时，出现以下消息： [email protected]:~$ gsutil config Failure: No handler was ready to authenticate. 4 handlers were checked. ['ComputeAuth', 'OAuth2Auth', 'OAuth2Se

2热度

2回答

的gsutil给失败：PKCS12格式不被PyCrpto库

在 https://developers.google.com/storage/docs/object-change-notification#_Service_Account 指定我试图对象存储通知配置支持我跟着然而上运行“的gsutil ls”的命令，我获得以下错误的具体步骤： /usr/local/gsutil/gsutil ls Failure: PKCS12 format is not

2热度

2回答

管gsutil输出到文件

问候StackOverflow，我正在研究Windows上的一个小项目，它需要读取GSUTIL的复制功能的输出。问题是，复制功能的输出似乎不能通过标准输出工作。此外，GSUTIL的行为不一致：管道输出不适用于复印功能，但使用列表功能是行不通的。当我在命令提示符中使用以下命令时，输出显示在命令提示符中，但未重定向到文本文件。该命令不工作的权利： C:\gsutil> python gsutil

1热度

2回答

限制并行文件到cp的数量

我在具有25个4gb json文件的目录（我也在使用-z选项进行压缩）上并行运行gsutil cp命令（使用-m选项）。 gsutil -m cp -z json -R dir_with_4g_chunks gs://my_bucket/ 当我运行它时，它将打印出终端，它正在复制除一个文件以外的所有文件。我的意思是，它打印每个文件的这些行之一： Copying file://dir_with_

2热度

1回答

使用gsutil工具，可以列出文件名与正则表达式匹配的文件吗？

我想列出不以某个前缀开头的文件。我可以列出他们罚款，像这样： gsutil ls gs://my_bucket/my_prefix* 我该如何做相反的？