Gsutil rm不会删除所有内容

约瑟夫·尤林

我的一项自动化工作有问题。在启动云数据流作业之前,我对以前的文件执行了gsutil rm,但似乎并不能删除所有内容,因为在启动另一个数据流作业时,会保留一些较旧的碎片。

我试过了 :

gsutil -m rm gs://mybucket/blahblah/* 

gsutil rm -r gs://mybucket/blablah

但结果相同

奇怪的是没有删除的文件也不是第一个也不是最后一个。我坚信这是我的第二项工作错误,但事实是我在日志中看到确实没有删除bu gsutil文件。

是否有太多文件要删除?gsutil rm可靠性是否存在已知问题?

我使用的是Google Cloud SDK的0.9.80版

谢谢

迈克·施瓦兹(Mike Schwartz)

您使用的gsutil rm命令取决于列出存储桶中的对象,这是Google Cloud Storage中最终一致的操作。因此,有可能在写入对象后不久在存储桶中尝试这些命令将不会删除所有对象。如果稍后再试,它将成功。

避免此问题的一种方法是跟踪上载的对象的名称,并在gsutil rm命令中明确列出这些对象。例如,如果将对象列表保留在文件objects.manifest中,则可以在Linux或MacOS上运行以下命令:

xargs gsutil -m rm < objects.manifest

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

使用 gsutil 从 CSV 下载所有行

来自分类Dev

gsutil:ImportError:没有名为google的模块

来自分类Dev

没有提示的Google gsutil身份验证

来自分类Dev

无法在带有 R cloudml 包的 Windows 上找到 gsutil

来自分类Dev

gsutil-如何从Google私有云复制/下载所有文件?

来自分类Dev

gsutil无法为所有者的特定文件获取ACL

来自分类Dev

为什么gsutil rsync重新下载我们所有的文件?

来自分类Dev

gsutil无法为所有者的特定文件获取ACL

来自分类Dev

git rm *不会一次删除所有文件

来自分类Dev

使用Google云端存储和gsutil无法生成有效的SignedURL

来自分类Dev

Google Clous存储-Java API中是否有gsutil'rsync'等效项?

来自分类Dev

GSUTIL没有重新上传当天早些时候已经上传的文件

来自分类Dev

gsutil导致“ CommandException:您具有多种类型的已配置凭据”

来自分类Dev

gsutil无法上传带有“编解码器无法解码字节”错误的文件

来自分类Dev

使用 rm 删除多个文件,只对所有内容进行一次确认 (rm -i)?

来自分类Dev

在Windows上安装gsutil

来自分类Dev

gsutil上的ResumableUploadAbortException

来自分类Dev

Gsutil通配符搜索

来自分类Dev

在Windows上安装gsutil

来自分类Dev

Gsutil通配符搜索

来自分类Dev

jQuery不会根据需要删除所有内容

来自分类Dev

gsutil-在Windows上使用正则表达式同步两个存储桶的内容时排除文件

来自分类Dev

gsutil make bucket命令[gsutil mb]无法正常工作

来自分类Dev

如果从Cygwin运行,“ rm -rf /”会从Windows删除所有内容吗?

来自分类Dev

gsutil config -a。使用哪个键?

来自分类Dev

自动化gsutil命令

来自分类Dev

如何从crontab正确运行gsutil?

来自分类Dev

Android gsutil工具无法运作

来自分类Dev

使用gsutil移动多个文件

Related 相关文章

  1. 1

    使用 gsutil 从 CSV 下载所有行

  2. 2

    gsutil:ImportError:没有名为google的模块

  3. 3

    没有提示的Google gsutil身份验证

  4. 4

    无法在带有 R cloudml 包的 Windows 上找到 gsutil

  5. 5

    gsutil-如何从Google私有云复制/下载所有文件?

  6. 6

    gsutil无法为所有者的特定文件获取ACL

  7. 7

    为什么gsutil rsync重新下载我们所有的文件?

  8. 8

    gsutil无法为所有者的特定文件获取ACL

  9. 9

    git rm *不会一次删除所有文件

  10. 10

    使用Google云端存储和gsutil无法生成有效的SignedURL

  11. 11

    Google Clous存储-Java API中是否有gsutil'rsync'等效项?

  12. 12

    GSUTIL没有重新上传当天早些时候已经上传的文件

  13. 13

    gsutil导致“ CommandException:您具有多种类型的已配置凭据”

  14. 14

    gsutil无法上传带有“编解码器无法解码字节”错误的文件

  15. 15

    使用 rm 删除多个文件,只对所有内容进行一次确认 (rm -i)?

  16. 16

    在Windows上安装gsutil

  17. 17

    gsutil上的ResumableUploadAbortException

  18. 18

    Gsutil通配符搜索

  19. 19

    在Windows上安装gsutil

  20. 20

    Gsutil通配符搜索

  21. 21

    jQuery不会根据需要删除所有内容

  22. 22

    gsutil-在Windows上使用正则表达式同步两个存储桶的内容时排除文件

  23. 23

    gsutil make bucket命令[gsutil mb]无法正常工作

  24. 24

    如果从Cygwin运行,“ rm -rf /”会从Windows删除所有内容吗?

  25. 25

    gsutil config -a。使用哪个键?

  26. 26

    自动化gsutil命令

  27. 27

    如何从crontab正确运行gsutil?

  28. 28

    Android gsutil工具无法运作

  29. 29

    使用gsutil移动多个文件

热门标签

归档