如何处理 AZcopy 失败的文件传输

开发者

我正在将大量小文件从本地文件系统复制到 Azure blob 存储。很少有文件无法上传。似乎 AZcopy 只是记录这些失败,并且没有简单的方法可以重试上传这些文件。一个一个地搜索每个文件并手动上传它是不可行的(在时间上)。是否有任何建议可以处理这些故障并重试自动上传到 Blob?

龚杰

如果传输作业错误不是由 sas 令牌或身份验证引起的,您可以尝试从此链接中的以下命令行

显示失败作业的错误信息:

azcopy jobs show <job-id> --with-status=Failed

在此处输入图片说明

修复它们,然后执行恢复命令:

azcopy jobs resume <job-id> --source-sas="<sas-token>"
azcopy jobs resume <job-id> --destination-sas="<sas-token>"

请参考上面命令的说明:

恢复作业时,AzCopy 会查看作业计划文件。计划文件列出了在首次创建作业时确定要处理的所有文件。恢复作业时,AzCopy 将尝试传输计划文件中列出但尚未传输的所有文件。

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

AZCopy 获取失败的传输文件列表

来自分类Dev

如何处理文件?

来自分类Dev

AzCopy - 如何使用 SAS 将单个文件上传到容器

来自分类Dev

$ .when的失败如何处理?

来自分类Dev

如何处理失败的期货

来自分类Dev

如何处理从回声通过管道传输的文件?

来自分类Dev

如何处理文件路径?

来自分类Dev

如何使rsync跳过传输失败的文件?

来自分类Dev

AZCopy:设置文件内容类型

来自分类Dev

当git合并失败时,其余文件会如何处理?

来自分类Dev

如何处理失败的Redis连接

来自分类Dev

如何处理CollectionFS保存失败

来自分类Dev

如何处理malloc失败并返回NULL?

来自分类Dev

Npgsql如何处理失败的事务?

来自分类Dev

JUnit如何处理预期的失败?

来自分类Dev

如何处理失败的“系统”调用?

来自分类Dev

XMLHttpRequest 失败时如何处理?

来自分类Dev

使用租户 ID 自动登录 azcopy 失败

来自分类Dev

可以恢复失败文件传输的程序如何知道从何处开始追加数据?

来自分类Dev

如何处理大型XAML文件

来自分类Dev

如何处理串联的Avro文件?

来自分类Dev

如何处理被拖到jar上的文件?

来自分类Dev

numpy如何处理mmap的npz文件?

来自分类Dev

如何处理文件路径中的空格

来自分类Dev

子进程如何处理文件指针?

来自分类Dev

如何处理内存中的Excel文件?

来自分类Dev

在NLP中如何处理字母文件?

来自分类Dev

RPM如何处理文件位置?

来自分类Dev

如何处理过多的Flash文件?