返回介绍

1.23 FDS第三方迁移工具

发布于 2020-10-01 16:22:05 字数 4484 浏览 890 评论 0 收藏 0

简介

FDS提供了第三方对象存储引擎迁移到FDS的命令行工具。工具下载地址:migration-tool.tar.gz

使用方法

参数可选值含义例子
-stfds或oss (必填)迁移源端的对象存储名称,目前支持fds/oss/s3/ks3sh migration-tool.sh -st fds
sh migration-tool.sh -st oss
-se必填源端对象存储系统的endpointsh migration-tool.sh -se xxx.fds.api.xiaomi.com
sh migration-tool.sh -se http://oss-cn-beijing.aliyuncs.com
-sak必填源端对象存储的accessKey
-ssk必填源端对象存储的secretKey
-sb必填源端对象存储的bucket
-de必填目标fds的endpointsh migration-tool.sh -de xxx.fds.api.xiaomi.com
-dak必填目标fds的accessKey
-dsk必填目标fds的secretKey
-db必填目标fds的bucket
-bw可选每个线程最大带宽,单位MB,默认10MB
-ps可选迁移的线程数, 默认是10
-nsle可选不跳过已存在的object, 即覆盖已存在的文件sh migration-tool.sh -nsle
-sm可选指定起始的object(指定后包含该object),默认为null,即从头开始
-em可选指定结束的object(指定后不包含该object),默认为null,即到bucket的最后
-p可选指定要迁移的object前缀,默认为null,即bucket下的所有object
-fp可选指定objects列表的文件路径

注意事项

迁移过程中,可能出现迁移失败的object

在log中,每分钟会打印一次迁移统计的log,copiedBad是指拷贝了,但是损坏了的文件数(迁移工具会自动删掉),copiedFailed是指迁移失败的文件数,可以通过在log中搜关键词“Copied bad” 和 “Failed to copy object” 找到对应的object名

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文