远程linux服务器到远程linux服务器大型稀疏文件复制 - 如何？

Question

我有两台 CentOS 5.4 服务器，每台服务器上都安装了 VMware Server。

假设我始终对 vmware 虚拟机使用稀疏文件，将虚拟机文件从一台服务器复制到另一台服务器的最可靠、最快速的方法是什么？

虚拟机的文件复制起来很痛苦，因为它们非常大（50 GB），但由于它们是稀疏文件，我认为可以采取一些措施来提高复制速度。

Answer 1

如果您想快速复制大量数据，通过 SSH 的 rsync 不适合您。由于运行 rsync 守护进程进行快速一次性复制也有些过分，所以老的 tar 和 nc 可以按如下方式实现这一点。

创建将通过网络提供文件的进程：

tar cSf - /path/to/files | nc -l 5000

请注意，可能需要 tar 很长时间来检查稀疏文件，因此暂时看不到任何进展是正常的。

并在另一端接收包含以下内容的文件：

nc hostname_or_ip 5000 | tar xSf -

---

或者，如果您想获得所有精彩，请使用 pv 显示进度：

tar cSf - /path/to/files \
   | pv -s `du -sb /path/to/files  | awk '{ print $1 }'` \
   | nc -l 5000

稍等一下，直到您看到 pv报告一些字节已经通过，然后在另一端启动接收器：

nc hostname_or_ip 5000 | pv -btr | tar xSf -

Answer 2

您是否尝试过 rsync 与选项 --sparse （可能通过 ssh）？

来自man rsync：

    Try  to  handle  sparse  files  efficiently so they take up less
    space on the destination.  Conflicts with --inplace because it’s
    not possible to overwrite data in a sparse fashion.

Answer 3

由于 rsync 复制稀疏文件的速度非常慢，因此我通常使用 tar 而不是 ssh ：

tar Scjf - my-src-files | ssh [email protected] tar Sxjf - -C /the/target/directory

Answer 4

您可以查看 http://www.barricane.com/virtsync

（免责声明：我是作者。）