如何在单个目录中以最少的分叉数量创建符号链接？

Question

在以下情况下如何在单个目录中创建符号链接：

1. 常见方法失败：

ln -s /readonlyShare/mydataset/*.mrc .
# -bash: /bin/ln: Argument list too long

2. find 命令不允许使用以下语法：

find /readonlyShare/mydataset -maxdepth 1 -name '*.mrc' -exec ln -s {} . +
# find: missing argument to `-exec'

3. 使用狂野分叉需要数小时才能完成：

find /readonlyShare/mydataset -maxdepth 1 -name '*.mrc' -exec ln -s {} . ';'

Answer 1

find readonlyShare/mydataset -name '*.mrc' -maxdepth 1 -exec ln -s '{}' '+' .

或者如果您更喜欢 xargs：

find readonlyShare/mydataset -name '*.mrc' -maxdepth 1 -print0 |
  xargs -0 -P0 sh -c 'ln -s "$@" .' sh

如果您使用的是 BSD xargs 而不是 GNU xargs，那么它会更简单：

find readonlyShare/mydataset -name '*.mrc' -maxdepth 1 -print0 |
  xargs -0 -J@ -P0 ln -s @ .

为什么 '{} ''+'？

引自 man find：

-exec utility [argument ...] {} +
             Same as -exec, except that “{}” is replaced with as many pathnames as possible for each invocation of utility.  This behaviour is similar
             to that of xargs(1).  The primary always returns true; if at least one invocation of utility returns a non-zero exit status, find will
             return a non-zero exit status.

find 擅长分割大量参数：

find readonlyShare/mydataset -name '*.mrc' -maxdepth 1 -exec ruby -e 'pp ARGV.size' '{}' '+'

15925
15924
15925
15927
1835

为什么不使用 xargs -I？

它效率不高而且速度慢，因为 -I 按每个参数执行实用程序，例如：

printf 'foo\0bar' | xargs -0 -I@ ruby -e 'pp ARGV' @

["foo"]
["bar"]

printf 'foo\0bar' | xargs -0 ruby -e 'pp ARGV'

["foo", "bar"]

xargs 也擅长分割大量参数

seq 65536 | tr '\n' '\0' | xargs -0 ruby -e 'pp ARGV.size'

5000
5000
5000
5000
5000
5000
5000
5000
5000
5000
5000
5000
5000
536

为什么 sh -c< /代码>?

只有 BSD xargs 有 -J 标志来将参数放在命令中间。对于 GNU xargs，我们需要结合 sh -c 和 "$@" 来完成同样的事情。

find -exec 与 find | xargs

这取决于情况，但我建议当您想利用所有 CPU 时使用 xargs。 xargs 可以通过 -P 并行执行实用程序，而 find 则不能。

Answer 2

^{当我需要它的时候，我很着急，所以我没有探索所有的可能性，但我同时解决了一些问题}

感谢@WeihangJian的回答，我现在知道找到... | xargs -I {} ... 与 find ... -exec ... {} ';' 一样糟糕。

我的问题的正确答案是：

find /readonlyShare/mydataset -maxdepth 1 -name '*.mrc' \
    -exec sh -c 'ln -s -- "$@" .' _ {} +