具有多个参数的 xargs

Question

我有一个源输入，input.txt，

a.txt
b.txt
c.txt

我想将这些输入输入到程序中，如下所示：

my-program --file=a.txt --file=b.txt --file=c.txt

所以我尝试使用xargs，但没有运气。

cat input.txt | xargs -i echo "my-program --file"{}

它给出了

my-program --file=a.txt
my-program --file=b.txt
my-program --file=c.txt

但我想要

my-program --file=a.txt --file=b.txt --file=c.txt

任何想法吗？

Answer 1

不要听他们所有人的。 :) 看一下这个例子：

echo argument1 argument2 argument3 | xargs -l bash -c 'echo this is first:$0 second:$1 third:$2'

输出将是：

this is first:argument1 second:argument2 third:argument3

Answer 2

到目前为止给出的解决方案都没有正确处理包含空格的文件名。如果文件名包含 ' 或 "，有些甚至会失败。如果您的输入文件是由用户生成的，您应该为令人惊讶的文件名做好准备。

(echo a1.txt; echo b1.txt; echo c1.txt;
 echo a2.txt; echo b2.txt; echo c2.txt;) |
parallel -N 3 my-program --file={1} --file={2} --file={3}

rel="noreferrer" >

(echo a1.txt; echo b1.txt; echo c1.txt;
 echo a2.txt; echo b2.txt; echo c2.txt;) |
parallel -X -N 3 my-program --file={}

GNU Parallel 可以很好地 程序接受命令行中容纳的尽可能多的参数：

(echo a1.txt; echo b1.txt; echo c1.txt;
 echo d1.txt; echo e1.txt; echo f1.txt;) |
parallel -X my-program --file={}

观看介绍视频以了解更多信息：http: //www.youtube.com/watch?v=OpaiGYxkSuQ

Answer 3

怎么样：

echo 
a.txt\nb.txt\nc.txt' | xargs -n 3 sh -c '
   echo my-program --file="$1" --file="$2" --file="$3"
' argv0

Answer 4

如果您使用两个 xargs 调用，那就更简单了：第一个将每一行转换为 --file=...，第二个实际执行 xargs 操作 ->

$ cat input.txt | xargs -I@ echo --file=@ | xargs echo my-program
my-program --file=a.txt --file=b.txt --file=c.txt

Answer 5

您可以使用 sed 在每行添加 --file= 前缀，然后调用 xargs：

sed -e 's/^/--file=/' input.txt | xargs my-program

Answer 6

这是一个使用 sed 处理三个参数的解决方案，但受到限制，因为它对每个参数应用相同的转换：

cat input.txt | sed 's/^/--file=/g' | xargs -n3 my-program

这是一个适用于两个参数的方法，但允许更大的灵活性：

cat input.txt | xargs -n 2 | xargs -I{} sh -c 'V="{}"; my-program -file=${V% *} -file=${V#* }'

Answer 7

我偶然发现了一个类似的问题，并找到了一个我认为比迄今为止提出的解决方案更好、更干净的解决方案。

我结束时的 xargs 语法是（对于您的示例）：

xargs -I X echo --file=X

完整的命令行是：

my-program $(cat input.txt | xargs -I X echo --file=X)

它将像

my-program --file=a.txt --file=b.txt --file=c.txt

完成一样工作（提供 input.txt包含示例中的数据）。

---

实际上，就我而言，我需要首先找到文件，并且还需要对它们进行排序，以便我的命令行如下所示：

my-program $(find base/path -name "some*pattern" -print0 | sort -z | xargs -0 -I X echo --files=X)

一些可能不清楚的细节（它们不适合我）：

• some*pattern必须加引号，否则 shell 会在传递给 find 之前对其进行扩展。
• -print0，然后是 -z，最后是 -0 使用空分隔来确保正确处理带有空格或其他连线名称的文件。

但请注意，我还没有对其进行深入测试。尽管它似乎正在发挥作用。

Answer 8

这是因为 echo 打印换行符。尝试类似的东西

echo my-program `xargs --arg-file input.txt -i echo -n " --file "{}`

Answer 9

xargs 不是这样工作的。尝试：

  myprogram $(sed -e 's/^/--file=/' input.txt)

Answer 10

我正在寻找针对这个确切问题的解决方案，并得出了在中间编写脚本的结论。

要转换下一个示例的标准输出，请使用 -n '\n' 分隔符

示例：

 user@mybox:~$ echo "file1.txt file2.txt" | xargs -n1 ScriptInTheMiddle.sh

 inside the ScriptInTheMidle.sh:
 !#/bin/bash
 var1=`echo $1 | cut -d ' ' -f1 `
 var2=`echo $1 | cut -d ' ' -f2 `
 myprogram  "--file1="$var1 "--file2="$var2 

要使此解决方案正常工作，您需要在这些参数 file1.txt 和 file2.txt 之间有一个空格，或者您选择的任何分隔符，再一个事情，在脚本中确保您检查 -f1 和 -f2，因为它们的意思是“取第一个单词并取第二个单词”，具体取决于找到的第一个分隔符的位置（分隔符可以是 ' ' ';' '.' 任何你想要的单引号之间。
添加任意数量的参数。

使用 xargs、cut 和一些 bash 脚本解决了问题。

干杯!

如果你想路过，我有一些有用的提示http://hongouru.blogspot.com

Answer 11

实际上，这相对简单：

... | sed 's/^/--prefix=/g' | sed 's/^/--prefix=/g' | xargs 回显 | xargs -I PARAMS your_cmd PARAMS

sed 's/^/--prefix=/g' 是可选的，以防您需要为每个参数添加 --prefix= 前缀。

xargs echo 将参数行列表（每行一个参数）转换为单行中的参数列表，并且 xargs -I PARAMS your_cmd PARAMS 允许您运行命令，将参数放置在您想要的位置。

所以cat input.txt | sed 's/^/--file=/g' | sed 's/^/--file=/g' | xargs 回声 | xargs -I PARAMS my-program PARAMS 执行您需要的操作（假设 input.txt 中的所有行都很简单并且每行都符合单个参数值）。

Answer 12

如果您不知道前面的文件数量，还有另一种好方法可以做到这一点：

my-program $(find . -name '*.txt' -printf "--file=%p ")

Answer 13

大多数答案没有考虑到输入行中的某些字符可能会破坏 xargs 和/或不带引号的 $(...)。

以下是一些可以正确完成工作（即稳健且高效）的解决方案。

---

1. PURE BASH

您可以将输入行加载到 bash 数组中，并使用参数扩展将 --file= 添加到每个元素：

readarray -t files < input.txt

my-program "${files[@]/#/--file=}"

警告！< /strong> 不要使用此方法为每个数组元素生成多个参数（例如 ‑f Space xxx.txt）。

---

2. AWK | XARGS -0

您可以使用 awk 在每行前面添加 --file= 并生成一个 NUL 分隔的流，该流可以由 xargs -0 安全处理：

awk '{printf("--file=%s%c",$0,0)}' input.txt |
xargs -0 my-program

---

3。 SED | XARGS

如果您需要遵守POSIX：

sed -e 's/"/"\\""/g' -e 's/.*/--file="&"/' input.txt |
xargs my-program

Answer 14

还没有人提到从循环中回显，所以为了完整起见，我将其放入（这将是我的第二种方法， sed 是第一种）：

for line in $(< input.txt) ; do echo --file=$line ; done | xargs echo my-program

Answer 15

我发现了一个更直接的方法。您甚至可以根据自己的喜好自定义位置参数的顺序，如下面的演示所示。

set $(cat input.txt)
my-program --file=$1 --file=$3 --file=$2

这在您知道输入中参数的顺序和大小的情况下效果很好。

Answer 16

旧的，但这是一个更好的答案：

cat input.txt |
gsed "s/\(.*\)/\-\-file=\1/g" |
tr '\n' ' ' |
xargs my_program

gsed 只是 GNU sed 以确保语法与版本匹配。 brew install gsed 或者只是 sed（如果您已经使用 GNU/Linux）...

测试一下：

cat input.txt |
gsed "s/\(.*\)/\-\-file=\1/g" |
tr '\n' ' ' |
xargs echo my_program