使用 Bash For 循环搜索文件中的唯一行

Question

我有一个带有文件名列表的文件 sortedfile.txt 。我正在搜索另一个文件 ngfilelist.txt，其中包含 sortedfile.txt 中所有重复文件的文件列表。

我正在使用这个命令，

 for X in `uniq -d ~/Desktop/sortedfiles.txt`; do grep "$X" ~/Desktop/ngfilelist.txt; done

我应该纠正什么？

Answer 1

我会做这样的事情：

cat sortedfiles.txt | xargs -n1 -i{} grep '^{}
我发现使用 xargs 为每行运行 grep 更容易，而不是使用 for 循环sortedfiles.txt 与 ngfilelist.txt 对比。输出是在两个文件中找到的文件名的列表。
请注意， ^ 和 $ 仅用于匹配完整的文件名，因为部分匹配可能不会被视为问题的有效结果。
 ngfilelist.txt

我发现使用 xargs 为每行运行 grep 更容易，而不是使用 for 循环sortedfiles.txt 与 ngfilelist.txt 对比。输出是在两个文件中找到的文件名的列表。

请注意， ^ 和 $ 仅用于匹配完整的文件名，因为部分匹配可能不会被视为问题的有效结果。

Answer 2

这可能对你有用：

 awk 'FNR==NR{f[$1]++;next}$1 in f && f[$1]>1{print}' sortedfiles.txt ngfilelist.txt