BASH 在键上逐行减去文件

Question

我只想从一个 CSV 文件中减去另一个文件，但如果行相同则不会。我不想比较这些行，而是想看看这些行是否在一个字段中匹配。

例如，第一个文件

EMAIL;NAME;SALUTATION;ID
[email protected];Foo;Mr;1
[email protected];Bar;Ms;2

和第二个文件的

EMAIL;NAME
[email protected];Foo

结果文件应该是

EMAIL;NAME;SALUTATION;ID
[email protected];Bar;Ms;2

我想你知道我的意思；）

这在bash中怎么可能？对我来说，在 Java 中执行此操作很容易，但我真的很喜欢学习如何在 bash 中执行此操作。我也可以通过使用 sort 比较行来进行减法，

#! / bin / bash    
echo "Substracting Files..."

sort "/tmp/list1.csv" "/tmp/list2.csv" "/tmp/list2.csv" | uniq -u >> /tmp/subList.csv

echo "Files successfully substracted."

但这些行不是同一个元组。所以我必须将线路与按键进行比较。

有什么建议吗？非常感谢..尼尔斯

Answer 1

我想到的一种可能的解决方案是这个（使用 bash）：

grep -v -f <(cut -d ";" -f1 /tmp/list2.csv) /tmp/list1.csv

这意味着：
<代码>剪切-d“;” -f1 /tmp/list2.csv：提取第二个文件的第一列。
grep -f some_file：使用文件作为模式源。
<(some_command)：这是一个进程替换。它执行命令并将输出提供给命名管道，然后可以将其用作 grep -f 的文件输入。
grep -v：仅打印与模式不匹配的行。

Answer 2

更新：通过join和awk解决问题。

join --header -1 1 -2 1 -t";" --nocheck-order -v 1 1.csv 2.csv | | awk 'NR==1 {print gensub(";[^;]\\+$","","g");next} 1'     

这些是相反的答案：

$ join -1 1 -2 1 -t";" --nocheck-order -o 1.1,1.2,1.3,1.4 1.csv 2.csv 
EMAIL;NAME;SALUTATION;ID
[email protected];Foo;Mr;1

加入来救援。

或者跳过不带 -o 打印 NAME 字段：（

$ join -1 1 -2 1 -t";" --nocheck-order 1.csv 2.csv | awk 'BEGIN {FS=";" ; OFS=";"} {$NF=""; print }'

但它仍然在最后一个字段之后打印一个加号 ;

˛。HTH