使用 awk 处理文本

Question

我正在尝试使用 awk 处理 csv 文件。我的 csv 文件中有五行。我想要我的第 1 栏和第 1 栏第 3 列组合起来是唯一的。使用 awk 我写了

awk -F "," '{print $1,",",$2,","$3,",",$4,",",$5}' A.csv|sort|uniq > ;B.csv

此代码的作用是获得一个由 1 到 5 行组合而成的唯一行。我希望我的其他列位于最终的 csv 文件中，但仅按第一列和第三列进行排序和 uniq。

Answer 1

假设您想保留至少一个重复行

$ more file
1 2 3 4 5 6
7 4 6 3 5 8
1 43 3 6 5 10
2 3 4 4 4 4

$ awk '(!($1$3 in u)){u[$1$3]=$0}END{for(i in u ) print u[i]}' file
7 4 6 3 5 8
1 2 3 4 5 6
2 3 4 4 4 4

如果您不想保留重复行

$ awk '($1$3 in u){delete u[$1$3];next}{u[$1$3]=$0}END{for(i in u ) print u[i]}' file
7 4 6 3 5 8
2 3 4 4 4 4