如何在两个文件中搜索重复的用户，然后打印这些行？

Question

我有两个文件：FILE1 和 FILE2

FILE1:

user1        1.1.1.1
user2        2.2.2.2
user3        3.14.14.3
user4        4.4.4.4
user5        198.222.222.222

FILE2:

user1        99.22.54.214
user66       45.22.88.88
user99       44.55.66.66
user4        8.8.8.8
user39       54.54.54.54
user2        2.2.2.2

OUTPUT FILE:

user1        1.1.1.1
user1        99.22.54.214
user2        2.2.2.2
user4        4.4.4.4
user4        8.8.8.8

我尝试使用 for 循环，但取得了特别的成功。 谁能给我写一个代码吗？ 谢谢！

Answer 1

while read user ip ; do match=`grep -E "$user " file2 2>/dev/null` ; if [ $? -eq 0 ] ; then echo $user $ip ; echo $match ; fi ; done < file1
user1 1.1.1.1
user1 99.22.54.214
user2 2.2.2.2
user2 2.2.2.2
user4 4.4.4.4
user4 8.8.8.8

Answer 2

fgrep -h -f <(cut -d ' ' -f 1 FILE1 FILE2 | sort | uniq -d) FILE1 FILE2 | sort -k1

这会从两个文件中删除第一个字段，然后搜索重复项，然后在两个文件中搜索相关行。但是您也可以通过多种方式使用 AWK 执行此操作...例如：

awk '{if ( users[$1] = "" ) { users[$1]=$2 ; printed[$1]=0} else { if (printed[$1]==0) {print $1 users[$1] ; printed[$1]=1 ; print $0 } else { print $0 } }' | sort

当它第一次看到用户时，保存该行，然后在下一次（次）看到同一用户时，检查第一次出现是否已经打印，如果没有，它会打印第一次出现的情况，然后是实际出现的情况。如果打印第一次出现，则仅打印实际行。

华泰

Answer 3

$ awk 'FNR==NR{a[$1]=$0;next}($1 in a){print $0;print a[$1]} ' file2 file1 | uniq
user1        1.1.1.1
user1        99.22.54.214
user2        2.2.2.2
user4        4.4.4.4
user4        8.8.8.8

Answer 4

这是我的尝试，它保留了一行内的空格。首先，创建一个名为 showdup.awk 的脚本：

# showdup.awk
$1 != lastkey {
    # Flush out the last set: only print out if the last set contains
    # more than one lines
    if (count > 1) {
        for (i = 0; i < count; i++) {
            print savedLine[i]
        }
    }

    # Reset the count
    count = 0
}

{
    savedLine[count++] = $0;
    lastkey = $1;
}

接下来，调用 showdup.awk：

cat file1 file2|sort|awk -f showdup.awk

Answer 5

看一下unix命令uniq

http://unixhelp.ed.ac.uk /CGI/man-cgi?uniq

假设文件中存在空格字符而不是制表符
像这样的东西可能会起作用

cat file1 file2 |排序|独特的-D -w6 | uniq >file3

抱歉，更正了上面的错误...