Shell-shell多个文件按照用户每月消费合并成多列

Question

有个报表统计需求，现在有各个月份的用户消费报表：
201209.txt
A 50
B 10
C 30
201208.txt
B 30
C 20
D 10
201207.txt
A 3
B 5
D 3

....

需要合并成每个用户每月的消费,没有消费的月份填0：
用户 201209 201208 201207
A 50 0 3
B 10 30 5
C 30 20 0
D 0 10 3
使用shell如何实现。

Answer 1

个人认为可以使用awk来实现，把每个取出来写到一个新的文本中

Answer 2

[root@localhost ~]# more 20120*
::::::::::::::
201207.txt
::::::::::::::
A 3
B 5
D 3
::::::::::::::
201208.txt
::::::::::::::
B 30
C 20
D 10
::::::::::::::
201209.txt
::::::::::::::
A 50
B 10
C 30
[root@localhost ~]# cat aa.sh
#!/bin/bash

u=`cat *.txt | awk '{print $1}' | sort -u | tr "n" " "`
m=`ls *.txt | awk -F. '{print $1}' | tr "n" " "`

echo "user $m"

for i in $u ; do
echo -n "$i "
for j in $m ; do
p=`grep $i $j.txt | awk '{print $2}'`
echo -n "${p:=0} "
done
echo
done
[root@localhost ~]# bash aa.sh
user 201207 201208 201209
A 3 0 50
B 5 30 10
C 0 20 30
D 3 10 0
[root@localhost ~]#

思路是以用户为索引来获取每月的数据。

Answer 3

我想到的awk处理方法，还不如楼上用shell处理简洁，求优化

#1.统计出所有用户，放到一个文件
cat *.txt | awk '{print $1}' | sort -u >user

#2.把某月里面没有某些用户的情况补0，并放到临时文件
for i in `ls *.txt`
do
awk -F '{if (NR==FNR) {a[$0]=0};if(NR!=FNR){a[$1]=$2}}
END{for(i in a){printf ("%s %.0fn",i,a[i])}}' user $i |sort -n >$i.2 &
done

#3.输出结果
awk -F '{a[$1]=a[$1]" "$2}END{for(i in a){printf ("%s %sn",i,a[i])}}' *.txt.2 |sort -n