hadoop streaming中shuffle过程问题

Question

hadoop streaming map reduce 输入输出疑问

    hadoop 中在map和reduce中间会有一个shuffle过程。所以正常来说map输出reduce的输入应该如下:

# map输出
2018-02-11    1
2018-02-11    0
2018-02-11    4
2018-02-11    0
2018-02-11    0

# reduce输入
2018-02-11 [1,0,4,0,0]

但是实际过程中发现，map的输入和reduce的输出是相同的。

hadoop使用如下:

${hadoop_bin} streaming \
    -input ${hdfs_input} \
    -output ${hdfs_output} \
    -mapper "lib/python/bin/pythonmapper.py" \
    -reducer "cat" \
    -file ${WORK_DIR}/mapper.py \
    -cacheArchive ${python_lib}\#lib \
    -jobconf mapred.job.name="${jobname}" \
    -inputformat org.apache.hadoop.mapred.TextInputFormat \
    -outputformat org.apache.hadoop.mapred.TextOutputFormat \

请问:

• hadoop streaming中的shuffle过程 是否真的没有merge的过程？
• 有merge的shuffle过程，是否只在非streaming的hadoop中存在?
• hadoop streaming中shuffle过程到底是做什么？

   希望有人能帮我解答一下，多谢