管道中的多个 grep 在完成后不会终止

Question

我似乎遇到了一个简单的 grep 语句在完成后未完成/终止的问题。

例如：

 grep -v -E 'syslogd [0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}: restart' |
 grep -v 'printStats: total reads from cache:' /var/log/customlog.log >\
 /tmp/filtered_log.tmp

上面的语句将删除内容并将它们保存到临时文件中，但是在 grep 处理完整个文件后，shell 脚本将挂起并且无法再继续。在命令行中手动运行命令时也会触发此行为。本质上，组合多个 grep 语句会导致类似 PAGER 的操作（more/less）。

有没有人有任何建议来克服这个限制？理想情况下，我不想执行以下操作，因为 customlog.log 文件有时可能会变得很大。

cat /var/log/customlog.log |
grep -v -E 'syslogd [0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}: restart' |
grep -v 'printStats: total reads from cache:' > /tmp/filtered_log.tmp

谢谢，

托尼

Answer 1

如上所述，您需要将文件名移至此处：

grep -v -E \
    'syslogd [0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}: restart' /var/log/customlog.log
| grep -v 'printStats: total reads from cache:' > /tmp/filtered_log.tmp

但您也可以组合两个 grep：

grep -v -E \
    -e 'syslogd [0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}: restart' \
    -e  'printStats: total reads from cache:' /var/log/customlog.log > \
    /tmp/filtered_log.tmp

节省一点 CPU 并同时修复您的错误。

顺便说一句，另一个可能的问题：如果同时运行此脚本的两个实例怎么办？两者都将使用相同的临时文件。在这种特殊情况下，这可能不是问题，但您最好习惯于为这种情况开发脚本。我建议您使用 $$ 将进程 ID 放入临时文件中：

tempFileName="/tmp/filtered_log.$.tmp"
grep -v -E -e [blah... blah.. blah] /var/log/customlog.log > $tempFileName

现在，如果两个不同的人正在运行此进程，您将无法让他们使用相同的临时文件。

---

附加

正如 uwe-kleine-konig 所指出的，您实际上最好使用 mktemp：

tempFileName=$(mktemp filtered_log.XXXXX)
grep -v -E -e [blah... blah.. blah] /var/log/customlog.log > $tempFileName

感谢您的建议。