根据条件通过一个或多个 grep 命令传递相同的输出

Question

我目前正在编写一个 bash 脚本来修改 LaTeX 编译的输出，以仅包含我在控制台上找到的相关打印内容。因为我希望这个脚本非常彻底，所以我设置了不同的选项来同时切换不同的输出过滤器，具体取决于通过编译给出的信息的性质（致命错误、警告、过度/不足 h/vbox.. .)。

对于那些可能不知道的人来说，我们经常需要连续执行多次编译才能获得完整的 LaTeX 文档，其中包含正确的标签、页码、索引、目录...+其他命令，例如 bibtex或 makeglossaries 用于参考书目和词汇表。因此，我有一个循环执行所有内容，并在遇到致命错误时停止，但如果只是轻微警告，则应该继续。

我的主命令行通过反向的 grep 管道输出 pdflatex 输出，该反向 grep 查找错误行（以 ! 开头）。像这样，只有当 grep 发现致命错误时脚本才会停止。

: | pdflatex --halt-on-error $@ | { ! grep --color=auto '^!.*' -A200; }

但是，当我激活任何其他过滤器（例如，用于过满/欠满行的 '*.full.*' ）时，我需要能够继续编译才能识别它，这是非常有必要的纠正它（嘿，有时，未满的线条并不那么难看......）。

这意味着我的 grep 命令无法像第一行那样反转，并且我无法（或不知道如何）将相同的 grep 与不同的正则表达式一起使用。请注意，如果使用不同的 grep，它也应该从 pdflatex 输出中读取，并且我无法直接在上面的代码片段之后通过管道传输它。

总而言之，它大致应该是这样的：

   pdflatex --> grep for fatal errors --> if more filters, grep for those filters
   --> pass to next step

我想出了几种无法正常工作的尝试：

只有当我想使用警告进行编译时，这个才有效。只寻找错误是行不通的。

latex_compilation() {
: | pdflatex --halt-on-error $@ | tee >({ ! grep --color=auto '^!.*' -A200; }) >({ grep --color=auto "$warnings_filter" -A5 };) >/dev/null
}


latex_compilation() {
: | pdflatex --halt-on-error $@ | tee >({ ! grep --color=auto '^!.*' -A200; }) >/dev/null | ({ grep --color=auto "$warnings_filter" -A5 };)
}

或者甚至拼命地

latex_compilation() {
: | pdflatex --halt-on-error $@ |
if [[ "$warnings_on" = true ]]; then
    { grep --color=auto "$warnings_filter" -A5 };
fi
{ ! grep --color=auto '^!.*' -A200; }
}

这个可以工作，但每个步骤使用 2 个编译过程（对于一个大而复杂的文档，您可以轻松地达到 7/8 个编译步骤）。如果可能的话应该避免。

latex_compilation() {
if [[ "$warnings_on" = true ]]; then
    : | pdflatex --halt-on-error $@ | \
    { grep --color=auto "$warnings_filter" -A5 };
fi
: | pdflatex --halt-on-error $@ | \
{ ! grep --color=auto '^!.*' -A200; }
}

我花了几个小时在网上寻找解决方案，但还没有找到。 我真的希望这足够清楚，因为总结起来很混乱，而且写起来也很混乱。如果需要清晰起见，您可以在此处找到相关代码。

Answer 1

这个可以工作，但使用 2 个编译过程

，所以我们使用一个。

latex_compilation() {
   local tmp
   tmp=$(pdflatext ... <&-)
   if [[ "$warnings_on" = true ]]; then
       grep --color=auto "$warnings_filter" -A5 <<<"$tmp"
   fi
   ! grep --color=auto '^!.*' -A200 <<<"$tmp"
}

或者，您可以通过使用您选择的程序语言解析输出来异步执行此操作。对于 Bash，请参阅 https://mywiki.wooledge.org/BashFAQ/001 ：

line_is_warning() { .... }
latex_compilation() {
   local outputlines=0 failed
   while IFS= read -r line; do
       if "$warnings_on" && line_is_warning "$line"; do
           outputlines=5  # will output 5 lines after
       fi
       if [[ "$line" =~ ^! ]]; then
           failed=1
           outputlines=200 # will output 200 lines after
       fi
       if ((outputlines != 0)); then
           ((outputlines--))
           printf "%s\n" "$line"
       fi
   done < <(pdflatext ... <&-)
   if ((failed)); then return 1; fi
}

但是 Bash 会速度非常慢。考虑使用 AWK 或 Python 或 Perl。

在线寻找解决方案

确切地说，您必须根据您的具体要求自己编写解决方案。

只有当我想在带有警告的情况下进行编译时，他的方法才有效。仅查找错误是行不通的。

您可以在 >( ... ) 内以及基本上任何地方编写整个代码块。管道的退出状态是最右边命令的退出状态（set -o pipelinefail 除外）。将失败的命令放在管道的最右侧。

latex_compilation() {
    pdflatex --halt-on-error "$@" <&- |
    tee >(
       if "$warnings_on"; then
         grep --color=auto "$warnings_filter" -A5
       else
          cat >/dev/null
       fi
    ) |
    ! grep --color=auto '^!.*' -A200
}

Answer 2

建议使用 awk 过滤模式。

详细了解 awk 过滤模式 这里。

使用awk，您可以创建复杂的过滤模式逻辑：!=not、&&=and、||=或。

例如，如果您有 3 个过滤正则表达式模式：Pattern_1、Pattern_2、Pattern 3。

示例 1

您可以在以下命令中对所有 3 个模式进行组合过滤：

awk '/Pattern_1/ && /Pattern_2/ && /Pattern_3/ 1' scanned_file1 scanned_file2 ...

结果将仅打印与所有 3 个模式匹配的行。

示例 2

您可以在以下命令中对所有 3 个模式进行组合反向过滤：

awk '!/Pattern_1/ && !/Pattern_2/ && !/Pattern_3/ 1' scanned_file1 scanned_file2 ...

结果将打印与 3 个模式中任何一个都不匹配的行。

示例 3

您可以创建组合逆过滤器 Pattern_1 并匹配 Pattern_2 或 Pattern_3：

awk '!/Pattern_1/ && (/Pattern_2/ || /Pattern_3/)' scanned_file1 scanned_file2 ...

结果将打印与 Pattern_1< 不匹配的行/code> 但匹配 Pattern_2 或 Pattern_3。