在 sed 中插入换行符 (Mac OS X)

Question

如何在 sed 的替换部分插入换行符？

这段代码不起作用：

sed "s/\(1234\)/\n\1/g" input.txt > output.txt

其中 input.txt 是：

test1234foo123bar1234

和 output.txt 应该是：

test
1234foo123bar
1234

但插入我得到这个：

testn1234foo123barn1234

注意：

这个问题专门关于 Mac OS X 版本的“sed”，社区注意到它的行为与 Linux 版本不同。

Answer 1

您的 sed 版本显然不支持 RHS（替换的右侧）中的 \n 。您应该阅读 Eric Pement 维护的 SED 常见问题解答，以选择一种可能的解决方案。我建议首先尝试插入文字换行符。

以下是其中的引述。

---

4.1。如何在替换的 RHS 中插入换行符？

sed 的多个版本允许直接在 RHS 中键入 \n，然后在输出时将其转换为换行符： ssed 、gsed302a+、gsed103（使用 -x 开关）、sed15+、sedmod 和 UnixDOS sed。最简单的解决方案是使用这些版本之一。

对于其他版本的 sed，请尝试以下操作之一：

(a) 如果从 Bourne shell 中键入 sed 脚本，如果脚本使用“单引号”，请使用一个反斜杠 \ ' 或两个反斜杠 \\ 如果脚本需要“双引号”。在下面的示例中，请注意第二行的前导 > 由 shell 生成，以提示用户进行更多输入。用户输入斜杠、单引号，然后按 ENTER 终止命令：

 [sh-prompt]$ echo twolines | sed 's/two/& new\
 >/'
 two new
 lines
 [bash-prompt]$

(b) 使用脚本文件，脚本中带有一个反斜杠 \，紧接着是换行符。这会将换行符嵌入到“替换”部分中。示例：

 sed -f newline.sed files

 # newline.sed
 s/twolines/two new\
 lines/g

某些版本的 sed 可能不需要尾随反斜杠。如果是这样，请将其删除。

(c) 插入一个未使用的字符并通过 tr 管道输出：

 echo twolines | sed 's/two/& new=/' | tr "=" "\n"   # produces
 two new
 lines

(d) 使用 G 命令：

G 附加一个换行符，加上保留空间的内容到模式空间的末尾。如果保留空间为空，则无论如何都会附加换行符。换行符以 \n 形式存储在模式空间中，可以通过分组 \(...\) 对其进行寻址并在 RHS 中移动。因此，要更改之前使用的“twolines”示例，可以使用以下脚本：

 sed '/twolines/{G;s/\(two\)\(lines\)\(\n\)/\1\3\2/;}'

(e) 插入整行，而不是打断行：

如果不更改行，而仅在 或 之前插入完整行有了模式之后，程序就容易多了。使用i（插入）或a（追加）命令，通过外部脚本进行更改。要在与正则表达式匹配的每行之前插入 This line is new：

 /RE/i This line is new               # HHsed, sedmod, gsed 3.02a
 /RE/{x;s/$/This line is new/;G;}     # other seds

上面的两个示例旨在作为从控制台输入的“单行”命令。如果使用 sed 脚本，紧随其后的 i\ 文字换行符将适用于所有版本的 sed。此外，命令 s/$/This line is new/ 仅当保留空间已为空（默认情况下为空）时才有效。

在与正则表达式匹配的每行之后追加 This line is new：

 /RE/a This line is new               # HHsed, sedmod, gsed 3.02a
 /RE/{G;s/$/This line is new/;}       # other seds

在与正则表达式匹配的每行之后追加 2 个空行：

 /RE/{G;G;}                    # assumes the hold space is empty

将与正则表达式匹配的每行替换为 5 个空行：

 /RE/{s/.*//;G;G;G;G;}         # assumes the hold space is empty

(f) 如果可能，请使用 y/// 命令：

在某些 Unix 版本的 sed（不是 GNU sed！）上，尽管 s/// 命令不起作用。不接受 RHS 中的 \n，而 y/// 命令则接受。如果您的 Unix sed 支持它，则可以通过这种方式在 aaa 之后插入换行符（这不能移植到 GNU sed 或其他 sed）：

 s/aaa/&~/; y/~/\n/;    # assuming no other '~' is on the line!

Answer 2

这是一个单行解决方案，适用于任何 POSIX 兼容 sed（包括 macOS 上的 FreeBSD 版本），假设您的 shell是 bash 或 ksh 或 zsh：

sed 's/\(1234\)/\'
 请注意，您可以使用 >单个 ANSI C 引号字符串作为整个 sed 脚本，sed $'...' <<<<，但这将需要 \ - 转义所有 \ 实例（将它们加倍），这非常麻烦并且妨碍可读性，如 @tovk 的回答）。



 $'\n' 表示换行符，是 ANSI C 引用，它允许您创建带有控制字符转义序列的字符串。
上述将 ANSI C 引用字符串拼接到sed脚本中，如下所示：

该脚本只是分成 2 个单引号字符串，ANSI C 引号字符串卡在两半之间：
's/\(1234\)/\' 是第一半 - 请注意，它以 \ 结尾，以便转义换行符将作为下一个字符插入。（此转义对于将换行符标记为替换字符串的一部分而不是被解释为命令的结尾是必要的）。
$'\n' 是换行符的 ANSI C 引用表示形式，shell 在将脚本传递给之前将其扩展为实际换行符sed。
'\1/g' 是第二半。



请注意，此解决方案对于其他控制字符的工作方式类似，例如表示制表符的$'\t'。

 背景信息：

 POSIX sed 规范：http://man.cx /sed

BSD sed（也在 macOS 上使用）接近此规范，而 GNU sed 提供了许多扩展。


 GNU sed 和 BSD sed 之间的差异摘要可以在 https://stackoverflow.com/a/24276470/45375

\n''\1/g' <<<'test1234foo123bar1234'

^{请注意，您可以使用 >单个 ANSI C 引号字符串作为整个 sed 脚本，sed $'...' <<<<，但这将需要 \ - 转义所有 \ 实例（将它们加倍），这非常麻烦并且妨碍可读性，如 @tovk 的回答）。}

• $'\n' 表示换行符，是 ANSI C 引用，它允许您创建带有控制字符转义序列的字符串。
• 上述将 ANSI C 引用字符串拼接到sed脚本中，如下所示：
  • 该脚本只是分成 2 个单引号字符串，ANSI C 引号字符串卡在两半之间：
  • 's/\(1234\)/\' 是第一半 - 请注意，它以 \ 结尾，以便转义换行符将作为下一个字符插入。（此转义对于将换行符标记为替换字符串的一部分而不是被解释为命令的结尾是必要的）。
  • $'\n' 是换行符的 ANSI C 引用表示形式，shell 在将脚本传递给之前将其扩展为实际换行符sed。
  • '\1/g' 是第二半。

请注意，此解决方案对于其他控制字符的工作方式类似，例如表示制表符的$'\t'。

---

背景信息：

• POSIX sed 规范：http://man.cx /sed
  • BSD sed（也在 macOS 上使用）接近此规范，而 GNU sed 提供了许多扩展。
• GNU sed 和 BSD sed 之间的差异摘要可以在 https://stackoverflow.com/a/24276470/45375

Answer 3

我可以说服Solaris版本的sed以这种方式工作（在bash中）：（

echo test1234foo123bar1234 | sed 's/\(1234\)/\
\1/g'

您必须将换行符直接放在反斜杠之后）。

在 csh 中，我不得不再放一个反斜杠：

echo test1234foo123bar1234 | sed 's/\(1234\)/\\
\1/g'

sed 的 Gnu 版本只需使用 \n 即可：

echo test1234foo123bar1234 | sed 's/\(1234\)/\n\1/g'

Answer 4

Perl 提供了更丰富的“扩展”正则表达式语法，这在这里很有用：

perl -p -e 's/(?=1234)/\n/g'

意味着“用换行符替换模式 1234 后面的零宽度匹配”。这避免了必须通过反向引用捕获和重复部分表达式。

Answer 5

获取一个 GNU sed。

$ brew install gnu-sed

然后你的命令将按预期工作：

$ gsed "s/\(1234\)/\n\1/g" input.txt
test
1234foo123bar
1234

注意：由于 mac 端口，你也可能会得到 GNU sed。

Answer 6

不幸的是，对我来说， sed 似乎忽略了替换字符串中的 \n 。

$ echo test1234foo123bar1234 | sed "s/\(1234\)/\n\1/g"
testn1234foo123barn1234

如果您也遇到这种情况，另一种方法是使用：

$ echo test1234foo123bar1234 | sed "s/\(1234\)/\\`echo -e '\n\r'`\1/g"

这应该在任何地方都可以工作，并且会产生：

test
1234foo123bar
1234

对于您的示例，以 input.txt 文件作为输入，output.txt 作为输出，使用：

$ sed "s/\(1234\)/\\`echo -e '\n\r'`\1/g" input.txt > output.txt

Answer 7

试试这个：

$ echo test1234foo123bar1234 | sed "s/\(1234\)/\n\1/g"
test
1234foo123bar
1234

来自 Sed Gnu doc

g
    Apply the replacement to all matches to the regexp, not just the first. 

Answer 8

您还可以使用 Bash 的 $'string' 功能：

man bash | less -p "\\
"

printf  '%s' 'test1234foo123bar1234'  | sed 
s/\\(1234\\)/\\\n\\1/g'

Answer 9

命令中间的换行符可能感觉有点笨拙：

$ echo abc | sed 's/b/\
/'
a
c

这里有这个问题的两个解决方案，我认为应该是相当可移植的
（应该适用于任何符合 POSIX 标准的 sh、printf 和 sed）：

解决方案 1：

记住转义此处 printf 的任何 \ 和 % 字符：

$ echo abc | sed "$(printf 's/b/\\\n/')"
a
c

避免需要转义 \ 和 %< printf 的 /code> 字符：

$ echo abc | sed "$(printf '%s\n%s' 's/b/\' '/')"
a
c

解决方案 2：

创建一个包含换行符的变量，如下所示：

newline="$(printf '\nx')"; newline="${newline%x}"

或如下：

newline='
'

然后按如下方式使用它：

$ echo abc | sed "s/b/\\${newline}/"
a
c