当前行以 ^M 结尾时在文件中追加下一行

Question

我有一个从工具输出的文件（从数据库查询）。其中一个字段的某些行末尾有 ^M 字符。这会导致我的输出被损坏。当当前行以 ^M 结尾时，如何将下一行追加到当前行。

我的机器安装了 sed、awk、perl、ruby 和 python，我使用的是 bash。

我使用 sed 尝试了以下操作：

sed -e :a -e '/^M$/N; s/^M\n//; ta' sourcefile > destfile

但这不起作用。

请指教。

谢谢， 卡西克·S。

Answer 1

^M 表示 ctrl+M，它是一个字符，而不是两个字符。当您进行替换时，您输入的是两个字符还是一个字符？

一个字符：ctrl+v，然后 ctrl+m（正确）

两个字符：^ 然后 M （不正确，但可能看起来相同）

Answer 2

您看到的 ^M 字符实际上可能是回车符。您应该在正则表达式中使用 \r 来匹配那些。数据可能是由使用 CRLF 作为行结尾的系统（最有可能是 Windows）而不是仅使用 LF （像大多数 *nix 系统那样）插入到数据库中的。我猜它们后面已经有换行符，所以您可能想删除它们，而不是用换行符替换它们。

您的系统上可能有 dos2unix 命令，它可以为您转换这些行结尾。

您可能想首先使用 dos2unix 确保行结尾一致。之后，您可以像这样删除换行符：cat infile | dos2unix | tr -d '\n' >输出文件。
如果您想要在换行符所在的位置留出一个空格，可以使用 cat infile | dos2unix | tr '\n' ' ' >输出文件。

顺便说一句，使用 sed 删除换行符很困难，因为 sed 在文件中编辑行，一次处理一行。

Answer 3

我希望我正确理解你的要求。请参阅下面的测试：

一个名为 test 的文件：

abc^M
___2ndline


xyz^M
###2ndline again

注意，我使用 ctrl-v, ctrl 在 vi​​m 中输入的 ^M -m

现在可以看到以下 awk 行的输出。我希望这就是您所需要的：

kent$  awk  '/^M/{gsub(/^M/,"");printf $0;next;}1' test
abc___2ndline


xyz###2ndline again

Answer 4

为了了解文件每行末尾存在哪些字符，我使用了 @potong 注释：

sed -n 'l0' file
>>> 1st line\r$
>>> last line\r$

我的文件每行都以 \r$ 结尾，所以我这样做了：

sed -i "s/\r//g" file

它去掉了 < code>\r （或 ^M），通过就地重写文件来实现。这是 sed 的打印结果：

sed -n 'l0' file
>>> 1st line$
>>> last line$