用于反转字节顺序/更改字节顺序的命令行

Question

我在一些脚本中尝试解析由 Java DataOutputStream#writeLong(...) 编写的一些数据。由于java似乎总是写大端，所以我在向od提供字节时遇到问题。这是因为 od 始终假设字节序与您当前所在的架构的字节序相匹配，而我使用的是小型字节序机器。

我正在寻找一种简单的单行来反转字节顺序。假设您知道文件的最后 8 个字节是由上述 writeLong(...) 方法写入的 long。我目前打印这么长的最佳尝试是

tail -c 8 file | tac | od -t d8

，但 tac 似乎只适用于文本（很公平）。我发现了一些对 dd conv=swab 的引用，但这只能成对交换字节，并且不能反转这八个字节。

有谁知道这方面的好单行本吗？

Answer 1

您可以使用 objcopy:

$ objcopy -I binary -O binary --reverse-bytes=num inputfile.bin outputfile.bin

其中 num 是 2 或 4。

Answer 2

用过dd，卢克！

dd if=sourcefile of=resultfile conv=swab

Answer 3

最后求助于Perl。使用了我在 PERL One Liners 中找到的单行代码：

tail -c 8 file | perl -0777e 'print scalar reverse <>' | od -t d8

0777 分隔符让我有点困惑，但是 debian admin 的 this 页面似乎表明它是“no”的占位符记录分隔符，触发每个字节的完全反向字节。

欢迎其他建议。

编辑：在 tac.c 的评论中找到另一个命令，我从 GNU coreutils 下载了该命令：

复制每个文件，或者标准输入（如果没有给出）或者当
遇到FILE名“-”，到标准输出用
记录顺序颠倒。记录由以下分隔符分隔
字符串的实例，如果没有给出则为换行符。默认情况下，
分隔符字符串附加到记录的末尾
文件中如下。

选项：
-b, --before 分隔符附加到开头
文件中它前面的记录的名称。
-r, --regex 分隔符是正则表达式。
-s, --separator=separator 使用 SEPARATOR 作为记录分隔符。

要逐字节反转文件，请使用（在 bash、ksh 或 sh 中）：
tac -r -s '.\|
' 文件

Answer 4

请注意，下一版本的 GNU coreutils (>= 8.23) 将在 od 命令中添加 --endian={little,big} 选项

Answer 5

我想出了这个 Perl 单行代码将 4 字节整数从一种字节序转换为另一种字节序：

$ perl -e 'open F,shift; do { read(F,$a,4); print scalar reverse($a);} while(!eof(F));' bigend.bin > littlend.bin

这可能在真正的 Linux 机器上工作得很好，但 Cygwin 最后咬了我，将二进制文件视为文本并插入 0x0D（又名CR）在每个 0x0A 字节（又名换行符）之前。但如果你通过管道传输到cat -，似乎就不管它了。这对我有用：

$ perl -e 'open F,shift; do { read(F,$a,4); print scalar reverse($a);} while(!eof(F));' bigend.bin | cat - > littlend.bin

Answer 6

BASH：

od -b -v -w8 | while read pfx b8 ; do [ "$b8" ] && echo -n 12345678 | tr 87654321 \\${b8// /\\} ; done

为了根据 od 的输出样式变得更加健壮，它可能需要压缩空格（插入 "| sed 's/ */ /g'"在 w8 之后）。

Answer 7

xxd 有两个标志 -e 和 -g 以满足您的目的。

    -e          little-endian dump (incompatible with -ps,-i,-r).
    -g          number of octets per group in normal output. Default 2 (-e: 4).

这样，您可以执行以下操作：

tail -c 8 file | xxd -e -g8

Answer 8

一种简单的 Python 方法，每 4 个字节反转一次。使用较新的 Python 3.8+ walrus 运算符：

import sys
while word := sys.stdin.buffer.read(4):
    sys.stdout.buffer.write(bytes(reversed(word)))

上面的内容很容易理解，但如果您想要更紧凑的 oneliner，您可以将上面的脚本修改为：

python3 -c 
注意 $'' 表示法假设您正在使用重击。它允许您在 Python 命令中使用换行符。
例如，在标准输入上交换一些字符：
# echo ABCDEFGH | python3 -c 
import sys\nwhile word := sys.stdin.buffer.read(4):\n sys.stdout.buffer.write(bytes(reversed(word)))'

注意 $'' 表示法假设您正在使用重击。它允许您在 Python 命令中使用换行符。
例如，在标准输入上交换一些字符：

import sys\nwhile word := sys.stdin.buffer.read(4):\n sys.stdout.buffer.write(bytes(reversed(word)))'
DCBAHGFE

import sys\nwhile word := sys.stdin.buffer.read(4):\n sys.stdout.buffer.write(bytes(reversed(word)))'

注意 $'' 表示法假设您正在使用重击。它允许您在 Python 命令中使用换行符。

例如，在标准输入上交换一些字符：

Answer 9

我发现这个命令对于交换 4 字节字节顺序效果很好

xxd -e input.bin | xxd -r > output_bs.bin