Visual Studio C++ 2008 操纵字节？

Question

我正在尝试将严格的二进制数据写入文件（无编码）。问题是，当我十六进制转储文件时，我注意到相当奇怪的行为。使用以下任一方法构建文件都会产生相同的行为。我什至使用 System::Text::Encoding::Default 来测试流。

StreamWriter^ binWriter = gcnew StreamWriter(gcnew FileStream("test.bin",FileMode::Create));

(Also used this method)
FileStream^ tempBin = gcnew FileStream("test.bin",FileMode::Create);
BinaryWriter^ binWriter = gcnew BinaryWriter(tempBin);


binWriter->Write(0x80);
binWriter->Write(0x81);
.
.
binWriter->Write(0x8F);
binWriter->Write(0x90);
binWriter->Write(0x91);
.
.
binWriter->Write(0x9F);

写入该字节序列时，我注意到在十六进制转储中未转换为0x3F的唯一字节是0x81、0x8D，0x90，0x9D，...我不知道为什么。

我也尝试过制作字符数组，也出现了类似的情况。即，

array<wchar_t,1>^ OT_Random_Delta_Limits = {0x00,0x00,0x03,0x79,0x00,0x00,0x04,0x88};
binWriter->Write(OT_Random_Delta_Limits);

0x88 将被写为0x3F。

Answer 1

如果您想坚持使用二进制文件，那么不要使用StreamWriter。只需使用 FileStream 和 Write/WriteByte 即可。 StreamWriter（以及一般的 TextWriter）是专门为文本设计的。无论您是否需要编码，都会应用一种编码 - 因为当您调用 StreamWriter.Write 时，写入的是 char，而不是 byte代码>.

也不要创建 wchar_t 值数组 - 同样，这些值用于字符，即文本。

BinaryWriter.Write 应该对您有用，除非它将值提升为 char 在这种情况下您会遇到完全相同的问题。

顺便说一句，如果不指定任何编码，我希望您获得非 0x3F 值，而是代表这些字符的 UTF-8 编码值的字节。

当您指定 Encoding.Default 时，您会看到任何不属于该编码的 Unicode 值都是 0x3F。

不管怎样，当你想处理二进制数据而不是文本时，基本的教训是坚持使用Stream。

编辑：好的，它会是这样的：

public static void ConvertHex(TextReader input, Stream output)
{
    while (true)
    {
        int firstNybble = input.Read();
        if (firstNybble == -1)
        {
            return;
        }
        int secondNybble = input.Read();
        if (secondNybble == -1)
        {
            throw new IOException("Reader finished half way through a byte");
        }
        int value = (ParseNybble(firstNybble) << 4) + ParseNybble(secondNybble);
        output.WriteByte((byte) value);
    }
}

// value would actually be a char, but as we've got an int in the above code,
// it just makes things a bit easier
private static int ParseNybble(int value)
{
    if (value >= '0' && value <= '9') return value - '0';
    if (value >= 'A' && value <= 'F') return value - 'A' + 10;
    if (value >= 'a' && value <= 'f') return value - 'a' + 10;
    throw new ArgumentException("Invalid nybble: " + (char) value);
}

这在缓冲等方面非常低效，但应该可以让您开始。

Answer 2

使用流初始化的 BinaryWriter() 类将对写入的任何字符或字符串使用默认编码 UTF8。我猜测这些

binWriter->Write(0x80);
binWriter->Write(0x81);
.
.
binWriter->Write(0x8F);
binWriter->Write(0x90);
binWriter->Write(0x91);

调用绑定到 Write( char) 重载，因此它们将通过字符编码器。我对 C++/CLI 不太熟悉，但在我看来，这些调用应该绑定到 Write(Int32) ，这不应该有这个问题（也许你的代码真的在调用 < code>Write() 并使用设置为示例中的值的 char 变量来解释此行为）。

Answer 3

0x3F 通常称为 ASCII 字符“?”；映射到它的字符是没有可打印表示的控制字符。正如 Jon 指出的，对于原始二进制数据使用二进制流而不是面向文本的输出机制。

编辑——实际上你的结果看起来与我的预期相反。在默认的代码页 1252 中，不可打印的字符（即可能映射的字符）到“？”）在该范围内是 0x81、0x8D、0x8F、0x90 和 0x9D