将大字符串写入文件的最佳方法

Question

在 C# 中，我正在读取中等大小的文件（100 KB ~ 1 MB），修改部分内容，最后写入不同的文件。所有内容均为文字。修改是作为字符串对象和字符串操作完成的。我当前的方法是：

1. 使用 StreamReader 读取原始文件中的每一行。
2. 打开一个 StringBuilder 来存放新文件的内容。
3. 修改字符串对象并调用StringBuilder的AppendLine（直到文件末尾）
4. 打开一个新的StreamWriter，并写入StringBuilder 到写入流。

但是，我发现 StremWriter.Write 截断了 32768 字节 (2^16)，但 StringBuilder 的长度大于此值。我可以编写一个简单的循环来保证将整个字符串写入文件。但是，我想知道 C# 中完成此任务最有效的方法是什么？

总而言之，我只想修改文本文件的某些部分并写入不同的文件。但是，文本文件大小可能大于 32768 字节。

== 回答 == 很抱歉给您带来困扰！只是我没有调用flush。 StremWriter.Write 没有短（例如，2^16）限制。

Answer 1

该问题很可能与未关闭 writer 有关。请参阅 http://msdn.microsoft.com/en- us/library/system.io.streamwriter.flush.aspx。

但我建议如果可以避免的话，不要将整个文件加载到内存中。

Answer 2

你能试试这个吗：

    void Test()
    {
        using (var inputFile = File.OpenText(@"c:\in.txt"))
        {
            using (var outputFile = File.CreateText(@"c:\out.txt"))
            {
                string current;
                while ((current = inputFile.ReadLine()) != null)
                {
                    outputFile.WriteLine(Process(current));
                }
            }
        }
    }

    string Process(string current)
    {
        return current.ToLower();
    }

通过逐行处理并直接写入，可以避免将整个文件加载到内存中

Answer 3

嗯，这完全取决于您要修改的内容。如果您对文本文件的一部分的修改依赖于文本文件的另一部分，那么显然您需要将这两个部分都存储在内存中。但是，如果您只需要逐行修改文本文件，则使用如下所示的内容：

using (StreamReader sr = new StreamReader(@"test.txt"))
{
    using (StreamWriter sw = new StreamWriter(@"modifiedtest.txt"))
    {
        while (!sr.EndOfStream)
        {
            string line = sr.ReadLine();
            //do some modifications
            sw.WriteLine(line);
            sw.Flush(); //force line to be written to disk
        }
    }
}

Answer 4

我不会使用洞文档来查找您正在寻找的内容，而是使用正则表达式来查找示例：

public List<string> GetAllProfiles()
    {
        List<string> profileNames = new List<string>();
        using (StreamReader reader = new StreamReader(_folderLocation + "profiles.pg"))
        {
            string profiles = reader.ReadToEnd();
            var regex = new Regex("\nname=([^\r]{0,})", RegexOptions.IgnoreCase);
            var regexMatchs = regex.Matches(profiles);
            profileNames.AddRange(from Match regexMatch in regexMatchs select regexMatch.Groups[1].Value);
        }
        return profileNames;
    }

Answer 5

StreamWriter.Write

不会

截断字符串，并且没有限制。

它在内部使用String.CopyTo，另一方面使用不安全代码（使用fixed）来复制字符，因此它是最高效。