是否可以在不了解其余部分的情况下更新 CSV 文件的一部分？

Question

在我正在处理的项目中，我需要读取 CSV 文件，更新每行上的字段，然后将结果保存回 CSV 文件。我正在寻找一个可以帮助我解决这个问题的图书馆。

我的第一次尝试是使用 ADO。这对阅读来说就像一个魅力，但当我尝试更新文件时，我收到错误“此 ISAM 不支持更新链接表中的数据”。

所以现在我正在寻找替代品（或解决方法）。这些是我的要求：

1. 我不想定义文件中的每一列。我只需要两列，并且担心将来可能会添加其他列。

2. 我需要能够保留（或者至少复制）列标题信息。

3. 我希望对底层格式/文件了解尽可能少（即我不想从头开始编写 CSV 编写器）。

我遇到过许多替代阅读器和几个编写器...但是编写器都涉及将 CSV 文件读入一组预定义的字段，然后仅将这些字段写回新文件。我想最大限度地减少硬编码到程序中的列结构的信息量。

Answer 1

根据现代文件系统的工作方式，如果新数据的大小与原始数据完全相同，您只能就地更新任何文件。否则，您必须从头开始重写整个文件。如果您可以满足此约束，则可以使用低级文件流来实现。我不知道有哪个 csv 包支持这个功能，但原因是 csv 足够简单，您可以自己完成。

也就是说，如果您无论如何都要更新每一行，那么重写文件可能没什么大不了的。编写 csv 记录非常简单。观察下面的 C# 代码：

public WriteRecord(IEnumerable items, TextWriter outputStream))
{
    string delimiter = "";
    foreach(var item in items)
    {
        outputStream.Write(delimiter);
        outputStream.Write("\"");
        outputStream.Write(item.ToString().Replace("\"", "\"\""));
        outputStream.Write("\"");
        delimiter = ",";
    }
    outputStream.Write(Environment.Newline);
}

当然，如果您有复杂的类型并且想要更加挑剔，那没问题，但是由于您不想将自己限制在特定的未来列安排上，因此该代码应该没问题。此外，它将补充我自己的 Stack Overflow 上列出的 CSV 解析器 ，不需要预先了解文件中的列。你可以这样做：

var tempPath = @"Some-temp-file-path.csv";
var srcPath = @"input-file-path.csv";
using (var outFile = new StreamWriter(tempPath))
{
    foreach (var items in CSV.FromFile(srcPath))
    {
        items[someInt] = "new value";
        items[otherInt] = "other value";
        WriteRecord(items, outFile);
    }

}
File.Copy(tempPath, srcPath);

Answer 2

.csv 文件是一个平面文件，据我所知，除非您有一些超出我过去的东西（例如索引文件系统），否则您无法就地更新文件。

建议将 .csv 文件读入您​​的程序中。

将其存储到 SQL Lite 等数据库中或足够的堆内存中以保存文件的长度以及一些额外的空间来保存更改。

做出改变。

写出文件。

我省略了很多关于如何进行更新的细节。希望具有丰富文件经验的人能够纠正我对您应该做什么的想法。可能某些微软数据库对象库可以做到这一点，但我对它们不熟悉。

Answer 3

如果您使用 C#4.0，File 类中有一些不错的扩展，即使您无法锁定单行，也可以帮助您重写 csv 文件。您应该查看 File.ReadLines和File.WriteAllLines。它们都采用 IEnumerable 作为参数，因此您可以在每行的基础上执行转换。尽管这并不意味着您没有锁定文件，但肯定比将整个文件放在内存中占用的内存更少。

var lines = File.ReadLines(oldFile);
File.WriteAllLines(newFile, ChangeCSV(lines));

public IEnumerable<string> ChangeCSV(IEnumerable<string> csvLines)
{
  foreach(var line in csvLines)
  {    
    var convertedLine = ... // Do your conversion here for a single line
    yield return convertedLine;
  }
}

编辑：如果您正在寻找一种解析 csv 行的快速方法，可以使用 这个正则表达式可以为你解决问题。

Answer 4

CSV 文件是无类型的字符流，因此可以替换单个字符，但如果不重写整个文件，则无法添加或删除字符。

根据个人经验，我强烈建议按照 @Joel 的建议创建一个简单的 CSV 解析器，并为每次更新重新创建整个文件。如果出现错误，尝试就地更新数据很容易损坏整个文件且无法恢复。

请按照以下步骤操作：

1. 逐个字段读取文件。
2. 如果这是您不关心的字段，请将其添加到临时文件中。
3. 如果这是您确实关心的字段，请将新值写入临时文件。
4. 如果出现错误，请删除临时文件。
5. 如果没有错误，则交换临时文件和原始文件并删除旧文件。