管理基于内存的数据格式的更改

Question

因此，我一直在 C++ 中使用紧凑数据类型，从内存中保存或从文件中加载只涉及将内存位复制进和出。

然而，这样做的明显缺点是，如果您需要添加/删除数据上的元素，它会变得有点混乱。版本控制也存在问题，假设您分发一个使用数据版本 A 的程序，然后第二天您制作它的版本 B，然后制作版本 C。

我想这可以通过使用诸如 xml 或json。但假设由于技术原因您无法做到这一点。

除了必须制作不同的 if 情况等之外，最好的方法是什么（我想这会很丑陋）

Answer 1

我不知道你的“技术原因”是什么，但如果它们涉及速度或数据大小，那么我可能会建议 协议缓冲区作为您的解决方案。它明确设计用于处理版本控制。与简单地转储结构相比，它会稍慢一些，稍大一些，但也只是稍微大一些，而且它会更便携，并且可以更好地处理版本控制。

Answer 2

来自 3dsmax 的一个想法（如果我没记错的话）：将文件分成块，每个块都有一个描述它的标题（可能很长）和一个长度。阅读时，如果您不知道标题，则可以通过知道长度跳到下一个。该过程在每个块内递归应用，并确保向后兼容性。

Answer 3

如果您采用“面向列”的方式，那么您可以根据需要添加字段。

原始结构与旧方式：

struct Person {
  string name;
  int age;
};

vector<Person> People;  // single file for all fields

用旧方式添加字段：

struct Person {
  string name;
  int age;
  string address;  // now must rewrite files on disk
};

新的和改进的方式：

namespace People {
  vector<string> name;  // first file
  vector<int> age;      // second file
}

添加到新方式：

namespace People {
  vector<string> name;
  vector<int> age;
  vector<string> address;  // add a third file and leave other two alone 
}

要点是每个字段都是它自己的文件。额外的好处是用户只需要读/写他想要的字段，因此版本控制变得更容易。

Answer 4

我们在工作中处理这个问题。这不是最好的，但您可以做一些事情：

• 向所有文件添加标头，第一个字段为“版本”，第二个字段为“长度”。在加载时，您现在可以适当地处理旧版本。

• 如果可以的话，制定规则“永远不要删除数据字段，始终在文件末尾添加字段”。如果您这样做，那么您的加载代码可以通过将可用数据读取到结构中来加载旧的、较短版本的文件，并保留最后一个字段（不在文件中）初始化。当您开始使用结构数组时，这会崩溃，此时您需要手动加载数据。

Answer 5

这就是我要破解的方法。这是一种“hacky”方法，但可以扩展为更复杂的方法。

struct file
{
 int32 fileversion;    //different parsers, one for each file version
 int offsetlen;        //length of blocks
 int numblocks;        //number of blocks
 int*  fileoffsets;    //this array has internal offsets, corresponding to blocks
 block* blocklist;     //blocks.
};

struct block
{
  //stuff here of a fixed length
};

要写入具有固定大小块的文件，算法将是这样的 -

write(f.fileversion)
write(f.offsetlen)
write(f.numblocks)
for i in f.blocklist
  write(f.blocklist[i])

并且读取 -

f.fileversion = read(sizeof(f.fileversion))
f.offsetlen = read(sizeof(f.offsetlen))
f.numblocks = read(sizeof(f.numblocks))
for i in f.numblocks
   f.blocks[i] = read(f.offsetlen)

对于异构块，您​​将需要在读取时跟踪偏移量。