接收日常 XML 文件 - 每天需要搜索 12 种类型

Question

Asp.NET - C#.NET

我需要有关以下设计问题的建议：

我每天都会收到 XML 文件。它改变了数量，例如昨天收到了 10 个 XML 文件，今天收到了 56 个 XML 文件，明天可能收到了 161 个 XML 文件等。

有 12 种类型（12 XSD）...顶部有一个名为 FormType 的属性，例如 FormType="1 "、FormType="2" 、 FormType="12" 等最多 12 种表单类型。

它们都有共同的字段，如姓名、地址、电话。 但例如 FormType=1 用于建筑，FormType=2 用于 IT，FormType 3=医院，Formtype=4 用于广告等。

正如我所说，它们都有共同的属性。

要求： 需要一个搜索屏幕，以便用户可以搜索这些 XML 内容。但我不知道如何解决这个问题。例如，在某些属性中搜索从 Date_From 和 Date_To 接收的 xml 文本。

问题： 我听说过将 XML 放入二进制字段并执行 XPATH 查询或其他任何操作，但不知道要在 google 上搜索该词。

我正在考虑创建一个大的database.table 并读取所有XML 并将其放入数据库表中。但问题是一些 xml 属性非常大，比如 2-3 页。其他 XML 文件中的相同属性为空。 因此，为每个 XML 属性创建 NVARCHAR(MAX) 并将它们放入 table.field...一段时间后，我的数据库将成为一个巨大的怪物...

有人可以建议什么是处理这个问题的最佳方法吗？

Answer 1

我不能百分百确定我理解你的问题。我猜测该查询应该返回满足某种用户指定条件的单个 XML 文档。

在这种情况下，我的出发点可能是实现一种查询单个 XML 文档的方法，即如果文档命中则返回 true，否则返回 false。我很可能会将查询参数设置为 XPath 查询，但谁知道呢？下面是一个简单的示例：

public bool TestXml(XDocument d, string query)
{
   return d.XPathSelectElements(query).Any();
}

接下来，我需要存储 XML 文档来进行查询。这家商店位于哪里，采取什么形式？在某种程度上，这些是我的应用程序不关心的实现细节。它们可以存在于数据库或文件系统中。它们可以缓存在内存中。我首先要保持简单，例如：

public IEnumerable<XDocument> XmlDocuments()
{
   DirectoryInfo di = new DirectoryInfo(XmlDirectoryPath);
   foreach (FileInfo fi in di.GetFiles())
   {
      yield return XDocument.Load(fi.Filename);
   }
}

现在我可以获得满足这样的请求的所有文档：

public IEnumerable<XDocument> GetDocuments(query)
{
   return XmlDocuments.Where(x => TextXml(x, query));
}

当我看到这个问题时，我突然想到的是：我必须将我的文档解析为 XDocument 对象来查询它们。无论它们位于数据库还是文件系统中，这种情况都会发生。 （如果我将它们放在数据库中并编写一个执行 XPath 查询的存储过程，就像有人建议的那样，每次执行查询时我仍然会解析所有 XML；我刚刚将所有工作移至数据库服务器.)

一遍又一遍地做同样的事情需要花费大量的 I/O 和 CPU 时间。如果查询量不是很小，我会考虑在第一次调用 GetDocuments() 时构建一个 List 并提出一个方案将该列表保留在内存中，直到收到新的 XML 文档（或者可能在收到新的 XML 文档时更新它）。