批处理和批量处理的模式

Question

我从数据库中查询到的数据看起来很像下面的

Job Site    File    List
-------------------------------
1   SiteA   file2.txt   2
2   SiteB   file2.txt   2
3   SiteA   file23.txt  23
4   SiteC   file2.txt   2
5   SiteB   file12.txt  12
6   SiteA   file29.txt  29
7   SiteB   file28.txt  28

内容，我应该为每个站点（站点 A、B 和 C）启动实例，然后进行处理，即，对于站点 A，进行处理file2.txt、file23.txt 和文件29.txt。这种“处理”可以按某种顺序发生，但必须一个接一个地进行（不是同时进行）。

所以我的第一个任务是整理站点 - 并为每个站点创建实例。我该怎么做？

PS：我认为对于处理部分，我应该使用某种迭代器模式...我更喜欢任何现代编译器语言的解决方案...如 c#、vb、c++ 等...

Answer 1

我不确定我是否理解您想要实现的目标，但我认为您需要做的是：

1. 从您的数据中获取 Site 的不同值
2. 对于在上一步
   2.1.实例化站点
   2.2.获取 File 的所有关联值并处理每个值

在使用 LINQ 的 C# 中，它会是这样的：

var siteNames=data.Select(d => d.Site).Distinct();
foreach(var siteName in siteNames) {
    var site=new Site(siteName); //Or use a factory method, a sites list, etc
    var files=data.Where(d => d.Site==site).Select(d => d.File);
    foreach(var file in Files) {
        site.ProcessFile(file);
    }
}

Answer 2

我将有一个带有哈希表的访问者对象，该哈希表迭代每个条目。

对于每个条目：
- 如果哈希表中不存在，访问者对象将为它实例化一个站点。
- 然后对象将获取文件并处理它。

这样做的优点是您可以一次性完成分组和处理。

Answer 3

我赞同每个站点都有一名工人的想法。

另外一个问题是应用程序状态。

当你的应用程序启动时，它关心之前发生了什么吗？考虑处理一些文件后应用程序崩溃。重新启动后，应用程序可能会再次处理文件吗？这是一个问题吗？