SubSonic 3.0.0.4 更新内存不足

Question

当我在大约 25000 次更新后尝试使用 SubSonic 3.0.0.4 更新许多帖子（~50000）时，出现内存不足的异常。 （Windows7、VS10、SQLServer2008R2）

var myTable = new SubSonicRepository<MyObject>(new MyDB());
getDataFromALargeList

foreach(post in LargeList)
{
    var myObject=GetMyObject(int myID)
    myObject.property1=..
    myObject.property2=..
    myTable.Update(myObject);
}
private MyObject GetMyObject(int myID)
{
    var myObject = new MyObject();
    var tbl = new SubSonicRepository<MyObject>(new MyDB());
    return tbl.Load(myObject, "ID", id) ? myObject : new MyObject();
}

有什么想法吗？

Answer 1

我在使用 subsonic 3 ActiveRecord 时遇到了同样的问题。
对generad代码的快速调查表明，每个亚音速ActiveRecord对象都创建了一个新的数据库实例、一个新的存储库和一个新表。代码基本上是：

_db=new Northwind.Data.NorthwindDB();
_repo = new SubSonicRepository<Products>(_db);
tbl=_repo.GetTable();

您创建的每个 ActiveRecord 实例都会发生这种情况。

如果您正在处理大型数据集，LinqTemplates 会消耗更少的内存。
例如，我在加载 100000 条记录时遇到问题

 // ActiveRecord: slow, eventually ended in a OutOfMemoryException
var query = from p in Products.All()
            select p;
var products = query.ToList();

// LinqTemplates: runs fast with at least no memory footprint
// (except for the data itself)
var db = new Northwind.Data.NorthwindDB();
var query = from p in db.Products
            select p;
var products = query.ToList();

。您应该谨慎使用 ActiveRecord 模式。
它非常适合从数据库中提取单个记录、更新一些值并保留更改，甚至可以快速更新多个记录（假设最多 1000 条记录），但对于大量数据来说，它不是最佳选择，因为开销。

无论如何，从数据库中提取记录只是为了更新值是一个糟糕的选择，对于 ActiveRecord 和 LinqTemplates 来说（除非您有充分的理由，例如您在 DAL 对象中实现了一些业务逻辑。）

您是否考虑过而是进行更新？

db.Update<MyObject>()
    .Set(x => x.property1 == 5)
    .Set(x => x.property2 == "Hello World")
    .Where(x => x.ID == 1)
    .Execute();

Answer 2

如果您确实想在应用程序代码中执行此操作，则需要批量执行更新，因为您的 post 对象超出了 .NET 运行时的内存分配限制。

您的代码应该计算需要处理的记录总数，然后以 500 条为一组选择要处理的记录，直到完成。这样，当您的 post 对象超出范围（对于每个批次）并且您继续处理所有记录时，垃圾收集器可以回收内存。

或者，这可能是值得使用原始 SQL 的场合之一。如果您经常进行这些更新，那么非常值得您花时间编写一个过程来在数据库中执行此操作。