C# ASP.Net：长时间数据库操作期间出现异常（仅有时）

Question

我们有一个 ASP.Net Web 应用程序，它使用 WCF 连接到其业务层。有时，当它执行巨大的操作时，我会遇到异常。有趣的是，当我第一次运行它时，它就成功了。之后它抛出异常。

异常：套接字连接被中止。

操作是将邮政编码从 csv 文件上传到数据库表中。首先，我们从 csv 文件中读取并生成一个冗长的邮政编码字符串。这将传递给存储过程并执行数据库操作。

注 1：）当我放置断点并进行测试时，很明显，字符串的创建（从 csv 获取数据并附加之后）非常快（不到一分钟）。

注 2：）我删除了事务（从 C# 代码中）并进行了测试，即使如此，异常仍然存在。

注3：）csv中有十万条记录。每行有四列（邮政编码、城市、县、州）。 csv 文件的大小为 3MB。

我对事务日志的大小有疑问。然后我使用以下命令缩小了日志文件。 DBCC SHRINKFILE('MyDB_log', 1) GO

然后我使用 SELECT [Size],Max_Size,Data_Space_Id,[File_Id],Type_Desc,[Name] FROM FRAMIS_R2075.sys.database_files 检查日志大小，其中 data_space_id = 0

大小为 128;最大尺寸为 268435456； Type_Desc = “LOG”

即使在收缩之后，异常仍然出现。

框架：.Net 3.0

DB：SQL Server 2005

嗯，业务层好像也有异常，我又等了20分钟。它说，“当读取器被调用时，尝试调用 Read 无效”。看到这一点，我删除了 DbDataReader 并使用 SqlCommand 来更新数据库表。业务层再次出现异常，大约20分钟后说“超时异常”。知道为什么会发生这种情况吗？

  private void ProcessDatabaseOperationsForZipCode(StringBuilder dataStringToProcess, int UserID)
    {
        int CountOfUnchangedZipCode = 0;
        string strRetiredZipCode = "";
        string strNewZipCode = "";
        dataStringToProcess.Remove(dataStringToProcess.Length - 1, 1);


        if (dataStringToProcess.Length > 0)
        {

            //TimeSpan.FromMinutes(0) - to make transaction scope as infinite.
            using (TransactionScope transaction = TransactionScopeFactory.GetTransactionScope(TimeSpan.FromMinutes(0)))
            {


                SqlConnection mySqlConnection = new SqlConnection("data source=myServer;initial catalog=myDB; Integrated Security=SSPI;");
                SqlCommand mySqlCommand = new SqlCommand("aspInsertUSAZipCode", mySqlConnection);
                mySqlCommand.CommandType = CommandType.StoredProcedure;
                mySqlCommand.Parameters.Add("@DataRows",dataStringToProcess.ToString());
                mySqlCommand.Parameters.Add("@currDate", DateTime.Now);
                mySqlCommand.Parameters.Add("@userID", UserID);
                mySqlCommand.Parameters.Add("@CountOfUnchangedZipCode", 1000);
                mySqlCommand.CommandTimeout = 0;
                mySqlConnection.Open();
                int numberOfRows = mySqlCommand.ExecuteNonQuery();

         //Database db = DatabaseFactory.CreateDatabase();
                //DbCommand cmd = db.GetStoredProcCommand("aspInsertUSAZipCode");
                //cmd.CommandTimeout = 0;
                //db.AddInParameter(cmd, "@DataRows", DbType.String, dataStringToProcess.ToString());
                //db.AddInParameter(cmd, "currDate", DbType.DateTime, DateTime.Now);
                //db.AddInParameter(cmd, "userID", DbType.Int32, UserID);
                //db.AddOutParameter(cmd, "CountOfUnchangedZipCode", DbType.String, 1000);


                //using (DbDataReader rdrUpgradeTypes = (DbDataReader)db.ExecuteReader(cmd))
                //{
                //    //while (rdrUpgradeTypes.Read())
                //    //{
                //    //    if (!String.IsNullOrEmpty(Utility.GetString(rdrUpgradeTypes, "NewZipCode")))
                //    //    {
                //    //        strNewZipCode = strNewZipCode + "," + Utility.GetString(rdrUpgradeTypes, "NewZipCode");
                //    //    }
                //    //}
                //}


                transaction.Complete();

            }
        }


    }

Answer 1

问题很可能是与 SQL Server 的连接超时 - 连接和命令的默认超时均为 30 秒。

您可以延长超时（在连接字符串和代码中）或将更新分解为块。

Answer 2

感谢奥德耐心解答我的问题。当我将巨大的数据库操作分成小批量时（配置 MSDTC 后），我的问题得到了解决。

在大型数据库操作过程中，可能会出现内存不足的错误。但如果该错误位于事务内部，则可能不可见。

1）删除事务，查看是否有“内存不足”异常。

2) 将大型数据库操作分解为小批量，以消除“内存不足”异常

3) 在应用层和数据库中配置 MSDTC

4) 确保 WCF 不会突然超时。根据数据库操作应该有足够的时间。

5) 观察数据库服务器重新启动时的行为（这是最后一个选项）

中提供了一些有用的信息

资源池“default”中没有足够的系统内存来运行此查询

事务期间出现 MSDTC 异常：C#

C# ASP.Net：长数据库期间出现异常（仅有时）操作

SQL Server 2005 错误 701 - 内存不足

其他一些检查：

1) 运行数据库引擎的windows帐户是否具有“锁定内存页权限”？

2) 检查SQL Sever 服务包版本。

3) 检查虚拟内存分页文件的大小

4) 检查最大服务器内存

5) 确定 MemToLeave 设置

6) “SQL Server 内存配置和 MemToLeave”