SqlDataReader 性能列表或列表<对象 []>

Question

我一直在尝试尽可能快地从 SQL 服务器读取数据的方法，并且发现了一个有趣的发现。如果我将数据读入 List 而不是 List，性能会提高一倍以上。

我怀疑这是因为不必在字段上调用 ​​ToString() 方法，但我一直认为使用对象会对性能产生负面影响。

是否有任何理由不使用对象数组列表而不使用字符串数组？

编辑：我刚刚想到的一个想法是该数据的存储大小。将数据存储在对象数组中会比存储在字符串中占用更多空间吗？

这是我的测试代码：

private void executeSqlObject()
    {
        List<object[]> list = new List<object[]>();

        using (SqlConnection cnn = new SqlConnection(_cnnString))
        {
            cnn.Open();
            SqlCommand cmd = new SqlCommand("select * from test_table", cnn);

            SqlDataReader reader = cmd.ExecuteReader();

            int fieldCount = reader.FieldCount;

            while (reader.Read())
            {
                object[] row = new object[fieldCount];

                for (int i = 0; i < fieldCount; i++)
                {
                    row[i] = reader[i];
                }
                list.Add(row);
            }
        }
    }

    private void executeSqlString()
    {
        List<string[]> list = new List<string[]>();

        using (SqlConnection cnn = new SqlConnection(_cnnString))
        {
            cnn.Open();
            SqlCommand cmd = new SqlCommand("select * from test_table", cnn);

            SqlDataReader reader = cmd.ExecuteReader();

            int fieldCount = reader.FieldCount;

            while (reader.Read())
            {
                string[] row = new string[fieldCount];

                for (int i = 0; i < fieldCount; i++)
                {
                    row[i] = reader[i].ToString();
                }
                list.Add(row);
            }
        }
    }

    private void runTests()
    {
        Stopwatch watch = new Stopwatch();
        for (int i = 0; i < 10; i++)
        {
            watch.Start();
            executeSqlObject();
            Debug.WriteLine("Object Time: " + watch.ElapsedMilliseconds.ToString());
            watch.Reset();
        }
        for (int i = 0; i < 10; i++)
        {
            watch.Start();
            executeSqlString();
            Debug.WriteLine("String Time: " + watch.ElapsedMilliseconds.ToString());
            watch.Reset();
        }
    }

以及结果：

Object Time: 879
Object Time: 812
Object Time: 825
Object Time: 882
Object Time: 880
Object Time: 905
Object Time: 815
Object Time: 799
Object Time: 823
Object Time: 817
Average: 844

String Time: 1819
String Time: 1790
String Time: 1787
String Time: 1856
String Time: 1795
String Time: 1731
String Time: 1792
String Time: 1799
String Time: 1762
String Time: 1869
Average: 1800

Answer 1

object 仅在导致额外装箱时增加开销。即便如此，这种影响也相当小。在您的情况下，reader[i]始终返回object。您已经将其作为对象，无论它是对字符串还是int等的引用。当然调用.ToString() 增加开销；在大多数情况下（int、DateTime 等），这涉及格式化代码和分配一个（或多个）额外字符串。通过更改为字符串，您将更改数据（更糟糕的是，IMO - 例如，您无法再对日期进行正确的排序）并增加开销。这里的边缘情况是，如果所有列实际上已经是字符串 - 在这种情况下，您只需添加一些虚拟方法调用（但没有额外的实际工作）。

作为信息，如果您追求原始性能，我强烈建议您查看微型 ORM，例如 dapper。它们经过深度优化，但避免了“完整”ORM 的负担。例如，在 dapper:

var myData = connection.Query<TypedObject>("select * from test_table").ToList();

will 中，我期望在为您提供强类型对象数据时表现非常相似。

Answer 2

是否有任何理由不使用对象数组列表而不使用字符串数组？

这取决于将检索到的值放入数组后您想要对它们执行什么操作，如果您愿意将每个值视为一个对象，那么拥有一个对象列表就可以了，但是如果您想将它们视为字符串，那么在某个时候你将不得不将对象转换/转换回字符串，这样你就会在某个地方产生成本。

正如 Cory 提到的，如果您从 SqlDataReader 中以字符串形式读取值，则应该使用 GetString(int) 方法进行测试，而不是对该值调用 ToString() ，并将其用作基准。

或者，您可以将值读入数据集，而不是使用数组，这样以后使用起来可能会更容易。

归根结底，什么是最好的很大程度上取决于您从数据库检索结果后想要如何使用它们。