SqlDataReader 性能 List<string[]> 或 List<object[]>

Question

我一直在尝试尽可能快地从 SQL 服务器读取数据的方法，并且发现了一个有趣的发现。如果我将数据读入List<object[]> 而不是List<string[]>，性能会提高一倍以上。

我怀疑这是因为不必在字段上调用ToString() 方法，但我一直认为使用对象会对性能产生负面影响。

是否有任何理由不使用对象数组列表而不是字符串数组？

编辑：我刚刚想到的是这些数据的存储大小。将数据存储在对象数组中会比字符串占用更多空间吗？

这是我的测试代码：

private void executeSqlObject()
    {
        List<object[]> list = new List<object[]>();

        using (SqlConnection cnn = new SqlConnection(_cnnString))
        {
            cnn.Open();
            SqlCommand cmd = new SqlCommand("select * from test_table", cnn);

            SqlDataReader reader = cmd.ExecuteReader();

            int fieldCount = reader.FieldCount;

            while (reader.Read())
            {
                object[] row = new object[fieldCount];

                for (int i = 0; i < fieldCount; i++)
                {
                    row[i] = reader[i];
                }
                list.Add(row);
            }
        }
    }

    private void executeSqlString()
    {
        List<string[]> list = new List<string[]>();

        using (SqlConnection cnn = new SqlConnection(_cnnString))
        {
            cnn.Open();
            SqlCommand cmd = new SqlCommand("select * from test_table", cnn);

            SqlDataReader reader = cmd.ExecuteReader();

            int fieldCount = reader.FieldCount;

            while (reader.Read())
            {
                string[] row = new string[fieldCount];

                for (int i = 0; i < fieldCount; i++)
                {
                    row[i] = reader[i].ToString();
                }
                list.Add(row);
            }
        }
    }

    private void runTests()
    {
        Stopwatch watch = new Stopwatch();
        for (int i = 0; i < 10; i++)
        {
            watch.Start();
            executeSqlObject();
            Debug.WriteLine("Object Time: " + watch.ElapsedMilliseconds.ToString());
            watch.Reset();
        }
        for (int i = 0; i < 10; i++)
        {
            watch.Start();
            executeSqlString();
            Debug.WriteLine("String Time: " + watch.ElapsedMilliseconds.ToString());
            watch.Reset();
        }
    }

结果：

Object Time: 879
Object Time: 812
Object Time: 825
Object Time: 882
Object Time: 880
Object Time: 905
Object Time: 815
Object Time: 799
Object Time: 823
Object Time: 817
Average: 844

String Time: 1819
String Time: 1790
String Time: 1787
String Time: 1856
String Time: 1795
String Time: 1731
String Time: 1792
String Time: 1799
String Time: 1762
String Time: 1869
Average: 1800

Answer 1

object 仅在您造成额外装箱时才会增加开销。即便如此，这种影响也相当小。在您的情况下，reader[i] 总是 返回 object。您已经将它作为object 获得，无论它是对字符串的引用还是对int 等的引用。当然 调用.ToString() 会增加开销；在大多数情况下（int、DateTime 等），这涉及格式化代码和一个（或多个）额外字符串的分配。通过更改为string，您将更改数据（更糟糕的是，IMO - 例如，您不能再对日期进行正确排序）并增加开销。这里的边缘情况是所有列实际上都已经是字符串 - 在这种情况下，您只需添加一些虚拟方法调用（但没有额外的实际工作）。

有关信息，如果您追求原始性能，我强烈建议您查看微型 ORM，例如 dapper。它们经过大量优化，但避免了“完整” ORM 的重量。例如，在 dapper 中：

var myData = connection.Query<TypedObject>("select * from test_table").ToList();

我希望，在为您提供强类型对象数据的同时，性能非常相似。

Answer 2

是否有任何理由不使用对象数组列表而不是字符串数组？

这将取决于您在将检索到的值放入数组后想要对它们做什么，如果您乐于将每个值视为一个对象，那么拥有一个对象列表就可以了，但是如果您想将它们视为字符串，然后在某些时候您将不得不将对象转换/转换回字符串，因此您将在某处产生成本。

正如 Cory 所说，如果您从 SqlDataReader 读取值作为字符串，则应该使用 GetString(int) 方法进行测试，而不是对该值调用 ToString()，并将其用作基准。

或者，您可以将值读取到 DataSet 中，而不是使用数组，这样以后可能会更容易使用。

归根结底，什么是最好的很大程度上取决于您从数据库中检索结果后如何使用它们。