c# - 为什么是 C# 列表添加方法很慢？

Question

我有一个使用 Dapper 从数据库读取数据的 ASP.NET MVC 项目，我需要导出到 Excel。

Dapper 速度很快！ExecuteReader只需 35 秒。

但是list.Add(InStock);时间太长了！超过1020秒！

你知道这是为什么吗？

public List<InStock> GetList(string stSeId, string edSeId, string stSeDay, string edSeDay, string qDate)
{
    List<InStock> list = new List<InStock>();
    InStock InStock = null;

    IDataReader reader;

    using (var conn = _connection.GetConnection())
    {
        try
        {
            conn.Open();
            //******************Only 35 seconds*****
            reader = conn.ExecuteReader(fileHelper.GetScriptFromFile("GetInStock"),
                 new { STSeId = stSeId, EDSeId = edSeId, STSeDay = stSeDay, EDSeDay = edSeDay, qDate = qDate });
            //*************************************

            //******************Over 1020 seconds**********
            while (reader.Read())
            {
                InStock = new InStock();

                InStock.ColA = reader.GetString(reader.GetOrdinal("ColA"));
                InStock.ColB = reader.GetString(reader.GetOrdinal("ColB"));
                InStock.ColC = reader.GetString(reader.GetOrdinal("ColC"));

                list.Add(InStock);
            }
            //*********************************************
            return list;
        }
        catch (Exception err)
        {
            throw err;
        }
    }
}

标签： c#.netado.netdappergeneric-list

Answer 1

是数据库。

从使用 DataReader 检索数据，

当您检索大量数据时，DataReader 是一个不错的选择，因为数据没有缓存在内存中。

您的性能问题的关键线索是“因为数据没有缓存在内存中”。虽然严格来说是一个实现细节，但每次调用Read()都从数据库中获取新数据，而List<InStock>.Add()调用只是将新数据添加InStock到列表中。

与 RAM 相比，磁盘访问（甚至 SSD）之间的处理时间存在数量级的差异。网络请求和磁盘访问之间存在数量级的差异。没有一种真正可以想象的方式，除了数据库访问之外的任何事情都是导致大部分运行时间的原因。

--

作为旁注，您将超过Excel 工作表中的最大行数。