DataView.Sort是性能瓶颈

发布于 2024-08-09 16:27:02 字数 1127 浏览 9 评论 0原文

我在 DataView.Sort 上遇到性能瓶颈。代码如下。

    /// <summary>
    /// Filters the data table and returns a new data table with only the filtered rows.
    /// </summary>
    /// <param name="dtInput">The dt input.</param>
    /// <param name="filterExpression">The filter expression.</param>
    /// <returns></returns>
    protected virtual DataTable FilterDataTable(DataTable dtInput, string filterExpression)
    {
        DataTable result = dtInput;
        if (!string.IsNullOrEmpty(filterExpression) && filterExpression.Trim().Length > 0)
        {
            DataView view = new DataView(dtInput);
            view.RowFilter = filterExpression;
            view.Sort = HierarchyFieldMap.DisplayedValue;
            result = view.ToTable();
        }
        return result;
    }

关于如何改进这种方法有什么想法吗？

执行大约需要 1 秒。

编辑

我在DataView 在处理大型记录集时性能较差

原文

I have a performance bottleneck on a DataView.Sort. The code is below.

    /// <summary>
    /// Filters the data table and returns a new data table with only the filtered rows.
    /// </summary>
    /// <param name="dtInput">The dt input.</param>
    /// <param name="filterExpression">The filter expression.</param>
    /// <returns></returns>
    protected virtual DataTable FilterDataTable(DataTable dtInput, string filterExpression)
    {
        DataTable result = dtInput;
        if (!string.IsNullOrEmpty(filterExpression) && filterExpression.Trim().Length > 0)
        {
            DataView view = new DataView(dtInput);
            view.RowFilter = filterExpression;
            view.Sort = HierarchyFieldMap.DisplayedValue;
            result = view.ToTable();
        }
        return result;
    }

Any idea's on how to improve this method?

It takes ~1 second to execute.

EDIT

I found this link on DataView's Poor Peformance with Large RecordSets

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

愚人国度 2024-08-16 16:27:02

由于您返回的不是 DataView 而是 DataTable，因此您应该能够获得性能提升 - 不是数量级，而是 25-30% - 通过使用 DataTable.Sort：

private static DataTable SortDataTable(DataTable t, 
   string filterExpression,
   string sortExpression)
{
    DataTable t1 = t.Clone();
    t1.BeginLoadData();
    foreach (DataRow r in t.Select(filterExpression, sortExpression))
    {
        t1.Rows.Add(r.ItemArray);
    }
    t1.EndLoadData();

    return t1;
}

大部分时间都用于将数据复制到新表中。如果您可以避免创建新表并使用 DataTable.Select 返回的 DataRow 数组，您可以获得相当大的改进。

Since you're not returning a DataView but a DataTable, you should be able to get a performance boost - not order-of-magnitude, but 25-30% - by using DataTable.Sort:

private static DataTable SortDataTable(DataTable t, 
   string filterExpression,
   string sortExpression)
{
    DataTable t1 = t.Clone();
    t1.BeginLoadData();
    foreach (DataRow r in t.Select(filterExpression, sortExpression))
    {
        t1.Rows.Add(r.ItemArray);
    }
    t1.EndLoadData();

    return t1;
}

Most of the time that's being taken up there is copying the data into the new table. If you can avoid creating a new table and work with the array of DataRows that DataTable.Select returns you can get a considerable improvement.

回复收藏 0 原文

鼻尖触碰 2024-08-16 16:27:02

使用所有可用索引和统计信息对数据库进行排序可能会更快，特别是如果您在向用户显示结果之前对结果进行分页。

回复收藏 0 原文

灯角 2024-08-16 16:27:02

我同意 Shen 的观点，当您必须对 50 - 100k 行进行排序时，是时候将一些逻辑移动到专门用于此目的的层（数据库）。创建一个将 rowlimit 和当前页作为参数的存储过程，或者根据这些值构建您的 select 语句，.NET 速度很快，但没有针对此类操作进行优化，而 SQL Server（或任何与此相关的 RDBMS））。

回复收藏 0 原文

~没有更多了~