DataTable操作中的性能问题

最新推荐文章于 2021-09-17 18:00:40 发布

weixin_30751947

最新推荐文章于 2021-09-17 18:00:40 发布

阅读量125

点赞数

文章标签：大数据

原文链接：http://www.cnblogs.com/abdias/archive/2007/04/16/715046.html

版权

      最近的一项工作是关于性能提升方面的。要做的第一个事情是要把很多同类型的DataTable合并到一起，查了很多关于DataTable的相关函数以后，我决定用Merge函数来合并这些DataTable。
      DataTable[] srcTables = ... ;
      foreach( DataTable src in srcTables )
      {
          dest.Merge( src ) ;
      }
      但是测试的结果让我很是失望，性能不是一般的不好。经过调查发现性能的瓶颈在Merge函数这里。后来经过测试，发现如果用下面的代码：
      DataTable[] srcTables = ... ;
      foreach( DataTable src in srcTables )
      {
         foreach( DataRow row in src.Rows)
         {
             dest.ImportRow( row ) ;
         }
      }

      结果让人惊奇的是，下面的代面的速度是上面的代码速度的100倍！

      还做了一个事情，就是对DataTable进行filter的时候，我的一个同事和我说了以下的代码：
      DataView dv = dt.DefaultView ;
      dv.RowFilter = filter ;
      DataTable result = dv.ToTable() ;
      上面的代码是能工作的，但是它的性能一点都不好，后来我把上面的代码改成了：
      DataRow[] rows = dv.Select( filter ) ;
      foreach( DataRow row in rows )
      {
         result.ImportRow(row) ;
      }

      也有数十倍的性能提高。

      没想到有这么多的朋友看这个文章，我看了一下Table的Merge函数，下面是关键函数：

  ( src,  dst)
            {
             count = ..;
             flag = .. == ;
             ( < )
            {
             ndx = ;
             srcKey =  ();
            .();
            
            {
             (! && (. != ))
            {
             = .(, );
             (.)
            {
             = ...(. | .);
            }
            }
             ( i = ;  < ; ++)
            {
             row2 = .[];
             targetRow = ;
             ( != )
            {
             = .(, , );
            }
            .(, , ., );
            }
            }
            
            {
            .();
            }
            }
            .(., .);
            }