C#sqlbulkcopy的优化

时间:2023-03-09 08:52:25
C#sqlbulkcopy的优化

最近在进行项目的优化。现在部分数据的拷贝时间过长。需要进行上线前的优化,尝试,批次的数量和拷贝次数的之间的合理数值关系。

最近项目中使用到了SqlBulkCopy实现批量复制,在这里,我把部分代码筛选出来简单说明一下,希望对大家研究和使用SqlBulkCopy 有帮助.因为是筛选的代码,不是完整的方法,请大家尽量不要直接拷贝使用,这篇文章的目的上帮大家简单的理解SqlBulkCopy.

C#sqlbulkcopy的优化/*******************调用SqlBulkCopy实现DataTable到SQL的批量拷贝******************/
C#sqlbulkcopy的优化            if (SqlConn.State == ConnectionState.Closed)
C#sqlbulkcopy的优化            {
C#sqlbulkcopy的优化                SqlConn.Open();
C#sqlbulkcopy的优化            }
C#sqlbulkcopy的优化
C#sqlbulkcopy的优化            //定义SQL事务并嵌入到批量拷贝的工作中
C#sqlbulkcopy的优化            SqlTransaction objSqlTran = SqlConn.BeginTransaction();
C#sqlbulkcopy的优化
C#sqlbulkcopy的优化            //定义SqlBulkCopy:SqlConn为SqlConnection,SqlBulkCopyOptions枚举类型,objSqlTran为调用的事务
C#sqlbulkcopy的优化            SqlBulkCopy objSqlCopy = new SqlBulkCopy(SqlConn, SqlBulkCopyOptions.KeepIdentity, objSqlTran);
C#sqlbulkcopy的优化
C#sqlbulkcopy的优化            //分批次拷贝的行数
C#sqlbulkcopy的优化            objSqlCopy.BatchSize = 10;
C#sqlbulkcopy的优化            objSqlCopy.BulkCopyTimeout = 240;
C#sqlbulkcopy的优化            //目标表名
C#sqlbulkcopy的优化            objSqlCopy.DestinationTableName = "DetailAccountReport";
C#sqlbulkcopy的优化
C#sqlbulkcopy的优化            //源表对目标表字段的映射,因为默认是按顺序以及名字匹配,所以这步很重要
C#sqlbulkcopy的优化            objSqlCopy.ColumnMappings.Add("ProjectDefID", "ProjectDefID");
C#sqlbulkcopy的优化            objSqlCopy.ColumnMappings.Add("Num", "SumNum");
C#sqlbulkcopy的优化            objSqlCopy.ColumnMappings.Add("Money", "SumMoney");
C#sqlbulkcopy的优化            objSqlCopy.ColumnMappings.Add("Explain", "Explain");
C#sqlbulkcopy的优化
C#sqlbulkcopy的优化            try
C#sqlbulkcopy的优化            {
C#sqlbulkcopy的优化                //将DataTabel类型的objDT作为源拷贝到目标表
C#sqlbulkcopy的优化                objSqlCopy.WriteToServer(objDT);
C#sqlbulkcopy的优化                objSqlTran.Commit();
C#sqlbulkcopy的优化            }
C#sqlbulkcopy的优化            catch
C#sqlbulkcopy的优化            {
C#sqlbulkcopy的优化                objSqlTran.Rollback();
C#sqlbulkcopy的优化            }
C#sqlbulkcopy的优化            finally
C#sqlbulkcopy的优化            {
C#sqlbulkcopy的优化                objSqlCopy.Close();
C#sqlbulkcopy的优化                SqlConn.Close();
C#sqlbulkcopy的优化            }
C#sqlbulkcopy的优化
C#sqlbulkcopy的优化            return objDT;

说明://源表对目标表字段的映射,因为默认是按顺序以及名字匹配,所以这步很重要
            objSqlCopy.ColumnMappings.Add("ProjectDefID", "ProjectDefID");
            objSqlCopy.ColumnMappings.Add("Num", "SumNum");
            objSqlCopy.ColumnMappings.Add("Money", "SumMoney");
            objSqlCopy.ColumnMappings.Add("Explain", "Explain");

注意这里,前面是源表字段,后面是目标表字段.默认是按照顺序和名称匹配的形式,所以要求两个数据集的结构完全一致,但是在现实使用中,很少有完全一致的情况出现,所以这段代码尤其重要.


objSqlCopy.WriteToServer(objDT);

objDT是我们项目中在之前经过处理的DataTable, WriteToServer()支持对DataTable,DataReader,DataRow[]的操作,大家可以灵活运用.