批量插入sqlserver，sqlserver批量导入

如何高效地批量导入数据到SqlServer

2.SqlBulkCopy是个不错的选择，直接由DataTable可以导入到数据库，但要注意(1)列名与目标表一致(2)数据类型一致(3)空值容错处理，参考代码：///summary///将see cref="DataTable"/

的数据批量插入到数据库中。////summary///param name="dataTable"

要批量插入的

see cref="DataTable"/。

/param///param name="batchSize"

每批次写入的数据量。

/parampublicboolInsertBatchDataTable(DataTable dataTable,

stringtableName,

intbatchSize =10000){using(SqlConnection connection =newSqlConnection(myConnectionString)){try{connection.Open();//给表名加上前后导符using(varbulk =newSqlBulkCopy(connection, SqlBulkCopyOptions.KeepIdentity,

null){DestinationTableName=tableName,

BatchSize=batchSize}){//循环所有列，为bulk添加映射//dataTable.EachColumn(c = bulk.ColumnMappings.Add(c.ColumnName, c.ColumnName), c = !c.AutoIncrement);foreach(DataColumn dcindataTable.Columns){bulk.ColumnMappings.Add(dc.ColumnName, dc.ColumnName);}bulk.WriteToServer(dataTable);

bulk.Close();}returntrue;}catch(Exception exp){returnfalse;}finally{connection.Close();}}}

3.如果是数据量非常大，超过10W以上的数据，可以考虑生成.dtsx文件，然后由C#代码直接调用，效率还是不错的。

相关问答

Q1: mybatis-plus解决 sqlserver批量插入list报错

解决版本:3.0.6

原因分析:mybatis-plus默认使用Jdbc3KeyGenerator进行添加,但是sqlserver不支持批量返回id，所以会抛出如下异常

解决方案: 重写默认saveBatch和saveOrUpdateBatch(缺点是批量添加不能返回id，对于不需要返回id的场景适用)将Jdbc3KeyGenerator替换为NoKeyGenerator

第一步: 建立NoahSqlMethod(也可以不写,但是项目尽量不出现魔法值)

第二步: 建立InsertBatch对象

第三步: 建立NoahSqlInjector对象

第四步: 重写ServiceImpl超类为AbstractNoahServiceImpl

第五步: 将业务service继承类改为AbstractNoahServiceImpl

第六步: 将SqlInjector注入系统中

Q2: c#怎样向sqlserver批量插入数据

C#和MS SQL交互使用的技术叫做 ADO.NET。 使用ADO.NET可以方便的对SQL SERVER 进行操作。

（如果你对ADO.NET不了解，建议先MSDN一下）

批量插入数据，有两种方式，

1，数据比较复杂但是量不是很大，（这个大小的概念要视你的硬件、网络而定，一般在100万条以上才叫大）。

使用FOR循环进行插入， 即声明连接（conn.Open）然后进行遍历，

一条一条插入数据库(执行Insert语句)，

一般来说，100W条数据，如果插入本机数据库的话， 耗时一般在40S-1分钟左右，

也可以在SqlServer中创建一个存储过程来执行Insert命令， 遍历时只需要调用存储过程即可，  存储过程的执行效率比Sql语句要高很多，因为不需要每次都编译。

100W条数据用存储过程来执行的话，一般耗时在20S左右,。

2数据量巨大，但是类型较简单，（一般指上百万条数据）

使用ADO.NET提供的BulkCopy，即批量导入，

语法：

 public static void BulkToDB(DataTable dt, string TableName)

        {

            SqlConnection sqlConn = new SqlConnection(

            ConfigurationManager.ConnectionStrings["dbconnstr"].ConnectionString);

            

            SqlBulkCopy bulkCopy = new SqlBulkCopy(sqlConn);

            bulkCopy.BulkCopyTimeout = 600;

            bulkCopy.DestinationTableName = TableName;

            bulkCopy.BatchSize = dt.Rows.Count;

            try

            {

                sqlConn.Open();

                if (dt != null  dt.Rows.Count != 0)

                    bulkCopy.WriteToServer(dt);

            }

            catch (Exception ex)

            {

                throw ex;

            }

            finally

            {

                sqlConn.Close();

                if (bulkCopy != null)

                    bulkCopy.Close();

            }

        }

需要传入一个DataTable，一个表名。 

这种方式速度非常快，同样100W条数据，本机导入，大概3-5秒就可以完成，

但是需要注意，传入的DataTable必须和Sql Server中的表结构一模一样，

比如你的表有3列，分别是Name, Age, Sex。  你传入的DataTable也必须是如此，所以这种方式只适合导入一些基础数据， 并不适合作为数据层的常用方法。

如果数据量巨大又要求很高的效率，更建议使用NoSql数据库

批量插入sqlserver的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于sqlserver批量导入、批量插入sqlserver的信息别忘了在本站进行查找喔。