ms sql server 大批量导入
BULK INSERT
文章:BULK INSERT如何将大量数据高效地导入SQL Server
可以首先在数据库建一个表Temp_tb,这个表作为导入数据的表,然后使用bulk insert导入,导入完毕后,再在数据库中通过自己的控制将Temp_tb数据导入到目标表中。
这种方法可以解决只导入部分字段的问题。
示例:
Bulk insert 数据库名.用户名.表名 from '数据文件路径' with ( formatfile = '格式文件路径', FirstRow = 2 --指定数据文件中开始的行数,默认是1 )
示例2
BULK INSERT db_mgr.dbo.T_Student FROM 'C:/student.data' WITH ( FORMATFILE = 'C:/student_fmt.xml' )
SqlBulkCopy 块copy
using (System.Data.SqlClient.SqlBulkCopy sqlBC = new System.Data.SqlClient.SqlBulkCopy(conn)) { sqlBC.BatchSize = 100000; sqlBC.BulkCopyTimeout = 60; sqlBC.DestinationTableName = "dbo.TableB"; sqlBC.ColumnMappings.Add("valueA", "Value1"); sqlBC.WriteToServer(dt); }
例子2
public void SqlBulkCopyForDataTable(string tableName, DataTable dt, out string msg) { msg = ""; try { using (SqlConnection conn = (SqlConnection)idataHelper.CreateConnection) { conn.Open(); using (SqlBulkCopy sqlbulkcopy = new SqlBulkCopy(conn)) { try { sqlbulkcopy.DestinationTableName = tableName; sqlbulkcopy.ColumnMappings.Add("Id", "Id列"); sqlbulkcopy.ColumnMappings.Add("Name", "名字"); sqlbulkcopy.WriteToServer(dt); } catch (System.Exception ex) { msg = ex.ToString(); throw ex; } finally { conn.Close(); } } } } catch (Exception ex) { throw ex; } finally { } }