利用SqlBulkCopy快速大批量导入数据
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 | protected void Button1_Click( object sender, EventArgs e) { DateTime beginTime = DateTime.Now; Response.Write( "开始时间:" + beginTime.ToString( "yyyy年MM月dd日:HH:mm:ss:fff" )); //构造一个Datatable存储将要批量导入的数据 DataTable dt = new DataTable(); dt.Columns.Add( "id" , typeof ( string )); dt.Columns.Add( "name" , typeof ( string )); // 见识下SqlBulkCopy强悍之处,来个十万条数数据试验 int i; for (i = 0; i < 100000; i++) { DataRow dr = dt.NewRow(); dr[ "name" ] = i.ToString(); dt.Rows.Add(dr); } string str = ConfigurationManager.ConnectionStrings[ "connStr" ].ConnectionString.ToString(); //声明数据库连接 SqlConnection conn = new SqlConnection(str); conn.Open(); //声明SqlBulkCopy ,using释放非托管资源 using (SqlBulkCopy sqlBC = new SqlBulkCopy(conn)) { //一次批量的插入的数据量 sqlBC.BatchSize = 1000; //超时之前操作完成所允许的秒数,如果超时则事务不会提交 ,数据将回滚,所有已复制的行都会从目标表中移除 sqlBC.BulkCopyTimeout = 60; //設定 NotifyAfter 属性,以便在每插入10000 条数据时,呼叫相应事件。 sqlBC.NotifyAfter = 10000; sqlBC.SqlRowsCopied += new SqlRowsCopiedEventHandler(OnSqlRowsCopied); //设置要批量写入的表 sqlBC.DestinationTableName = "dbo.text" ; //自定义的datatable和数据库的字段进行对应 sqlBC.ColumnMappings.Add( "id" , "tel" ); sqlBC.ColumnMappings.Add( "name" , "neirong" ); //批量写入 sqlBC.WriteToServer(dt); } conn.Dispose(); Response.Write( "<br/>" ); DateTime endTime = DateTime.Now; Response.Write( "结束时间:" + endTime.ToString( "yyyy年MM月dd日:HH:mm:ss:fff" )); TimeSpan useTime = endTime-beginTime; //使用时间 Response.Write( "<br/>插入时间:" + useTime.TotalSeconds.ToString()+ "秒" ); } //响应时事件 void OnSqlRowsCopied( object sender, SqlRowsCopiedEventArgs e) { Response.Write( "<br/> OK! " ); } |
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步