针对Sqlserver大数据量插入速度慢或丢失数据的解决方法
我的设备上每秒将2000条数据插入数据库,2个设备总共4000条,当在程序里面直接用insert语句插入时,两个设备同时插入大概总共能插入约2800条左右,数据丢失约1200条左右,测试了很多方法,整理出了两种效果比较明显的解决办法: 方法一:使用Sql Server函数:1.将数据组合成字串,使用函数将数据插入内存表,后将内存表数据复制到要插入的表。 2.组合成的字符换格式:'111|222|333|456,7894,7458|0|1|2014-01-01 12:15:16;1111|2222|3333|456,7458|0|1|2014-01-01 12:15:16',每行数据中间用“;”隔开,每个字段之间用“|”隔开。 3.编写函数: 4.调用函数语句: 5.结果展示: 方法二:使用BULK INSERT大数据量插入第一种操作,使用Bulk将文件数据插入数据库 Sql代码 创建数据库 创建测试表 填充测试数据 开启xp_cmdshell存储过程(开启后有安全隐患) 使用bcp导出格式文件: 使用bcp导出数据文件: 将表中数据清空 使用Bulk Insert语句批量导入数据文件: 使用OPENROWSET(BULK)的例子: T_Student表必须已存在 使用OPENROWSET(BULK)的例子: tt表可以不存在 (编辑:李大同) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |