数据库大批量数据操作实验报告
2010-06-03 17:44
591 查看
今天由于项目需要进行了数据库大批量数据操作的实验:
由服务程序生成10万条记录,竟将其插入到SQLSERVER数据库中
第一次:刚开始用三层架构的Model 模式,即创建实体对象并给对象赋值,并且每次都关闭conn,程序循环执行10万次共用了80多分钟。
第二次:conn只打开一次,运行10万次共用了30分钟。
第三次:直接用字符串连接sql语句进行执行,抛弃model用了,执行10万次共用了5分钟。
第四次:用StringBuilder.append()操作sql语句,又节省了20多秒。
第五次:将所有语句(10万个)都用StringBuilder进行连接,结果SQLSERVER缓存溢出,出现异常。
第六次:将所有生成的数据都插入到datatable中然后用adapter.update到数据库中,使用时间未发生变化。
第七次:将所有生成的数据都插入到datatable中(用时2.1秒),然后用sqlbulkcopy的writerToServer方法(4.8秒),10万条数据居然6.9秒。
sqlbulkcopy太牛叉了
由服务程序生成10万条记录,竟将其插入到SQLSERVER数据库中
第一次:刚开始用三层架构的Model 模式,即创建实体对象并给对象赋值,并且每次都关闭conn,程序循环执行10万次共用了80多分钟。
第二次:conn只打开一次,运行10万次共用了30分钟。
第三次:直接用字符串连接sql语句进行执行,抛弃model用了,执行10万次共用了5分钟。
第四次:用StringBuilder.append()操作sql语句,又节省了20多秒。
第五次:将所有语句(10万个)都用StringBuilder进行连接,结果SQLSERVER缓存溢出,出现异常。
第六次:将所有生成的数据都插入到datatable中然后用adapter.update到数据库中,使用时间未发生变化。
第七次:将所有生成的数据都插入到datatable中(用时2.1秒),然后用sqlbulkcopy的writerToServer方法(4.8秒),10万条数据居然6.9秒。
sqlbulkcopy太牛叉了
相关文章推荐
- 数据库大批量数据操作实验报告
- 《C++第九周实验报告4-1》---建立一个二维数组类Douary,使该类中有以下数据成员、成员函数及友员函数, //完成矩阵的输入、输出、加、减、相等判断等操作。
- 第九周实验报告(四)建立一个二维数组类Douary,使该类中有以下数据成员、成员函数及友员函数,完成矩阵的输入、输出、加、减、相等判断等操作
- 报告论文:建立数据库 练习SQL语言进行数据定义、操作、控制
- 第九周实验报告任务4 建立一个二维数组类Douary,使该类中有以下数据成员、成员函数及友员函数,完成矩阵的输入、输出、加、减、相等判断等操作。
- 线性表的相关操作 数据结构实验报告第二个
- 不同服务器数据库之间的数据操作
- SQL Server利用数据库日志恢复数据到时间点的操作
- PHP 操作数据库 创建数据库,导入数据文件,备份数据库
- MySQL之终端(Terminal)管理数据库、数据表、数据的基本操作
- QLite数据库的数据读取和写入 通过界面操作数据库
- 【转】数据库基本知识:(四)数据操作-删和改
- Oracle如何实现创建数据库、备份数据库及数据导出导入的一条龙操作
- Oracle如何实现创建数据库、备份数据库及数据导出导入的一条龙操作
- MSSQL不同服务器数据库之间的数据操作[转贴]
- springMVC操作数据库 DAO访问数据对象
- Scripts:报告数据库中所有的数据文件情况(包括临时表空间)dba_files.sql
- 4.如何优化操作大数据量数据库(几十万以上数据)(如何选择聚合索引)
- Mysql对空间数据库的支持及使用Hibernate Spatial对空间数据的持久化操作
- SQL不同服务器数据库之间的数据操作整理