Mysql使用存储过程快速添加百万数据
2021-08-23 09:44
886 查看
前言
为了体现不加索引和添加索引的区别,需要使用百万级的数据,但是百万数据的表,如果使用一条条添加,特别繁琐又麻烦,这里使用存储过程快速添加数据,用时大概4个小时。 创建一个用户表
CREATE TABLE `t_sales` ( `id` int(11) NOT NULL AUTO_INCREMENT, `username` varchar(32) COLLATE utf8_bin DEFAULT NULL COMMENT '用户名', `password` varchar(64) COLLATE utf8_bin DEFAULT NULL COMMENT '密码 MD5存储', `register_time` timestamp NULL DEFAULT NULL COMMENT '注册时间', `type` int(1) DEFAULT NULL COMMENT '用户类型 1,2,3,4 随机', PRIMARY KEY (`id`), KEY `idx_username` (`username`) USING BTREE )
然后创建存储过程,批量添加数据。
- 用户名以常量和数字拼接
- 密码是MD5密码
- 注册时间是当前时间随机往前推几天
- type是取1-4随机范围值
create procedure salesAdd() begin declare i int default 11; while i <= 4000000 do insert into blog.t_sales (`username`,`password`,`register_time`,type) values (concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4)); set i = i + 1; end while; end
然后调用存储过程
call salesAdd()
改进版
虽然使用存储过程添加数据相对一个个添加更加便捷,快速,但是添加几百万数据要花几个小时时间也是很久的,后面在网上找到不少资料,发现mysql每次执行一条语句都默认自动提交,这个操作非常耗时,所以在在添加去掉自动提交。设置 SET AUTOCOMMIT = 0;
create procedure salesAdd() begin declare i int default 1; set autocommit = 0; while i <= 4000000 do insert into blog.t_sales (`username`,`password`,`register_time`,type) values (concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4)); set i = i + 1; end while; set autocommit = 1; end
执行时间387秒,约为六分钟,其中还有一半时间用于md5、随机数的计算。
[SQL] call salesAdd(); 受影响的行: 0 时间: 387.691s
相关文章推荐
- mysql如何循环向数据库添加数据--使用存储过程
- mysql 使用存储过程去添加大量测试数据。
- 14-mysql优化之使用存储过程向mysql数据库中添加4000000条数据
- 使用mysql存储过程快速插入百万mysql测试数据
- 使用mysql存储过程添加数据
- Mysql使用存储过程和Event事件定期删除数据
- mysql使用存储过程循环插入数据
- 使用MySQL Migration Toolkit快速将Oracle数据导入MySQL
- Mysql中使用存储过程返回查询多个表的数据信息
- 使用MySQL Migration Toolkit快速将Oracle数据导入MySQL
- 使用data factory工具&LR脚本快速生成大批量数据&&存储过程造数据
- MySQL使用存储过程插入千万级数据
- 使用MySQL Migration Toolkit快速将Oracle数据导入MySQL[转]
- Mysql 使用存储过程添加新字段
- 使用MySQL Migration Toolkit快速将Oracle数据导入MySQL
- mysql使用存储过程循环插入数据
- mysql使用存储过程生成大量数据
- mysql快速生成百万数据量
- MYSQL使用存储过程插入中文数据的疑似bug(UTF8)
- 使用正则表达式快速修改mysql中错误的varchar类型数据