您的位置:首页 > 数据库 > MySQL

mysql 快速生成百万条测试数据

2017-03-01 09:59 525 查看


1、生成思路

利用mysql内存表插入速度快的特点,先利用函数和存储过程在内存表中生成数据,然后再从内存表插入普通表中


2、创建内存表及普通表

[sql] view
plain copy

CREATE TABLE `vote_record_memory` (  

    `id` INT (11) NOT NULL AUTO_INCREMENT,  

    `user_id` VARCHAR (20) NOT NULL,  

    `vote_id` INT (11) NOT NULL,  

    `group_id` INT (11) NOT NULL,  

    `create_time` datetime NOT NULL,  

    PRIMARY KEY (`id`),  

    KEY `index_id` (`user_id`) USING HASH  

) ENGINE = MEMORY AUTO_INCREMENT = 1 DEFAULT CHARSET = utf8  

[sql] view
plain copy

CREATE TABLE `vote_record` (  

    `id` INT (11) NOT NULL AUTO_INCREMENT,  

    `user_id` VARCHAR (20) NOT NULL,  

    `vote_id` INT (11) NOT NULL,  

    `group_id` INT (11) NOT NULL,  

    `create_time` datetime NOT NULL,  

    PRIMARY KEY (`id`),  

    KEY `index_user_id` (`user_id`) USING HASH  

) ENGINE = INNODB AUTO_INCREMENT = 1 DEFAULT CHARSET = utf8  

3、创建函数及存储过程

[sql] view
plain copy

CREATE FUNCTION `rand_string`(n INT) RETURNS varchar(255) CHARSET latin1  

BEGIN   

DECLARE chars_str varchar(100) DEFAULT 'abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789';   

DECLARE return_str varchar(255) DEFAULT '' ;  

DECLARE i INT DEFAULT 0;   

WHILE i < n DO   

SET return_str = concat(return_str,substring(chars_str , FLOOR(1 + RAND()*62 ),1));   

SET i = i +1;   

END WHILE;   

RETURN return_str;   

END  

[sql] view
plain copy

CREATE  PROCEDURE `add_vote_memory`(IN n int)  

BEGIN    

  DECLARE i INT DEFAULT 1;  

    WHILE (i <= n ) DO  

      INSERT into vote_record_memory  (user_id,vote_id,group_id,create_time ) VALUEs (rand_string(20),FLOOR(RAND() * 1000),FLOOR(RAND() * 100) ,now() );  

            set i=i+1;  

    END WHILE;  

END  

4、调用存储过程

[sql] view
plain copy

CALL add_vote_memory(1000000)  

根据电脑性能不能所花时间不一样,大概时间在小时级别,如果报错内存满了,只在修改max_heap_table_size 个参数即可,win7修改位置如下,linux,修改my.cnf文件,修改后要重启mysql,重启后内存表数据会丢失



5、插入普通表中

[sql] view
plain copy

INSERT into vote_record SELECT * from  vote_record_memory  

6、结果



内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: