Mysql大量插入数据时SQL语句的优化
2014-07-11 14:24
836 查看
1) 对于Myisam类型的表,可以通过以下方式快速的导入大量的数据。
ALTER TABLE tblname DISABLE KEYS;
loading the data
ALTER TABLE tblname ENABLE KEYS;
这两个命令用来打开或者关闭Myisam表非唯一索引的更新。在导入大量的数据到一个非空的Myisam表时,通过设置这两个命令,可以提高导入的效率。对于导入大量数据到一个空的Myisam表,默认就是先导入数据然后才创建索引的,所以不用进行设置。
而对于Innodb类型的表,这种方式并不能提高导入数据的效率。
2) 对于Innodb类型的表,我们有以下几种方式可以提高导入的效率:因为Innodb类型的表是按照主键的顺序保存的,所以将导入的数据按照主键的顺序排列,可以有效的提高导入数据的效率。如果Innodb表没有主键,那么系统会默认创建一个内部列作为主键,所以如果可以给表创建一个主键,将可以利用这个优势提高导入数据的效率。
在导入数据前执行SET UNIQUE_CHECKS=0,关闭唯一性校验,在导入结束后执行SET UNIQUE_CHECKS=1,恢复唯一性校验,可以提高导入的效率。
如果应用使用自动提交的方式,建议在导入前执行SET AUTOCOMMIT=0,关闭自动提交,导入结束后再执行SET AUTOCOMMIT=1,打开自动提交,也可以提高导入的效率。
ALTER TABLE tblname DISABLE KEYS;
loading the data
ALTER TABLE tblname ENABLE KEYS;
这两个命令用来打开或者关闭Myisam表非唯一索引的更新。在导入大量的数据到一个非空的Myisam表时,通过设置这两个命令,可以提高导入的效率。对于导入大量数据到一个空的Myisam表,默认就是先导入数据然后才创建索引的,所以不用进行设置。
而对于Innodb类型的表,这种方式并不能提高导入数据的效率。
2) 对于Innodb类型的表,我们有以下几种方式可以提高导入的效率:因为Innodb类型的表是按照主键的顺序保存的,所以将导入的数据按照主键的顺序排列,可以有效的提高导入数据的效率。如果Innodb表没有主键,那么系统会默认创建一个内部列作为主键,所以如果可以给表创建一个主键,将可以利用这个优势提高导入数据的效率。
在导入数据前执行SET UNIQUE_CHECKS=0,关闭唯一性校验,在导入结束后执行SET UNIQUE_CHECKS=1,恢复唯一性校验,可以提高导入的效率。
如果应用使用自动提交的方式,建议在导入前执行SET AUTOCOMMIT=0,关闭自动提交,导入结束后再执行SET AUTOCOMMIT=1,打开自动提交,也可以提高导入的效率。
相关文章推荐
- Mysql大量插入数据时SQL语句的优化
- Mysql大量插入数据时SQL语句的优化
- Mysql中Innodb大量插入数据时SQL语句的优化
- MySQL基本SQL语句之数据插入、删除数据和更新数据
- mysql的大批量导入数据sql语句的一点优化
- 优化用SQL语句INSERT INTO … SELECT插入数据时锁全表的问题
- 大批量插入数据时优化SQL语句
- 如何优化用SQL语句INSERT INTO … SELECT插入数据时锁全表的问题
- [lua, mysql] 将多条记录数据组合成一条sql插入语句(for mysql)
- MYSQL 数据表中行存在时更新,不存在时插入的SQL语句
- 【批量生成10万条sql数据库数据+IO流的使用】生成简单sql插入语句大量数据,以及输出流生成文件2017年
- 一条SQL语句插入大量数据 和查看某个表的字段是否有重复值
- Python 爬虫 大量数据清洗 ---- sql语句优化
- MySql中把一个表的数据插入到另一个表中的SQL语句
- mysql--------大数据量分页sql语句优化
- mysql如何处理亿级数据,第一个阶段——优化SQL语句
- 【SQL】如何一次(一条SQL语句)向ORACLE中插入多组/多条数据,不同于mysql
- 如何优化用SQL语句INSERT INTO … SELECT插入数据时锁全表的问题
- mysql--------大数据量分页sql语句优化
- mysql--------大数据量分页sql语句优化