python 使用MySQLdb 和 pymysql的时候手动提交事务的解决办法
2017-05-18 10:47
302 查看
最近在使用Python写一个高并发的接受http请求并入库的模块。
再使用python 操作mysql的时候,使用了其pymysql模块,但是在进行插入操作的时候,必须使用受到提交事务,数据库中才能有数据。也就是必须使用commit()
但是mysql的自动开启事务且执行的。
mysql> show variables like ‘autocommit’;
+—————+——-+
| Variable_name | Value |
+—————+——-+
| autocommit | ON |
+—————+——-+
所以我在使用C API 进行sql 插入操作的时候,数据库也是有数据的。
但是在使用Python api 进行操作的时候必须手动commit()。而且耗时0.5s,难以忍受。而且Python api 操作mysql数据库的时候,单单一个insert 插入到一张不到10w的表中,也要耗时0.5s。so long。。。
所以查找了一下资料,看到可以在初始化连接池的时候,对每一个连接进行设置,即
conn = mdb.connect(host=’127.0.0.1’, port=3306, user=’root’, passwd=’root’, db=’test’, charset=’utf8’)
conn.autocommit(1) # conn.autocommit(True)
cursor = conn.cursor()
对每一个连接进行设置其autocommit的值。解决之,节省了0.5s的时间。
后续继续优化,看看为何插入如此耗时。。。有进展继续更新。
再使用python 操作mysql的时候,使用了其pymysql模块,但是在进行插入操作的时候,必须使用受到提交事务,数据库中才能有数据。也就是必须使用commit()
但是mysql的自动开启事务且执行的。
mysql> show variables like ‘autocommit’;
+—————+——-+
| Variable_name | Value |
+—————+——-+
| autocommit | ON |
+—————+——-+
所以我在使用C API 进行sql 插入操作的时候,数据库也是有数据的。
但是在使用Python api 进行操作的时候必须手动commit()。而且耗时0.5s,难以忍受。而且Python api 操作mysql数据库的时候,单单一个insert 插入到一张不到10w的表中,也要耗时0.5s。so long。。。
所以查找了一下资料,看到可以在初始化连接池的时候,对每一个连接进行设置,即
conn = mdb.connect(host=’127.0.0.1’, port=3306, user=’root’, passwd=’root’, db=’test’, charset=’utf8’)
conn.autocommit(1) # conn.autocommit(True)
cursor = conn.cursor()
对每一个连接进行设置其autocommit的值。解决之,节省了0.5s的时间。
后续继续优化,看看为何插入如此耗时。。。有进展继续更新。
相关文章推荐
- Python下使用MySQLdb连接MySQL出错的解决办法(一)
- MVC client validation after PartialView loaded via Ajax MVC3中 弹出 Dialog时候 提交的时候 使用 Jquery 不验证 form表单 的解决办法
- 使用git命令提交远程github仓库的时候提示"rejected"(拒绝)解决办法
- Python+SQLAlchemy+MySQLdb+MySQL的中文乱码及其解决办法
- 终于找到了在asp.net使用popcalendar.js 日历时候提示出现"缺少对象“的解决办法。
- JS调用form的方法submit直接提交form的时候,submit事件不响应解决办法
- eWebEditor在IE8中使用时候总是报错“没有对象”。解决办法如下:
- 关于“使用xmlspy编写xsl文件时候,在xsl解释xml文件的时候总是使用utf-16编码”的解决办法
- python升级导致yum命令无法使用的解决办法(修改版)
- 事务使用时MSDTC不可用解决办法
- 还原数据库时候,报“因为数据库正在使用,所以无法获得对数据库的独占访问权”的解决办法
- 使用U盘时候的"无法停用通用卷"的解决办法
- Asp.net Oracle 事务出现奇怪的自动提交现象及解决办法
- MySQL数据库连接异常断开导致事务没提交的解决办法
- 使用git的时候报错解决办法
- 使用type 为image的图片,但不提交form的解决办法。
- 使用jquery的时候,js的window.onunload事件失效的解决办法
- [java]webwork使用get提交方式乱码的解决办法
- eWebEditor在IE8中使用时候总是报错“没有对象”。解决办法如下:
- Asp.net Oracle transaction事务出现奇怪的aotucommit自动提交现象及解决办法