一个由于python程序fork子进程时复制对象导致的程序锁死的问题
2016-06-07 18:29
369 查看
问题:
项目原来使用配置文件进行部署的,计划改成使用Zookeeper来进行环境配置,于是写了相关的代码,但是测试环境部署的时候发现API服务会卡死不响应服务。
我们是使用的python的wsgi来做API服务的,zk client是使用的python-kazoo库,一通查之后,发现是kazoo的代码卡住的,但是如果不使用singleton对象或者不使用多个worker(子服务进程)就没有问题。
猜测可能是由于zk是为了分布式管理设计的,所以当fork子服务进程的时候把zk client的实例也复制到了子进程,然后这个子进程中的zk client的对象其实是不能用的,因为它的锁等相关的东西是在父进程中。
改程序进行较验,发现的确是这样的,解决方法就是在fork后释放zk client对象
项目原来使用配置文件进行部署的,计划改成使用Zookeeper来进行环境配置,于是写了相关的代码,但是测试环境部署的时候发现API服务会卡死不响应服务。
我们是使用的python的wsgi来做API服务的,zk client是使用的python-kazoo库,一通查之后,发现是kazoo的代码卡住的,但是如果不使用singleton对象或者不使用多个worker(子服务进程)就没有问题。
猜测可能是由于zk是为了分布式管理设计的,所以当fork子服务进程的时候把zk client的实例也复制到了子进程,然后这个子进程中的zk client的对象其实是不能用的,因为它的锁等相关的东西是在父进程中。
改程序进行较验,发现的确是这样的,解决方法就是在fork后释放zk client对象
相关文章推荐
- Python动态类型的学习---引用的理解
- Python3写爬虫(四)多线程实现数据爬取
- 垃圾邮件过滤器 python简单实现
- 下载并遍历 names.txt 文件,输出长度最长的回文人名。
- install and upgrade scrapy
- Scrapy的架构介绍
- Centos6 编译安装Python
- 使用Python生成Excel格式的图片
- 让Python文件也可以当bat文件运行
- [Python]推算数独
- Python中zip()函数用法举例
- Python中map()函数浅析
- Python将excel导入到mysql中
- Python在CAM软件Genesis2000中的应用
- 使用Shiboken为C++和Qt库创建Python绑定
- FREEBASIC 编译可被python调用的dll函数示例
- Python 七步捉虫法