记录使用python时遇到的中文 编码问题与解决方法
2017-03-03 22:13
931 查看
记录使用python时遇到的中文 编码问题与解决方法
刚接触python时,师兄就教导我们在每个py文件的第一行要加上# coding=utf-8这句话啦
在一开始的处理时并没有遇到问题,可随着处理的东西越来越多,各种各样的问题就出现了,为了尽量避免这些问题首先是把Pycharm的编码统一了,如图
如果是处理获取到的网页源代码,不要偷懒,先看看源代码的编码,就像下图中的charset=一般来说就是它的编码了
如果网页源代码的编码和自己编译器的不同,会出现中文乱码,那么该怎么解决呢?假设网页源代码是GB2312而想要的是utf-8,则可以用这句代码
s.decode('GB2312').encode('utf-8')
因为字符串在Python内部的表示是unicode编码. 因此,在做编码转换时,通常需要以unicode作为中间编码,即先将其他编码的字符串解码(decode)成unicode,再从unicode编码(encode)成另一种编码。
可是!就是有些网页啊~口不对心,charset显示的编码和实际编码跟不一样,怪不得有UnicodeEncodeError[捂脸]
这时候就可以用下面的代码来查看字符串的真实编码,然后再decode和encode就好啦
import chardet print chardet.detect(data) # data是未知编码的字符串
相关文章推荐
- python使用requests爬取网页,遇到中文出现乱码的编码问题及解决
- python使用requests爬取网页,遇到中文出现遇到中文出现乱码的编码问题及解决乱码的编码问题及解决
- Python结巴中文分词工具使用过程中遇到的问题及解决方法
- windows下安装python basemap时使用Visual Studio编译geos时遇到的问题以及解决方法
- sqlite3 jdbc、c接口、python接口处理中文时遇到的问题及其解决方法
- 记录redhat下安装MySQL-python 模块遇到的问题及解决方法
- linux Eclipse上c++调用使用了tensorflow库的python程序遇到的问题及解决方法
- Python使用matplotlib绘图无法显示中文问题的解决方法
- python遇到的问题解决方法的记录
- 【python】中文的输出,打印,文件编码问题解决方法
- ArcMap中使用Python遇到中文字段名错误的解决方法
- ArcMap中使用Python遇到中文字段名错误的解决方法
- Windows下使用python-nmap库可能遇到的问题及解决方法(续)
- python中遇到包含UTF-8编码中文的列表或字典的输出的解决方法
- Windows下使用python-nmap库可能遇到的问题及解决方法(续)
- 使用java mail 包收发中文邮件的编码,解码问题以及解决方法
- 使用Python脚本实现批量网站存活检测遇到问题及解决方法
- 使用HtmlAgilityPack和ScrapySharp抓取网页数据遇到的几个问题解决方法——格式编码问题
- mysql导入导出数据中文乱码解决方法小结(1、navicat导入问题已解决,创建连接后修改连接属性,选择高级->将使用Mysql字符集复选框去掉,下拉框选择GBK->导入sql文件OK;2、phpmyadmin显示乱码的问题也解决,两步:1.将sql文件以utf8的字符集编码另存,2.将文件中sql语句中的字段字符集编码改成utf8,导入OK)