基于python爬取有道翻译过程图解
2020-04-11 07:05
716 查看
1.准备工作
先来到有道在线翻译的界面http://fanyi.youdao.com/
F12 审查元素 ->选Network一栏,然后F5刷新 (如果看不到Method一栏,右键Name栏,选中Method)
输入文字自动翻译后发现Method一栏有GET还有POST;GET是指从服务器请求和获得数据,POST是向指定服务器提交被处理的数据、
随便打开一个POST,找到preview可以看到我们输入的“我爱你一生一世”数据,可以证明post的提交数据的
下面分析一下Headers各个字段的意义;User-agent字段很重要
下面来看一下request模块中urlopen方法,查看文档;
发现urlopen有一个data参数,如果参数没赋值(默认None)就是GET形式,如果data参数被赋值了,就以POST形式提交
在这里,data参数其实是一个字典 ;就是源代码中From Data的数据
下面一篇文章是对urlencode与unquote的详细解释:(urllib库里可惜没有urldecode函数)
https://www.jb51.net/article/183857.htm
为什么要进行编码和解码呢?------》对于一些中文或者字符,url是不识别的,需要进行编码转换!encode('utf-8')把unicode的形式变成utf-8decode('utf-8')把utf-8形式变成Unicode编码形式2.下面进行敲!
以上就是本文的全部内容,希望对大家的学习有所帮助
您可能感兴趣的文章:
相关文章推荐
- 基于python全局设置id 自动化测试元素定位过程解析
- Grokking Algorithms 算法图解 一本基于Python的算法科普读本
- Python网络通信之socket模块(四)基于Tcp/Ip的TCP交互通信serve/client的编写过程
- python爬虫爬取笔趣网小说网站过程图解
- 基于Python实现ComicReaper漫画自动爬取脚本过程解析
- Python 打造基于有道翻译的命令行翻译工具(命令行爱好者必备)
- Python安装whl文件过程图解
- 基于python调用psutil模块过程解析
- 基于Python生成个性二维码过程详解
- 基于python框架Scrapy爬取自己的博客内容过程详解
- 在Mac中PyCharm配置python Anaconda环境过程图解
- Python 异常处理Ⅳ过程图解
- 基于python框架Scrapy爬取自己的博客内容过程详解
- Python基于Opencv来快速实现人脸识别过程详解(完整版)
- linux环境下的python安装过程图解(含setuptools)
- Windows平台搭建基于PyQt5.8.2开发Python GUI程序的环境(含打包过程)
- 基于Eclipce配置Spring Boot过程图解
- 基于Python实现签到脚本过程解析
- 基于python实现雪花算法过程详解
- 基于回归曲线拟合模型的ALS(最小二乘法)推导过程以及Python实现