python模拟登录并且保持cookie的方法详解
2017-04-04 11:27
1276 查看
前言
最近在爬行 nosec.org 的数据,看了下需要模拟登录拿到cookie后才能访问想抓的数据,重要的是 nosec.org 的登录页面 form 中有个 authenticity_token 字段每次访问登录页面都会自动生成,而且会和你的用户名,密码一样被POST到服务器。
经过一番研究后发现,直接访问网站登录界面的时候,服务器的响应头会有一个Set-Cookie字段,如下:
_nosec_session=ZTlHNmxuZXE4R0s1UXpsVUxGRTNPblNBWFd2TXU4TU9aNWVJM2lyLzNFY0pLeUdNMDY1cmZqanpkc0ppaGtjU i9kTGdWenBrNXJKenNqbnN2YUxucE1DRW5UMHNTR1RxWDZPeGlLazllTmY1czVpYWplazJXdWkvZS9wUHJpc1Jya3ZzcmNVMytPR it2T1dEcGx4bHNDTTVzSmVTb0xhSjRycE03QUl5RXE5Z2tZWG1mTHFBWGx1QW52QjBURi8rLS1acE8yeVRtMFRZR1JWdExneStwdmpRPT0 %3D--a6ccd9a12a8af5c8b5fb6625c24bb4db0398c503; path=/; HttpOnly
而且页面form 的表单有一个 authenticity_token 的 input ,内容如下:
<input type="hidden" name="authenticity_token" value="cGdhqVxDMRndpKbpvIV66wfEQlGf4Rz6UtXqsf79brEvFveHw2rCc6uz3euFEyUlpuA0azt5uNhnmrUiCaAyUg==" />
之前按照后端的逻辑分析_nosec_session 的值 经过解密以及各种xx手法得到 authenticity_token 的值,然后顺带着 username 和 password post就行了,最后发现这真是一个大写的傻逼!! 老是用后端的思维思考问题,过不得最近走路都走不好了。所以来,直接在页面中抓取已经生成的 authenticity_token 的值,然后 顺着 POST 过去就好了啊。
使用 requests 库 的
Session()方法,确实很好用,比早期直接拿 cookielib 就干方便多了。
代码
类XXX 的 login 方法用来模拟登录,就贴出这部分登录的代码好了。
class XXX: def login(self): r = self.s.get('https://nosec.org/users/sign_in') html = r.text p1 = re.compile(r'city_token" value="(.*?)"') res = re.search(p1,html) authenticity_token = str(res.group(1)) print 'authenticity_token:',authenticity_token # print 'cookies',self.s.cookies # print s.cookies data = { 'authenticity_token':authenticity_token, 'user[login]':'xxxxx', 'user[password]':'xxxxx' } r = self.s.post('https://nosec.org/users/sign_in',data=data) # print r.headers # print r.request.headers # print self.s.cookies print '[*] OK!' return True
调用了 login 方法后 下次直接用
self.s.get()请求网页就会带着 cookie 啦。
之前被思路坑了一次,被笔误也坑了一次(https 写成 http),导致我抓狂了好久才发现这个 “BUG” = =、所以还得多谢 代码,提高排 Bug 的效率 2333!
总结
以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作能带来一定的帮助,如果有疑问大家可以留言交流,谢谢大家对脚本之家的支持。
您可能感兴趣的文章:
- python处理cookie详解
- Python模仿POST提交HTTP数据及使用Cookie值的方法
- 使用Python中的cookielib模拟登录网站
- python使用cookielib库示例分享
- python使用urllib2实现发送带cookie的请求
- Python爬虫利用cookie实现模拟登陆实例详解
- 详解Python的Django框架中的Cookie相关处理
- python使用cookie库操保存cookie详解
- 详解Python中的Cookie模块使用
- python cookielib 登录人人网的实现代码
- 玩转python爬虫之cookie使用方法
- python3实现读取chrome浏览器cookie
- 利用selenium 3.7和python3添加cookie模拟登陆的实现
- Python中urllib+urllib2+cookielib模块编写爬虫实战
- Python基于PycURL自动处理cookie的方法
- 在Python中使用cookielib和urllib2配合PyQuery抓取网页信息
- Python使用cookielib模块操作cookie的实例教程
- Python get获取页面cookie代码实例
相关文章推荐
- python爬虫设置cookie模拟登录微博方法
- Python3爬虫之五网页下载器的几种方法【Python使用cookie模拟登录CSDN】
- PHP cURL应用实现模拟登录与采集使用方法详解
- Python实现模拟登录及表单提交的方法
- python通过cookie模拟已登录状态的初步研究
- python 利用浏览器 Cookie 模拟登录的用户访问知乎
- 函数:将网页提取的cookie转换成python用来模拟登录的cookie
- python实现简单爬虫模拟登录淘宝(cookie简介)
- python模拟登录带cookie
- python通过cookie模拟已登录状态的初步研究
- Python3 Post登录并且保存cookie登录其他页面
- Python爬虫之模拟知乎登录的方法教程
- [python 爬虫学习]利用cookie模拟网站登录
- python 爬虫 利用selenium模拟登录帐号 向requests中重设 cookie
- python 模拟登录,使用cookie自动领取下载豆(最新2016)
- Python模拟登录12306的方法
- 【详解】Python模拟登录b站并抓取信息【教程续】
- Python手动构造Cookie模拟登录后获取网站页面内容
- PHP cURL实现模拟登录与采集使用方法详解教程
- Python爬虫利用cookie实现模拟登陆实例详解