您的位置:首页 > 编程语言 > Python开发

初学python爬虫,记录一下学习过程,requests库获取网页代码

2020-03-06 15:27 288 查看
初学爬虫,在看崔庆才的书,记录一下。

#获取三秋书屋源代码
#导入requests库
import requests
#定制请求头
headers = {'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) '
'AppleWebKit/537.36 (KHTML, like Gecko) '
'Chrome/80.0.3987.87 Safari/537.36'}
#请求url网址
url = 'https://www.d4j.cn/'
#使用get()方法获取该网页的源代码
r = requests.get(url,headers = headers)
#打印状态码 200代表正常
print(r.status_code)
#打印网页源代码,解码后的数据,有时会解码错误
print(r.text)
#.content()为直接从网络上抓取的数据,没有经过解码
print(r.content)

加粗样式

  • 点赞
  • 收藏
  • 分享
  • 文章举报
warm... 发布了18 篇原创文章 · 获赞 14 · 访问量 1501 私信 关注
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: 
相关文章推荐