Python爬取招聘信息并保存到本地
2018-03-22 22:49
525 查看
# _*_ coding:utf-8 _*_
import requests
from bs4 import BeautifulSoup as bs
import re
import os
def getJobInfo(url):
headers={"User-Agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36"}
r = requests.get(url,headers=headers).content
soup=bs(r,'html.parser')
for item in soup.find_all('li',class_='job_item clearfix'):
f.write(str(item.get_text(' ')))
f.write(str((item.a.get('href'))))
f.write('\n')
#job_style=['renli','zpshengchan','tech','zpjixieyiqi','zhuanye']
#city=['bj','sh','sz','gz']
i=1
f=open('北京教育招聘.txt','w',encoding='utf-8')
while i<71:
url='http://bj.58.com/zhuanye/pn%d' %i
i=i+1
getJobInfo(url)
f.close()
import requests
from bs4 import BeautifulSoup as bs
import re
import os
def getJobInfo(url):
headers={"User-Agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36"}
r = requests.get(url,headers=headers).content
soup=bs(r,'html.parser')
for item in soup.find_all('li',class_='job_item clearfix'):
f.write(str(item.get_text(' ')))
f.write(str((item.a.get('href'))))
f.write('\n')
#job_style=['renli','zpshengchan','tech','zpjixieyiqi','zhuanye']
#city=['bj','sh','sz','gz']
i=1
f=open('北京教育招聘.txt','w',encoding='utf-8')
while i<71:
url='http://bj.58.com/zhuanye/pn%d' %i
i=i+1
getJobInfo(url)
f.close()
相关文章推荐
- Python抓取聚划算商品分析页面获取商品信息并以XML格式保存到本地
- python学习笔记(二)保存爬取到的信息到本地
- [Python Scrapy爬虫] 二.翻页爬取农产品信息并保存本地
- python爬虫由浅入深9---定向爬取股票数据信息并保存至本地文件
- Python3爬虫学习4:降爬取的信息保存到本地
- [Python] 抓取聚划算页面商品分析页面获取商品信息并以XML格式保存到本地
- [Python] (多线程版本)抓取聚划算页面商品分析页面获取商品信息并以XML格式保存到本地
- python 用本地git来保存文件或者博客,实现版本控制
- Android保存Log信息到本地文件
- 不务正业--用python爬虫抓取Konachan的图片并保存到本地文件
- 将页面信息保存到本地文件和读取本地文件信息到页面
- python 抓取图片保存在本地
- 当 App 崩溃的时,把崩溃信息保存到本地的同时,自动给 GitHub 提交崩溃 issue。
- 用Python下载一个网页保存为本地的HTML文件实例
- java爬虫实战(1):抓取信息门户网站中的图片及其他文件并保存至本地
- Python爬虫:爬取拉勾网招聘信息
- Python学习笔记之爬取网页保存到本地文件
- 可以将控制台输出信息保存到本地的Log4j配置
- Android将程序崩溃信息保存到本地文件
- Python爬取拉勾网招聘信息