您的位置:首页 > 其它

第一个爬虫实例-简单抓取网页内容

2017-09-22 21:18 323 查看
通过以上各种各样的坑,也就是完成以下2个软件的安装,和另外若干包的安装后,终于可以爬虫一个实例。

新手关于python2.7.11 与 IDE pycharm的安装于使用

python下安装easy_install、pip遇到的问题

即爬虫一个网站的页面所有文字为例子.

以下内容是此刻 糗事百科的部分截取内容:







……

pycharm中运行以下程序,便有运行结果

import requests
from bs4 import BeautifulSoup

content = requests.get('http://www.qiushibaike.com').content
soup = BeautifulSoup(content, 'html.parser')

for div in soup.find_all('div', {'class': 'content'}):
print div.text.strip()

运行结果:
前段时间工作不忙,请了二十天假回老家,同龄人要么都结婚了,要么都不在家,我这一天除了吃饭睡觉,就是陪老爸老妈聊天看电视,再不就是去湖边瞎溜达,转眼假期满了,准备回程上班,因为早上五点就要赶车,老妈四点钟就起来,给我煮了好多鸡蛋还有早准备好的特产让我带走,因为太早就没叫老爸起床,老妈送我上车前说,二十天过的真快,习惯了你在家了,你却要走了,心里一下子空落落的,特不好受,老妈说的我心里也不好受,到下午时老爸打电话说,你走怎么不叫我,我现在才知道你走了。写这么多,不为别的,儿行千里,母担忧,有时间多



查看全文

多年以前经常在广西各个城市出差,宾馆里床头都会有小名片,只有电话没地址哪种,闲的无聊,就收集、然后把柳州的放在玉林,把玉林的放到来宾…

上学时有天去网吧上网,一下玩忘了时间,到家都八点多了,正想着进门怎么跟父母扯谎,忽然听到屋内父母在和人说话,心想家里有人应该不会打我了。打开门一看,卧槽!班主任家访

标题留给你们![挖鼻孔][挖鼻孔][挖鼻孔]

果果姥姥刚刚抱回来一个大葫芦、准备包饺子!果果看见了、惊呼!哇……大梨!!!我说果果、那是葫芦!果果问我、那里面有葫芦娃吗?我无奈的说有、是六娃……于是果果在院子里找了一下午六娃

懂么??嗯哼

我真的被吓到了

感谢2+2给孩子们带来的快乐![玫瑰][玫瑰]!替孩子们谢谢漂亮姐姐们和帅哥哥们的爱心蛋糕和月饼!又是一年中秋佳节……感谢各位,感谢阿依,

大儿子四岁,很是贪玩总吵闹着让我给买玩具,可是家里玩具那么多,就没想买!,奈何儿子吵的实在太烦人了,终于在儿子的压迫下我想到了一条妙计..........那天我翻箱倒柜找出多年前坏掉的VR手柄,故意在儿子面前摆弄了一会,突然大喊(奥特曼变身!),大儿子瞬间就惊呆了,一副爸爸是英雄的表情,我喊完假装发现儿子,连忙的把手柄藏在身后,装作若无其事的走开了,从此以后大儿子再也没吵闹着要买玩具,而是围在我身旁要奥特曼变身器,我以后事情已经过去了,可是我万万没想到..................



查看全文

抓不住时间的我,总是眼睁睁看它溜走,世界上年轻的人到处有,为何我已经老了。为了生活孤军奋斗,早就吃够了生活的苦,世界上靠颜吃饭的人到处有,为何我是这么的丑……致我即将到来的30岁生日

再说一个愚人节的吧,高中的时候寝室每一层都有一个寝室管理员,每天早上六点半准时叫你起床上早自习~~~~~高一那年愚人节的早上宿管老师的门被上了锁出不来,急得不能行就给楼下宿管打电话:陈老师来给我开下门,我让锁进屋里了。陈老师:别叫我,我也让锁进去了,哦对了三楼的也出不来!!

,,,,哈哈哈哈哈哈

师傅:“徒弟,你初吻是什么感觉?”徒弟:“脸红,烫了一整天!”师傅:“哈哈,没想到你丫还害羞!”徒弟:“我没害羞,只是对方比较害羞了,扇了我十几个耳刮子……”师傅:“跟你说过多少次了,你就是不听,女人的劲能小点……”

#伤感与生俱来#今天有个朋友跟我说,他昨晚很晚睡不着,就想如果他突然有两千万了该怎么分,一个一个分,等想起我的时候,他说他觉得给我多了,我肯定不要,所以最后决定给我两百!两百!!两千万就给我两百?!然后我手一抖,就给他拉黑了。

明明是拉稀,还来放个屁,走在大街上,我好蓝瘦,香菇。

出差几天回来恰逢老婆大姨妈来了,一直憋着,你懂的。今天称体重,发现比出差前重了一斤,老婆说外面的饭比家里的好吃呀,为表忠心,我说,要不是你大姨妈来让我射一次这一斤就没了[哈哈][哈哈],老婆白了我一眼说,切,就你那玩意儿剁下来称都没有一斤重,卧槽,伤自尊了哦,你特么是有多嫌弃,匿了[大哭][大哭][大哭]

好友中午带来生鱼片,让我尝尝,吃了一片,好友问我怎么样?感觉挺好吃的,凉凉的…问她是不是芥末过期了,味道有点像薄荷!好友点点头:嗯,忘记买芥末了,放了点薄荷牙膏!我瞪了她一眼:牙膏能吃啊?好友幽幽的说:所以才让你先尝尝…我。。。

大神们,告诉我这是啥

最近有些冷落老公了,他说我再这样就要失去他了,突然我就急了,“是不是有人撩你?有的话,我灭她全家,诛她九族!”老公不紧不慢地问我“你先告诉我,九族是哪九族?”我。。。“一族,二族,三族,四族,五族,六族,七族,八族,九族”哼,还想难住我,好歹你媳妇我是人民教师呢

布厂的人就可以这么任性这么浪费吗?上个厕所都用布,你要知道这么大一块布捐给山区孩子们够他们一个人上好几次厕所了!

有一天,闺蜜和男朋友吵架,一直在哭。看的我心里那个纠结的就说:好歹你也叫你男朋友买辆宝马坐在里面哭,不然都对不起你那眼泪。我那傻闺蜜说:我们这里有共享宝马吗?

在卧室看“小电影”的时候我哥突然进来了,吓的我把手机往旁边一扔,赶紧闭上了眼睛。我哥看到以后笑着说了句:“哎呦,还学会装死了?”我没理他,继续装睡。结果这时我哥看到我的手机还在放着“小电影”,然后大喊了一声:“卧槽!你这死的真特么龌龊!”

刚才坐地铁二号线,因为是第二站所以有几个空位子,因为路很远就坐下去了!第三站就上了很多人,我是个别人站着自己不好意思坐着的人!可是虽然没有座位了可是也没有需要让座的!又过了一站~上来一个带着四五岁的孩子女士,然后本人马上站了起来让座,那个女的连说~谢谢,谢谢!虽然是应该的,可是心里真的挺暖的!也不好意思站在旁边,因为怕她难为情,就走到一对情侣面前站着了,又过了两站车上人可以说就很多了,这时候又上来一个抱着能有两三岁的女的,应该是孩子的奶奶~车开了之后这个抱孩子的女的跟那对情侣说:能不能给我让个座



查看全文

公司上班要求统一服装定制工作服,第二天上班看到清单上谁的谁的尺码。看到我尺码我当时就震惊了,我都没说怎么会知道我的尺寸呢,太不可思议了吧!后面写着楼主最大尺码。。。

你可以嘲笑现在的我,但你决定不了以后的我  求神评

Process finished with exit code 0

完美!!!!!!
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: