Python实例:网络爬虫抓取豆瓣3万本书(9)
2017-03-16 12:21
453 查看
代码在这里:点击打开链接
这个实例是作者的一次课程设计。虽然内容不咋的,但是作为课程设计,我还是很惊讶的了。
至少我以前没做过这种程度的课程设计。当然实习和毕业设计除外。
再总结一下吧。
1.知识点在开头三步就已经全部出现了。或者这就是万事开头难吧。
2.第四步开始都是重复的东西,自己组织的数据结构,组织得清晰,但是没什么卵用。
3.第四步开始时没有什么可以参考的了,侧重看前三步的知识点就行了。
4.可以使用代理,之前我没考虑过的。。。
5.还是学到很多东西的。
6.路径是个问题。在不同目录上面调试的时候,路径不同。很蛋疼。得想办法解决
在熟悉了语法和知识点之后,爬虫好像也不是那么神奇。关键还是设计的思想。
或许这是程序员升华的途径吧。
作为技术人员的我们,或者只是伪技术者。往往侧重于技术,听说哪个比较叼,就想用哪个。
其实到现在,开始觉得跟C++没什么差别了。
超脱了语法,之后就是库,各种各样的库。我们不可能样样都想着自己去实现,最终是什么都做不了。
或许学两种不大相同的语言有很好的借鉴作用吧。这样更容易接触计算机的本质。
这个实例是作者的一次课程设计。虽然内容不咋的,但是作为课程设计,我还是很惊讶的了。
至少我以前没做过这种程度的课程设计。当然实习和毕业设计除外。
再总结一下吧。
1.知识点在开头三步就已经全部出现了。或者这就是万事开头难吧。
2.第四步开始都是重复的东西,自己组织的数据结构,组织得清晰,但是没什么卵用。
3.第四步开始时没有什么可以参考的了,侧重看前三步的知识点就行了。
4.可以使用代理,之前我没考虑过的。。。
5.还是学到很多东西的。
6.路径是个问题。在不同目录上面调试的时候,路径不同。很蛋疼。得想办法解决
在熟悉了语法和知识点之后,爬虫好像也不是那么神奇。关键还是设计的思想。
或许这是程序员升华的途径吧。
作为技术人员的我们,或者只是伪技术者。往往侧重于技术,听说哪个比较叼,就想用哪个。
其实到现在,开始觉得跟C++没什么差别了。
超脱了语法,之后就是库,各种各样的库。我们不可能样样都想着自己去实现,最终是什么都做不了。
或许学两种不大相同的语言有很好的借鉴作用吧。这样更容易接触计算机的本质。
相关文章推荐
- Python实例:网络爬虫抓取豆瓣3万本书(2)
- Python实例:网络爬虫抓取豆瓣3万本书(8)
- Python实例:网络爬虫抓取豆瓣3万本书(5)
- Python实例:网络爬虫抓取豆瓣3万本书(3)
- Python实例:网络爬虫抓取豆瓣3万本书(7)
- Python实例:网络爬虫抓取豆瓣3万本书(6)
- Python实例:网络爬虫抓取豆瓣3万本书(4)
- Python实例:网络爬虫抓取豆瓣3万本书(1)
- python3.4学习笔记(十三) 网络爬虫实例代码,使用pyspider抓取多牛投资吧里面的文章信息,抓取政府网新闻内容
- Python学习笔记 第二部分 - 正则表达式 与 爬虫小实例(抓取豆瓣电影中评分大于等于8分的影片)
- python3.4学习笔记(十四) 网络爬虫实例代码,抓取新浪爱彩双色球开奖数据实例
- Python爬虫----抓取豆瓣电影Top250
- python抓取网页图片 python爬虫实例
- Python 实现网络爬虫 抓取静态网页【代码】
- [Python学习] 简单网络爬虫抓取博客文章及思想介绍
- [Python学习] 简单网络爬虫抓取博客文章及思想介绍
- 实践Python的爬虫框架Scrapy来抓取豆瓣电影TOP250
- 编写Python爬虫抓取豆瓣电影TOP100及用户头像的方法
- 使用Python编写简单网络爬虫抓取视频下载资源
- [Python学习] 简单网络爬虫抓取博客文章及思想介绍