Java实现的网络爬虫程序,简单易懂无框架(我的网络大作业)
2012-06-17 16:32
761 查看
我要用Java做一个ftp的服务器,有时间的话会加上流量控制,当然我自己也不知道能不能成功,应该问题不会太大吧。
当然我做完后,会把实现的工程文件传上去。
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~分割~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
我不做ftp了,突然就没有了激情啥的,我寻思寻思网络爬虫吧。
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~分割~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
今天做完了,当然是网络爬虫的实现。其实叫这名我都有些不好意思,我写的这个(当然也是参考了很多网络上的资料)只是针对于百度贴吧,当然思想都是一样的,只是在代码里进行匹配时是按照百度贴吧里的规范。
一共有两个版本,核心的专区算法是一样的,弄两个是因为还有一个是给猪小谨做的,谁让是作业呢。
version1:
界面使用swing实现 很简单的小界面。
MyEclipse下完成。
将抓取的内容写入D盘的一个存放txt文件的文件夹里,文件名就是帖子的主题。
version2:
此版本是web版的,之所以做成web版纯粹是手贱为了用一用bootstrap的css,很无聊吧。
当然显示方法不再是将结果写入txt,而是直接显示在网页上,有两层。
界面还是比较丑,因为没有时间做了。
好吧,废话就这么多。关于以上两个版本的工程文件我都会上传。
下面是工程名。有兴趣的朋友可以去看看。
当然我做完后,会把实现的工程文件传上去。
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~分割~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
我不做ftp了,突然就没有了激情啥的,我寻思寻思网络爬虫吧。
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~分割~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
今天做完了,当然是网络爬虫的实现。其实叫这名我都有些不好意思,我写的这个(当然也是参考了很多网络上的资料)只是针对于百度贴吧,当然思想都是一样的,只是在代码里进行匹配时是按照百度贴吧里的规范。
一共有两个版本,核心的专区算法是一样的,弄两个是因为还有一个是给猪小谨做的,谁让是作业呢。
version1:
界面使用swing实现 很简单的小界面。
MyEclipse下完成。
将抓取的内容写入D盘的一个存放txt文件的文件夹里,文件名就是帖子的主题。
version2:
此版本是web版的,之所以做成web版纯粹是手贱为了用一用bootstrap的css,很无聊吧。
当然显示方法不再是将结果写入txt,而是直接显示在网页上,有两层。
界面还是比较丑,因为没有时间做了。
好吧,废话就这么多。关于以上两个版本的工程文件我都会上传。
下面是工程名。有兴趣的朋友可以去看看。
相关文章推荐
- Java+MySQL实现网络爬虫程序
- Java实现简单的网络爬虫
- java实现的简单网页爬虫:Servlet 搜索引擎核心爬虫程序(三)
- 转载:基于java的网络爬虫框架(实现京东数据的爬取,并将插入数据库)
- Java简单的网络爬虫实现
- 基于java的网络爬虫框架(实现京东数据的爬取,并将插入数据库)
- 关于使用Java实现的简单网络爬虫Demo
- JAVA 实现简单的网络爬虫,获取网站图片
- java实现网络爬虫程序
- Java实现简单的网络爬虫(一)
- node.js实现简单的网络爬虫程序
- 基于Java的简单网络爬虫的实现--下载Silverlight视频
- 基于HttpClient4.0的网络爬虫基本框架(Java实现)
- java 简单网络爬虫实现
- 【java学习记录】12.用Socket网络访问方法,实现简单的网络聊天程序
- Java实现简单的网络爬虫
- java实现一个简单的网络爬虫代码示例
- Java+MySQL实现网络爬虫程序
- 基于java的网络爬虫框架(实现京东数据的爬取,并将插入数据库)
- Java简单的网络爬虫实现