WebMagic/JMX&爬虫监控
2015-08-02 00:02
274 查看
WebMagic使用JMX实现了对爬虫的监控,可以通过Jconsole等JMX工具查看本地或者远程的爬虫信息。
为爬虫添加监控:
获取一个SpiderMonitor的实例SpiderMonitor.instance(),并将要监控的Spider注册进去即可。可以注册多个Spider到SpiderMonitor中。
Spider spider=Spider.create();
SpiderMonitor.instance().register(spider);
spider.start();
为爬虫添加监控:
获取一个SpiderMonitor的实例SpiderMonitor.instance(),并将要监控的Spider注册进去即可。可以注册多个Spider到SpiderMonitor中。
Spider spider=Spider.create();
SpiderMonitor.instance().register(spider);
spider.start();
相关文章推荐
- Linux的SOCKET编程详解
- CentOS下将MySQL 5.1升级到MySQL 5.5的步骤
- Linux下编译安装Mysql 5.5的简单步骤
- Linux
- Commons Configuration之二基本特性和AbstractConfiguration
- Commons FileUpload
- OpenCV基本操作
- Linux下查看内存使用情况方法总结
- corosync+pacemaker+主从模式drbd构建高可用mysql
- 为了hadoop,苦研算法
- Computer OpenCart 自适应主题模板 ABC-0084
- centos6的yum配置脚本-163的源+epel+rpmforge源
- VMware虚拟机Linux忘记root密码
- 关于 ICTCLAS 2015 / NLPIR 出现的证书过期以及Cannot open Configure file 问题
- RHEL6: how to use Centos6 yum
- Egg Drop 扔鸡蛋
- Linux调用backtrack函数打印程序崩溃时的调用堆栈
- linux笔记
- Nginx实现多个站点使用一个端口(配置Nginx的虚拟主机)
- iptables WEB服务器配置示例