您的位置:首页 > 运维架构 > Linux

几个常用的Linux操作系统监控脚本(转)

2012-07-10 21:08 351 查看
org\apache\nutch\util下的NutchConfiguration.java在NUTCH中占有重要地位,他读取"nutch-default.xml"和"nutch-site.xml"两个配置文件。NUTCH的其他工具都有一个Configuration对象,这个读取就一般用NutchConfiguration实例化,从而获得该工具相应的配置参数。如URL过滤工具就会在nutch-default.xml寻找相关的配置文件regex-urlfilter.txt、automaton-urlfilter.txt、prefix-urlfilter.txt、suffix-urlfilter.txt从而获取相应的过滤规则。
另一关键点是:nutch-default.xml还通过plugin.includes属性找到需要的扩展插件(Extention),默认的插件是protocol-http|urlfilter-regex|parse-(text|html|js)|index-basic|query-(basic|site|url)|summary-basic|scoring-opic|urlnormalizer-(pass|regex|basic)(利用与正则表达式对插件进行过滤)
Extention在NUTCH中扮演重要角色,网页抓取、URL过滤功能都是通过插件实现的。
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: