基于webkit技术的爬虫

这几天发现爬虫很有趣，我们基于爬虫可以实现很多产品。如果想基于爬虫技术来实现解析符合html5规范的页面的客户端，阅读器就是一个很好地应用。

多数阅读器多是基于数据订阅的，估计是通过定时发起AJAX来获取页面的内容，一些智能化的方面便现在定向推荐。如果有些站点没有提供订阅功能，我们是否可以通过定向规则定制的方式来实现对这些页面的订阅呢，说不定已经有人实现了。

目前搜狗和QQ的阅读器是兼容webkit的。

参考实现方案http://www.hackhome.com/InfoView/Article_200440.html，目前采用的应该是webkit2+wayland结构

其实我在想我们也可以直接采用android或者cef3,或者node-webkit来实现，不过感觉cef3会更好些。