关于C#编写的网络爬虫资料

下面链接就是一个c#写的网络爬虫，上面是翻译版 ，下面是英文原版 http://blog.csdn.net/wangkun9999/archive/2007/05/02/1594496.aspx http://www.codeproject.com/cs/internet/Crawler.asp

另外，爬虫抓下来的东西要进行分析是必然的了，但c#中好像没有HTML解析器，特别是对那种不太规范的HTML，这里是一些c#解析HTML的资料。 http://www.codeproject.com/csharp/html2xhtmlcleaner.asp http://www.pcxy.net/Article/netprogramme/xml/Article_36767.html http://www.cnblogs.com/dragon/archive/2006/12/06/174946.html