基于C#开发的网络爬虫源代码

用C#语言编写的网络爬虫源程序.网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本。