用c#写的一个简单的蜘蛛程序

【文件属性】：

文件名称：用c#写的一个简单的蜘蛛程序

文件大小：9KB

文件格式：TXT

更新时间：2013-05-21 16:24:55

c#写的蜘蛛程序

"蜘蛛"（Spider）是Internet上一种很有用的程序，搜索引擎利用蜘蛛程序将Web页面收集到数据库，企业利用蜘蛛程序监视竞争对手的网站并跟踪变动，个人用户用蜘蛛程序下载Web页面以便脱机使用，开发者利用蜘蛛程序扫描自己的Web检查无效的链接……对于不同的用户，蜘蛛程序有不同的用途。那么，蜘蛛程序到底是怎样工作的呢？