用C#写的蜘蛛程序也叫小偷程序

时间:2012-04-07 03:20:15
【文件属性】:

文件名称:用C#写的蜘蛛程序也叫小偷程序

文件大小:32KB

文件格式:RAR

更新时间:2012-04-07 03:20:15

蜘蛛 c#

"蜘蛛"(Spider)是Internet上一种很有用的程序,搜索引擎利用蜘蛛程序将Web页面收集到数据库,企业利用蜘蛛程序监视竞争对手的网站并跟踪变动,个人用户用蜘蛛程序下载Web页面以便脱机使用,开发者利用蜘蛛程序扫描自己的Web检查无效的链接……对于不同的用户,蜘蛛程序有不同的用途。那么,蜘蛛程序到底是怎样工作的呢? 蜘蛛是一种半自动的程序,就象现实当中的蜘蛛在它的Web(蜘蛛网)上旅行一样,蜘蛛程序也按照类似的方式在Web链接织成的网上旅行。蜘蛛程序之所以是半自动的,是因为它总是需要一个初始链接(出发点),但此后的运行情况就要由它自己决定了,蜘蛛程序会扫描起始页面包含的链接,然后访问这些链接指向的页面,再分析和追踪那些页面包含的链接。从理论上看,最终蜘蛛程序会访问到Internet上的每一个页面,因为Internet上几乎每一个页面总是被其他或多或少的页面引用。


【文件预览】:
CSharpSpider
----Spider.csproj(5KB)
----Spider.suo(23KB)
----bin()
--------Debug()
----SpiderForm.resx(6KB)
----Parse.cs(5KB)
----Spider.cs(6KB)
----ParseHTML.cs(3KB)
----SpiderForm.cs(13KB)
----DocumentWorker.cs(8KB)
----AttributeList.cs(3KB)
----Attribute.cs(2KB)
----temp()
----Spider.csproj.user(2KB)
----App.ico(1KB)
----Done.cs(3KB)
----Spider.sln(895B)
----TestSpider.cs(403B)
----Spider.exe(32KB)
----AssemblyInfo.cs(2KB)

网友评论

  • 自己修改了下,是我想要的,差点自建关键词或者去除HTML标签功能
  • 不错,谢谢分享
  • 写的还不错,可以借鉴一下
  • 还行。值得借鉴
  • 很棒的程序,采用了多线程下载。
  • 不是我要的
  • 还行。值得借鉴一下,对学习有帮助
  • 不错的代码,学习很有用。
  • 这个超牛,很棒的源码,学习的好东东,推荐下载
  • 很棒的程序,采用了多线程下载。