简体爬行器

时间:2010-09-10 07:51:43
【文件属性】:

文件名称:简体爬行器

文件大小:112KB

文件格式:RAR

更新时间:2010-09-10 07:51:43

爬行器,robot,spider

一个简单功能的爬行器,使用C#+Sql Server开发,用到了反射、线程池、流、log4net等知识点。可以作为学习使用。

可以用来收录整站URL、下载图片、检测每个页面是否包含指定内容等等。


【文件预览】:
eFree.ApacheLoader.Core
----HTMLDocumentFilter.cs(4KB)
----bin()
--------Debug()
----Logger.cs(711B)
----App()
--------DownImage.cs(2KB)
--------MatcheKeyword.cs(2KB)
--------EmbodyUrl.cs(3KB)
----eFree.ApacheLoader.Engine.csproj(4KB)
----CrawlUrlMemorizer.cs(6KB)
----obj()
--------Debug()
----Properties()
--------AssemblyInfo.cs(1KB)
----AppFactory.cs(2KB)
----ReadWriter.cs(1015B)
----StoreObjectFormat.cs(405B)
----HTMLDocumentParser.cs(7KB)
----Config.cs(3KB)
----ApacheLoader.sql(8KB)
----Interface()
--------IHTMLDocumentParser.cs(931B)
--------IReadWriter.cs(877B)
--------IApp.cs(815B)
--------INamer.cs(619B)
--------IMemorizer.cs(2KB)
--------ILoader.cs(894B)
----App.config(4KB)
----UriValidate.cs(2KB)
----FileNamer.cs(633B)
----AppWorkList.cs(1KB)
----HttpWebRequestLoader.cs(1KB)
ApacheLoader.sln
ApacheLoader.suo
ApacheLoader
----bin()
--------Debug()
----obj()
--------Debug()
----Properties()
--------AssemblyInfo.cs(1KB)
----Program.cs(774B)
----ApacheLoader.csproj(2KB)
----ApacheLoader.csproj.user(168B)

网友评论

  • 多谢提供,可以参考学习