分布式爬虫

时间:2015-09-21 03:37:20
【文件属性】:

文件名称:分布式爬虫

文件大小:441KB

文件格式:RAR

更新时间:2015-09-21 03:37:20

爬虫 分布式 数据库

代码实现了爬虫的基本功能,并用MSMQ实现了通信,下载网页内容存入了数据库。简单的小例子,以后会修改完善


【文件预览】:
Mycrawler_latest
----ManCenter()
--------bin()
--------FormMan.resx(6KB)
--------Program.cs(492B)
--------obj()
--------FormMan.designer.cs(5KB)
--------ManCenter.csproj(4KB)
--------MymessageQueue.cs(4KB)
--------Properties()
--------FormMan.cs(3KB)
----Mycrawler_01()
--------Mycrawler_01.csproj(4KB)
--------bin()
--------Program.cs(500B)
--------obj()
--------FormCrawler1.resx(6KB)
--------FormCrawler1.designer.cs(4KB)
--------FormCrawler1.cs(12KB)
--------MymessageQueue.cs(4KB)
--------Properties()
----crawler2003.mdb(104KB)
----crawler.accdb(5.52MB)
----Mycrawler.suo(77KB)
----Mycrawler_01.xaddin(266B)
----VisualStudio.postbuild(10KB)
----Mycrawler.sln(2KB)
----Mycrawler_02()
--------bin()
--------FormCrawler2.resx(6KB)
--------Program.cs(500B)
--------obj()
--------Mycrawler_02.csproj(4KB)
--------FormCrawler2.cs(11KB)
--------FormCrawler2.designer.cs(2KB)
--------MymessageQueue.cs(4KB)
--------Properties()
----Xenocode()
--------Mycrawler_01.exe(0B)

网友评论

  • 看了一下,还不错
  • 很有价值,学习中!
  • 写的挺简洁的,基本上能用
  • 学习中,很不错的学习材料