自己用java做的一个类似网页爬虫的东西

时间：2009-03-16 05:05:32
【文件属性】：

文件名称：自己用java做的一个类似网页爬虫的东西

文件大小：765KB

文件格式：RAR

更新时间：2009-03-16 05:05:32

java Java小程序 爬虫 网页爬虫

能实现整个网站的抓取,暂时还不支持javascript形式的连接 能抓取网页,网页中的所有的URL重新生成,图片,文件，包括所有格式的文件,全部都能保持原有的路径结构 抓取下的网页,通过apache搭建成网站,能在本地保持成一个完整的网站的形式 能直接使用，也能支持二次开发使用，不过暂时还会存在比较多的不完善的地方. 提供内置线程,能控制抓取操作执行的时间,循环执行 东西还不是很完善,欢迎大家提出意见

立即下载

网友评论

  • 不能使用啊
  • 不错，根据自己的实际情况再稍加修改就可以用了。
  • 存在乱码问题，撮合能用。
  • 代码很乱。。都是html文件。。我都不知道怎么下手。。
  • 好不错，可以参考
  • 可能是我基础比较差，看不太懂
  • 有问题，不能使用
  • 用起来好像很复杂的额样子
  • 可能是我基础比较差，看不太懂
  • 楼主需要重新编写，貌似不能使用好像不能使用。
  • 下载的文件有点乱，不满足需求。谢谢
  • 下载的文件有点乱，不满足需求。 谢谢
  • 的吧，， 全是html文件。。。。 怎么2次开发啊？
  • 貌似不能用
  • 用起来好像很复杂，java编写的
  • 貌似有问题啊。。
  • 貌似有问题，不能使用
  • 用起来好像很复杂的额样子
  • 能下载好多文件，但是不能连接起来
  • 假 的吧，， 全是html文件。。。。 怎么2次开发啊？

相关文章