文件名称:recursive-web-crawler:ruby 中的简单递归网络爬虫
文件大小:8KB
文件格式:ZIP
更新时间:2024-07-23 03:31:26
Ruby
站点地图生成递归爬虫 运行: rake crawl[url,depth] #No space after comma!
【文件预览】:
recursive-web-crawler-master
----classes()
--------html_link_tree.rb(156B)
--------crawler.rb(1KB)
--------page.rb(479B)
----helpers()
--------resource_helper.rb(770B)
--------link_helper.rb(667B)
--------page_render_helper.rb(379B)
----sitemap.html(9KB)
----views()
--------site_map.erb(120B)
--------partials()
----spec()
--------classes()
----README.md(108B)
----Rakefile(813B)