文件名称:spidey-web-crawlers:Ruby 中的网络爬虫
文件大小:481KB
文件格式:ZIP
更新时间:2024-07-29 15:09:45
Ruby
网络爬虫 我用于个人项目的网络爬虫存储库
【文件预览】:
spidey-web-crawlers-master
----.gitignore(11B)
----spiders()
--------mobile_running_in_the_usa_com.rb(2KB)
--------running_usa_org.rb(1KB)
--------event_homepage.rb(251B)
--------trifind_com_crawler.rb(3KB)
--------slowtwitch_com.rb(2KB)
--------running_in_the_usa_com.rb(1KB)
--------toughmany_ny.rb(168B)
--------deprecated()
----bin()
--------ruby_chef_install.sh(393B)
--------crawl(476B)
--------echo.sh(112B)
----NOTES(655B)
----log()
--------trifind.log(1.35MB)
--------test.log(43KB)
----README.md(82B)
----config()
--------init.d()
--------deploy.rb(2KB)
--------crawl.god(291B)
----script()
--------refill(411B)
--------crawl(477B)
----lib()
--------recon()
--------recon.rb(294B)
----tmp()
--------restart.txt(0B)
----Gemfile(294B)
----deprecated()
--------bin()
--------log()
--------us_states.rb(1KB)
--------lib()
--------Gemfile(205B)
--------Gemfile.lock(2KB)
----Gemfile.lock(2KB)