几个独立的scrapy爬虫程序

时间:2018-05-29 11:12:07
【文件属性】:

文件名称:几个独立的scrapy爬虫程序

文件大小:894KB

文件格式:ZIP

更新时间:2018-05-29 11:12:07

scrapy

几个scrapy独立程序,爬取的内容包括博客园,Coursera,豆瓣,小百合,知乎等网站。


【文件预览】:
scrapy_example-master
----xiaobaihe()
--------xiaobaihe()
--------result.json(132KB)
--------scrapy.cfg(260B)
----tutorial()
--------tutorial()
--------scrapy.cfg(258B)
--------Resources(16KB)
--------Books(33KB)
--------dmoz.json(8KB)
----douban()
--------result.json(112KB)
--------douban()
--------scrapy.cfg(254B)
----Coursera()
--------.DS_Store(6KB)
--------coursera()
----zhihu()
--------zhihu()
--------scrapy.cfg(252B)
--------filename.json(3.38MB)
----LICENSE(1KB)
----cnbeta()
--------result.json(41KB)
--------scrapy.cfg(254B)
--------cnbeta()
----.DS_Store(6KB)
----.gitignore(956B)
----README.md(1KB)

网友评论

  • 没有一个可以跑的 自己调吧
  • 不错,挺好用的,值得借鉴