scrapyd 安装包

时间:2021-07-21 07:50:54
【文件属性】:

文件名称:scrapyd 安装包

文件大小:18KB

文件格式:ZIP

更新时间:2021-07-21 07:50:54

爬虫

Scrapy,Python开发的一个快速、高层次的屏幕抓取和web抓取框架,用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛,可以用于数据挖掘、监测和自动化测试。 Scrapy吸引人的地方在于它是一个框架,任何人都可以根据需求方便的修改。它也提供了多种类型爬虫的基类,如BaseSpider、sitemap爬虫等,最新版本又提供了web2.0爬虫的支持。


【文件预览】:
scrapyd-client-master
----MANIFEST.in(106B)
----.travis.yml(555B)
----README.rst(6KB)
----requirements-dev.txt(39B)
----CHANGES.rst(448B)
----tests()
--------test_scrapyd-deploy.py(745B)
--------__init__.py(0B)
--------test_schedule.py(993B)
--------test_errors.py(1KB)
--------test_projects.py(536B)
--------test_spiders.py(1KB)
----tox.ini(375B)
----LICENSE(1KB)
----setup.cfg(28B)
----scrapyd_client()
--------utils.py(3KB)
--------cli.py(4KB)
--------deploy.py(10KB)
--------commands.py(2KB)
--------lib.py(2KB)
--------__init__.py(0B)
--------VERSION(8B)
----setup.py(1KB)
----.gitignore(51B)
----.bumpversion.cfg(109B)

网友评论