文件名称:docker-scrapy-crawler:docker scrapyd scrapy boot2docker crawler - 一个可以“Dockerized”的蜘蛛 Python 应用程序
文件大小:151KB
文件格式:ZIP
更新时间:2024-07-01 04:56:27
Julia
Docker Scrapyd Scrapy Crawler - Mailan-Spider 应用程序 这个存储库是一个可以“Dockerized”的蜘蛛 Python 应用程序。 它附带了在 Mac OS X 中“Dockerizing”Python 应用程序的分步指南。您将了解 Scrapy、Scrapy、Docker 和 Boot2Docker。 mailan-spider 应用程序将作为 docker 映像分发。 mailan-spider docker 镜像(根据本指南构建)托管在 Docker Hub 快速开始 假设你已经安装并配置了 docker,运行这个命令来下载镜像并启动一个运行蜘蛛爬虫的新容器。 $ docker run -it -p 6800:6800 iammai/mailan-spider 下载图像并且您的容器正在运行后,运行此命令以安排蜘蛛抓取作业 蜘蛛服
【文件预览】:
docker-scrapy-crawler-master
----Dockerfile(1KB)
----scrapy.cfg(278B)
----requirements.txt(348B)
----mailan()
--------settings.py(491B)
--------__init__.pyc(183B)
--------pipelines.py(286B)
--------items.pyc(463B)
--------__init__.py(22B)
--------items.py(258B)
--------spiders()
--------settings.pyc(259B)
----setup.py(253B)
----README.md(30KB)
----sample-item-output()
--------scrapd()
--------items.json(322KB)
----.gitignore(17B)