python-web-crawler

时间:2024-04-09 14:35:30
【文件属性】:

文件名称:python-web-crawler

文件大小:9.61MB

文件格式:ZIP

更新时间:2024-04-09 14:35:30

Python

python简易爬虫范例 含Docker化以及flask API 初步作业 如果要在本地开发,则电脑需要先安装docker,python3,然后安装python虚拟环境 python -m pip install --user virtualenv 本地端 先启用selenium的图片(如果电脑没有,docker会自动帮你pull下来) docker run --rm -d -v /dev/shm:/dev/shm -p 4444:4444/tcp selenium/standalone-chrome python虚拟环境相关 备注:如果已经安装好虚拟环境,可以直接跳过以下步骤。 建立虚拟环境 python3 -m venv venv python启动虚拟环境,粘贴以下程序码在cmd中并直接按Enter # windows系統 .\venv\Scripts\activate.bat


【文件预览】:
python-web-crawler-master
----.dockerignore(16B)
----git-auto-commit.sh(104B)
----install.sh(37B)
----Dockerfile(198B)
----chromedriver(10.44MB)
----chromedriver.exe(8.46MB)
----requirements.txt(169B)
----README.md(1KB)
----__pycache__()
--------test_web_crawler.cpython-38.pyc(3KB)
----docker-compose.yml(560B)
----crawl_uri.py(685B)
----readme.md(1KB)
----test_web_crawler.py(3KB)
----unitest.py(1KB)

网友评论