文件名称：ProxyPool:代理池
文件大小：13KB
文件格式：ZIP
更新时间：2024-05-28 09:32:43
Python
IPProxy-Spider fetch free ip-proxies 抓取免费代理 How To Use 安装好下面的软件包和模块 Python3.6+ scrapy aioredis aiohttp 配置好aioweb/config.py的redis地址和密码 在aioweb中运行python main.py即可。 也可以用gunicorn，在这个目录下运行 gunicorn main:app_factory --bind localhost:8080 --worker-class aiohttp.GunicornWebWorker 请求http://127.0.0.1:8080/proxy即可获得随机代理。 Example Codes ''' please set redis address & password in aioweb/config.py then run: pyth
【文件预览】：
ProxyPool-develop
----config.py(377B)
----Dockerfile(338B)
----scrapy.cfg(268B)
----requirements.txt(114B)
----README.md(1KB)
----proxies()
--------settings.py(3KB)
--------pipelines.py(639B)
--------middlewares.py(4KB)
--------__init__.py(0B)
--------items.py(319B)
--------spiders()
----.gitignore(591B)
----aioweb()
--------db.py(4KB)
--------main.py(355B)
--------views.py(2KB)
--------log_config.py(2KB)
--------aioredis_client.py(3KB)