文件名称：crawler-python:一个简单的爬虫框架
文件大小：20KB
文件格式：ZIP
更新时间：2024-06-23 04:47:44
Python
爬虫-python crawler-python 是一个简单的爬虫框架，用于从网站收集在线数据用于学术目的。 快速开始 下载或克隆源代码 ... 目前支持的网站 最好和 goengent 一起工作（哎呀，yelp 挡住了） 未来的网站 去做 可用代理列表 (2014-01-24) 192.3.25.99:7808 204.236.154.194:3128 202.187.160.140:3128 220.181.26.98:80 218.248.7.18:8080 其他 ProxyNova 网站 代理列表
【文件预览】：
crawler-python-master
----.gitignore(333B)
----crawler()
--------contrib()
--------__init__.py(0B)
--------core()
----README.md(947B)
----engadgete_crawler.py(2KB)
----LICENSE(577B)
----dp_crawler.py(3KB)
----AUTHORS(36B)
----yelp_crawler.py(2KB)
----requirements.txt(39B)
----setup.py(456B)
----amazon_crawler.py(2KB)