douban_crawler:豆瓣小组图片爬虫

【文件属性】：

文件名称：douban_crawler:豆瓣小组图片爬虫

文件大小：7KB

文件格式：ZIP

更新时间：2024-07-06 16:25:51

Python

douban_crawler 豆瓣小组图片爬虫 功能 爬取豆瓣小组中的图片，其中： Mongodb存储图片相关信息 七牛存储图片文件 本地存储图片文件 用法 python ./crawler.py or python ./crawler.py 配置 需要在config.py中配置 # 默认爬取列表 DEFAULT_LIST = { 'leon-image': 3, # group url is http://www.douban.com/group/leon-image/discussion?start=0 'photoer': 3, 'Microstockphoto': 3, 'pentax-K5': 3

【文件预览】：
douban_crawler-master
----qn.py(550B)
----item.py(2KB)
----query.py(2KB)
----.gitignore(21B)
----config.py(2KB)
----tool.py(852B)
----README.md(3KB)
----crawler.py(4KB)