【文件属性】:
文件名称:scrapy_avatar:使用邮箱抓取头像,gravatar | qq
文件大小:5KB
文件格式:ZIP
更新时间:2021-07-09 21:02:49
Python
使用邮箱抓取头像
可以使用gravatar和qq抓取用户头像,优先大图,过滤掉default的图片。
失败后自动从失败位置继续抓取。
email_list 每行一个邮件
简单用法
pip install requests
将scrapy_avatar.py放到某文件夹下例如/opt/projects/scripts
mkdir /opt/projects/scripts/avatar
将你的文件列表放到email_list_0.json里面
python scrapy_avatar.py gravatar 0 或者 python scrapy_avatar.py qq 0
简单说明
当email_list比较大的时候, 为了使用更多的进程你可以将email_list拆分成多个list
例如 email_list_0.json email_list_1.json
你就可以使用 python
【文件预览】:
scrapy_avatar-master
----LICENSE(1KB)
----scrapy_avatar.py(8KB)
----requirements.txt(9B)
----README.md(1KB)