【文件属性】:
文件名称:spider163:抓取网易云音乐热门评论
文件大小:624KB
文件格式:ZIP
更新时间:2021-05-03 14:27:46
python spider 163 Python
spider163
GitHub上最易用的网易云音乐爬虫系统
安装模块
第一步:指定SPIDER163_PATH环境变量,缺省情况下为$HOME/spider163
第二步:把默认配置文件spider163.conf拷贝到SPIDER163_PATH下,并配置数据库
第三步:pip install spider163
spider163 --help
历史文档
...
使用指南
$ spider163 initdb
$ # 根据配置文件的数据库信息自动创建数据库表,删除全部数据通过resetdb实现
$ spider163 resetdb
$ # 重建相关数据库
$ spider163 updatedb
$ # 根据时间重置过期数据重新抓取
$ spider163 classify
$ # 获取已知曲风列表
$ spider163 playlist
$ # 默认下载全部推荐歌单(1000+
【文件预览】:
spider163-master
----MANIFEST.in(82B)
----logo.jpeg(139KB)
----spider163()
--------settings.py(924B)
--------utils()
--------mail()
--------www()
--------__init__.py(2B)
--------template()
--------version.py(2KB)
--------bin()
--------spider()
----doc()
--------2017.Q4.TODO.md(565B)
--------2018.Q2.TODO.md(208B)
--------2018.Q1.TODO.md(400B)
----.travis.yml(120B)
----LICENSE(1KB)
----setup.py(2KB)
----README.md(4KB)
----Makefile(360B)
----pypi.sh(86B)
----hack()
--------docker-compose.yaml(720B)
--------spider()
----.gitignore(1KB)
----wechat.jpeg(119KB)