reddit-scraper:实时的reddit评论刮板。 抓取JSON并将其解析到数据库中

时间:2024-06-06 03:43:09
【文件属性】:

文件名称:reddit-scraper:实时的reddit评论刮板。 抓取JSON并将其解析到数据库中

文件大小:10KB

文件格式:ZIP

更新时间:2024-06-06 03:43:09

Python

Reddit刮板 这是一个用Python编写的相当简单的多线程reddit注释抓取器和解析器。 我不建议在任何环境中(尤其是在生产环境中)未经修改地使用此代码。 立足于MetaReddit和AutoModerator。 这已通过Python 2.6.9进行了测试。


【文件预览】:
reddit-scraper-master
----INSTALLATION.md(2KB)
----scrape_comments.py(7KB)
----spiderbase.py(2KB)
----requirements.txt(728B)
----scraper.cfg.example(381B)
----models.py(5KB)
----check_comment_rate.py(3KB)
----LICENSE.md(1KB)
----README.md(290B)
----.gitignore(129B)

网友评论