pastebin-scraper:实时抓取的pastebin以消除无聊

时间:2024-02-25 06:06:38
【文件属性】:

文件名称:pastebin-scraper:实时抓取的pastebin以消除无聊

文件大小:6KB

文件格式:ZIP

更新时间:2024-02-25 06:06:38

mysql python scraper sqlite pastebin

糊状刮板 这是的多线程抓取脚本。 它会在主站点上抓取新粘贴,下载其原始内容,并通过用户定义的输出格式对其进行处理。 为什么? 好玩 安装 通常的舞蹈。 pip install -r requirements.txt 在settings.ini定义所有必需的规范。 如果您决定使用数据库输出,请确保已安装相应的连接器。 目前,支持带pymysql MySQL和带Python 3连接器内置标准SQLite。 还要注意,文件输出将创建一个子目录output并将每个粘贴作为一个单独的文件转储到其中。 设定值 ini是一种被低估的文件格式。 以下是设置参数实际作用的一些定义。 一般 PasteLim


【文件预览】:
pastebin-scraper-master
----.gitignore(24B)
----requirements.txt(45B)
----scraper.py(13KB)
----setup.cfg(30B)
----README.md(2KB)
----settings.ini(684B)
----renovate.json(41B)

网友评论