文件名称:gh-action-data-scraping:这显示了如何使用github action进行定期数据抓取
文件大小:527KB
文件格式:ZIP
更新时间:2024-02-28 19:48:54
cron gh-actions git-scraping JavaScript
gh动作数据抓取 此仓库显示了如何使用github动作来自动进行数据抓取,并将其存储在git中! 免费的git存储和计划的更新!!! 基本思想 您设置了cron触发的github操作( -每5分钟出现一次最大频率) 它通过签出您的仓库 npm install并运行您的抓取脚本,将文件写入存储库中的某个位置。 此仓库使用Node,但是您可以使用所需的任何语言 使用再次签入 该脚本如下所示: # /.github/workflows/daily.yml on : schedule : - cron : ' 0 8 * * * ' # every day at 8am name : Pull Data and Build jobs : build : name : Build runs-on : ubuntu-latest steps : -