文件名称:大数据平台爬虫部分,把结果存入Mysql数据库,利用Xmysql提供Restful API接口.7z
文件大小:1.06MB
文件格式:7Z
更新时间:2022-09-23 11:00:25
阿里云数据爬取 数据存入Mysql Xmysql开放接口
利用完整的代码,将阿里云的数据爬取下来,分为第一层和第二层数据,放到Mysql数据库中。利用Xmysql算是node.js 环境中的一个插件,Xmysql把mysql的资源写成了一个非常简单的网页,在主机地址的某个端口提供这个网页上的restful API 服务
【文件预览】:
大数据平台爬虫部分
----SpiderCode()
--------main.py(174B)
--------SQLController.py(1KB)
--------__pycache__()
--------config.ini(128B)
--------aliSpider.py(3KB)
--------readme.txt(151B)
--------alipageSpider.py(1016B)
----headlessChrome+selenium开头模板.py(740B)
----爬虫架构.docx(863KB)
----4.16爬虫数据平台大致框架流程.docx(272KB)