大数据平台爬虫部分,把结果存入Mysql数据库,利用Xmysql提供Restful API接口.7z

时间:2022-09-23 11:00:25
【文件属性】:

文件名称:大数据平台爬虫部分,把结果存入Mysql数据库,利用Xmysql提供Restful API接口.7z

文件大小:1.06MB

文件格式:7Z

更新时间:2022-09-23 11:00:25

阿里云数据爬取  数据存入Mysql Xmysql开放接口

利用完整的代码,将阿里云的数据爬取下来,分为第一层和第二层数据,放到Mysql数据库中。利用Xmysql算是node.js 环境中的一个插件,Xmysql把mysql的资源写成了一个非常简单的网页,在主机地址的某个端口提供这个网页上的restful API 服务


【文件预览】:
大数据平台爬虫部分
----SpiderCode()
--------main.py(174B)
--------SQLController.py(1KB)
--------__pycache__()
--------config.ini(128B)
--------aliSpider.py(3KB)
--------readme.txt(151B)
--------alipageSpider.py(1016B)
----headlessChrome+selenium开头模板.py(740B)
----爬虫架构.docx(863KB)
----4.16爬虫数据平台大致框架流程.docx(272KB)

网友评论