node-scraping-mysql:从网站抓取数据并存储在数据库中的示例

时间:2024-05-20 22:18:41
【文件属性】:

文件名称:node-scraping-mysql:从网站抓取数据并存储在数据库中的示例

文件大小:46KB

文件格式:ZIP

更新时间:2024-05-20 22:18:41

nodejs javascript mysql scraping sequelize

节点废弃mysql 这是一个Node.js应用程序。 该应用程序从Wikipedia网站中删除数据,并将其存储在MySQL数据库中。 如何使用 下载回购 安装依赖项npm install 您必须运行数据库服务器(MySQL 5.7或更高版本。如果愿意,可以使用MariaDB 10.1或更高版本) 执行.sql文件,您将在assets文件夹中找到 您必须为MySQL配置身份验证数据。 将您的凭据写入文件_env或使用提供的示例数据 将文件_env重命名为.env 使用node .执行脚本node . 或npm start 每分钟,您都会在bdd上获得新数据! 对于运行测试: npm run test:coverage 对于运行文档: npm run doc-view


【文件预览】:
node-scraping-mysql-master
----.gitignore(1KB)
----README.md(725B)
----test()
--------test.js(4KB)
----conf_jsdoc.json(478B)
----package.json(899B)
----src()
--------config-sequelize.js(894B)
--------saveOnDatabase.js(901B)
--------config-log4js.js(980B)
--------scrapedDataModel.js(851B)
--------index.js(1KB)
--------scraping.js(2KB)
--------utils.js(772B)
----_env(128B)
----.eslintrc.json(589B)
----assets()
--------database.sql(2KB)
--------database_user.sql(289B)
----package-lock.json(180KB)

网友评论