Node.js下向MySQL数据库插入批量数据的方法

时间:2022-10-18 07:37:04

项目(nodejs)中需要一次性插入多笔数据到数据库,数据库是mysql的,由于循环插入的性能太差,就像使用批量插入的方法提高数据的插入性能。

批量插入的数据库的表结构如下:

Node.js下向MySQL数据库插入批量数据的方法

1.数据库连接

?
1
2
3
4
5
6
7
8
var mysql = require('mysql');
// 数据库信息
var connection = mysql.createConnection({
 host  : 'localhost',
 user  : '数据库用户名',
 password : '数据库登录密码',
 database : '操作数据库名'
});

将插入数据转换成嵌套数组

例如要插入的两条数据:

记录1:

?
1
2
3
4
from:"index"
to:“www.alibaba.com”
status:1
is_new:0

记录2:

?
1
2
3
4
from:"index1"
to:"www.google.com"
status:1
is_new:0

转为一下格式:

?
1
2
3
4
var values = [
 ["index","www.alibaba.com",1,0],
 ["index1","www.google.com",1,0]
];

编写插入语句

?
1
var sql = "INSERT INTO url(`from`,`to`,`status`, `is_new`) VALUES ?";

调用query函数完成数据的插入

?
1
2
3
4
5
6
7
connection.query(sql, [values], function (err, rows, fields) {
 if(err){
    console.log('INSERT ERROR - ', err.message);
    return;
   }
   console.log("INSERT SUCCESS");
});

完整代码:

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
var mysql = require('mysql');
// 数据库信息
var connection = mysql.createConnection({
 host  : 'localhost',
 user  : '数据库用户名',
 password : '数据库登录密码',
 database : '操作数据库名'
});
var values = [
 ["index","www.alibaba.com",1,0],
 ["index1","www.google.com",1,0]
];
var sql = "INSERT INTO url(`from`,`to`,`status`, `is_new`) VALUES ?";
connection.query(sql, [values], function (err, rows, fields) {
 if(err){
    console.log('INSERT ERROR - ', err.message);
    return;
   }
   console.log("INSERT SUCCESS");
});

同时在这里记录一个基于事务的操作(还没有实践,具体效果不详)

用事务循环插入、如果有一条插入失败进行回滚

Node.js下向MySQL数据库插入批量数据的方法

mysql模块、connection.beginTransaction是做事务

然后我这里封装了一个函数、对传入的数组做循环插入或更新之类的操作、如果有一条失败了就回滚、全对了就commit

总结

以上所述是小编给大家介绍的Node.js下向MySQL数据库插入批量数据,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对服务器之家网站的支持!

原文链接:http://blog.csdn.net/lym152898/article/details/78246230