当你批量操作数据的时候,常常会使用到update table1 from table2的这种方式,这种方式是最简洁的。
但当你从excel或者CSV文件更新海量数据时,再使用这种方法,那性能是不是好?字符串拼接又何其之多,大数据是不是需要分组更新?
我不想去检测各种方法的速度,因为我个人比较认可以下方式,欢迎大家批评与指正。
我需要使用到的类主要是SqlCommandBuilder。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
|
/// <param name="table">准备更新的DataTable新数据</param>
/// <param name="TableName">对应要更新的数据库表名</param>
/// <param name="primaryKeyName">对应要更新的数据库表的主键名</param>
/// <param name="columnsName">对应要更新的列的列名集合</param>
/// <param name="limitColumns">需要在SQL的WHERE条件中限定的条件字符串,可为空。</param>
/// <param name="onceUpdateNumber">每次往返处理的行数</param>
/// <returns>返回更新的行数</returns>
public static int Update(DataTable table, string TableName, string primaryKeyName, string [] columnsName, string limitWhere, int onceUpdateNumber)
{
if ( string .IsNullOrEmpty(TableName)) return 0;
if ( string .IsNullOrEmpty(primaryKeyName)) return 0;
if (columnsName == null || columnsName.Length <= 0) return 0;
DataSet ds = new DataSet();
ds.Tables.Add(table);
int result = 0;
using (SqlConnection sqlconn = new SqlConnection(SqlHelper.ConnString))
{
sqlconn.Open();
//使用加强读写锁事务
SqlTransaction tran = sqlconn.BeginTransaction(IsolationLevel.ReadCommitted);
try
{
foreach (DataRow dr in ds.Tables[0].Rows)
{
//所有行设为修改状态
dr.SetModified();
}
//为Adapter定位目标表
SqlCommand cmd = new SqlCommand( string .Format( "select * from {0} where {1}" , TableName,limitWhere), sqlconn, tran);
SqlDataAdapter da = new SqlDataAdapter(cmd);
SqlCommandBuilder sqlCmdBuilder = new SqlCommandBuilder(da);
da.AcceptChangesDuringUpdate = false ;
string columnsUpdateSql = "" ;
SqlParameter[] paras = new SqlParameter[columnsName.Length];
//需要更新的列设置参数是,参数名为"@+列名"
for ( int i = 0; i < columnsName.Length; i++)
{
//此处拼接要更新的列名及其参数值
columnsUpdateSql += ( "[" + columnsName[i] + "]" + "=@" + columnsName[i] + "," );
paras[i] = new SqlParameter( "@" + columnsName[i], columnsName[i]);
}
if (! string .IsNullOrEmpty(columnsUpdateSql))
{
//此处去掉拼接处最后一个","
columnsUpdateSql = columnsUpdateSql.Remove(columnsUpdateSql.Length - 1);
}
//此处生成where条件语句
string limitSql = ( "[" + primaryKeyName + "]" + "=@" + primaryKeyName);
SqlCommand updateCmd = new SqlCommand( string .Format( " UPDATE [{0}] SET {1} WHERE {2} " , TableName, columnsUpdateSql, limitSql));
//不修改源DataTable
updateCmd.UpdatedRowSource = UpdateRowSource.None;
da.UpdateCommand = updateCmd;
da.UpdateCommand.Parameters.AddRange(paras);
da.UpdateCommand.Parameters.Add( "@" + primaryKeyName, primaryKeyName);
//每次往返处理的行数
da.UpdateBatchSize = onceUpdateNumber;
result = da.Update(ds,TableName);
ds.AcceptChanges();
tran.Commit();
}
catch
{
tran.Rollback();
}
finally
{
sqlconn.Dispose();
sqlconn.Close();
}
}
return result;
}
|
注: 此方法调用时要传入的参数,包括主键名和列名都应与数据库实际的名称相对应。
你可以不传入限定的where条件,如果传入,只需传入:Name="chamy" or Name="jundy",不需加入“where”等字符,不可以在此处传入主键的限定,你只需要在主键名这个参数上传入名称即可。
以上就是为大家分享的SqlCommandBuilder类批量更新excel或者CSV数据的方法,希望对大家的学习有所帮助。