c# 插入数据效率测试(mongodb)

时间:2021-09-23 02:36:21

mongodb的数据插入速度是其一个亮点,同样的10000条数据,插入的速度要比mysql和sqlserver都要快,当然这也是要看使用者怎么个使用法,你代码如果10000次写入使用10000次连接,那也是比不过其他数据库使用事务一次性提交的速度的。

同样,mongo也提供的一次性插入巨量数据的方法,因为mongodb没有事务这回事,所以在在c#驱动里,具体方法是insertmanyasync()一次性插入多个文档。与之对应的是insertoneasync,这个是一次插入一个文档;

insertmanyasync()这个方法带入的参数只要是实现了ienumerable接口的类型就可以,所以可是list<>,这样的数据类型;

同样的10000次插入,两个方法时间差别很大。如图:

c# 插入数据效率测试(mongodb)

使用一次性插入多个文档方法,插入10000条耗时仅1.3秒,分成10000次插入,耗时19.9秒。区别大了个去。同样,前面我做过使用mysql插入10000条记录,要用4秒多,可见,这mongodb插入速度不是吹 的。

具体的代码如下,贴上:

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
using system;
using system.collections.generic;
using system.linq;
using system.text;
using system.threading.tasks;
using mongodb.bson;
using mongodb.driver;
using system.diagnostics;
namespace sqltomongo
{
  public  class mongohelp
  {
    private static imongoclient client
    {
      get
      {
        if (null == _client)
        {
          _client = new mongoclient("mongodb://127.0.0.1:27017");
        }
        return _client;
      }
    }
    public  static imongodatabase database
    {
      get {
         _database = client.getdatabase("hotelpersoninfo");
         return _database;
      }
      set {
        _database = value;
      }
    }
 
    public  static imongocollection<bsondocument> collection
    {
      get {
        return _collection;
      }
      set {
        _collection = value;
      }
    }
 
    protected static imongoclient _client;
    protected static imongodatabase _database;
    protected static imongocollection<bsondocument> _collection;
     //测试效率,两个方法用时比较
    public async static void testmongo()
    {
      //自定义的对象
      roominfo roomdata = new roominfo();
      list<bsondocument> docunemts = new list<bsondocument>();
      collection = database.getcollection<bsondocument>("hotelpersoninfo");
      stopwatch sw = new stopwatch();
      sw.start();
      for (int i = 1; i < 10000; i++)
      {
         //mongo对用户自定义的对象扩展了tobasondocument这个方法,可直接用
        var roomdatadocument = new bsondocument(roomdata.tobsondocument());
        docunemts.add(roomdatadocument);
      }
      //一次10000条
       //这方法 查看api手册,只要实现了ienumerable借口的类型就都行
      await collection.insertmanyasync(docunemts);
      sw.stop();
       timespan ts2 =sw.elapsed;
       console.writeline("total is " + ts2.totalmilliseconds);
 
      ///一次次插 10000次
       stopwatch sw2 = new stopwatch();
       sw2.start();
       for (int i = 1; i < 10000; i++)
       {
         var roomdatadocument = new bsondocument(roomdata.tobsondocument());
         await collection.insertoneasync(roomdatadocument);
       }       
       sw2.stop();
       timespan ts22 = sw2.elapsed;
       console.writeline("total is " + ts22.totalmilliseconds);
 
     // await collection.insertoneasync(roomdatadocument);
       
      //collection = database.getcollection<bsondocument>("hotelpersoninfo");
      // collection.insertoneasync(roomdatadocument);
    }
  }
}

里面使用了一个自定义的对象:

代码如下:

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
using system;
using system.collections.generic;
using system.linq;
using system.text;
using system.threading.tasks;
using mongodb.bson;
namespace sqltomongo
{
 
  public class roominfo 
  {
    public roominfo()
    {
     // id = "test"; 
      name = "nafd"; moblie = "123456"; email = "dd@qq.com"; tel = "010123"; fax = "0755-001";
      identityid = "616112323231"; registertype = "tid"; cardno = "cardno"; sex = "男"; birthday = "1999";
      address = "china beijing"; zipcode = "519000"; registerdate = "2015-03-03";
      district2 = "district2";
      district3 = "district3";
      district4 = "district4";
    }
   // public string id { get; set; }
    /// <summary>
    /// 名字
    /// </summary>
    public string name { get; set; }      
     /// <summary>
    /// 手机号码
    /// </summary>
    public string moblie { get; set; }
    /// <summary>
    /// 邮箱
    /// </summary>
    public string email {get;set;}
    /// <summary>
    /// 座机
    /// </summary>
    public string tel { get; set; }
    /// <summary>
    /// 传真
    /// </summary>
    public string fax { get; set; }
    /// <summary>
    /// 身份证
    /// </summary>
    public string identityid { get; set; }
     /// <summary>
    /// 使用什么注册的
    /// id --身份证 (只需要id身份证的信息)
    /// </summary>
    public string registertype { get; set; }
      /// <summary>
    /// 会员卡号
    /// </summary>
    public string cardno { get; set; }
    /// <summary>
    /// 性别
    /// </summary>
    public string sex { get; set; }
    /// <summary>
    /// 生日
    /// </summary>
    public string birthday { get; set; }
    /// <summary>
    /// 地址
    /// </summary>
    public string address { get; set; }
    /// <summary>
    /// 邮编
    /// </summary>
    public string zipcode { get; set; }
 
    public string district2 { get; set; }
    public string district3 { get; set; }
    public string district4 { get; set; }
    /// <summary>
    /// 注册时间 
    /// </summary>
    public string registerdate { get; set; }
 
  }
}

mongodb的一些小总结

mongodb的安装,官网下载想要的版本,可视化工具mongovue(注意不支持mongodb3.0以上的版本)

下载mis安装,解压后bin,。。。

1.配置环境变量,将h:\mongodb\mongodbinstall\bin bin目录加入环境变量的path里面
2.bin目录同级目录创建data文件夹,data文件夹内新建db、log文件夹log文件夹下再创建mongodb.log
3.输入如下的命令启动mongodb服务:(定位到bin下面)
h:/mongodb/mongodbinstall/bin>mongod --dbpath h:\mongodb\mongodbinstall\data\db
http://localhost:27017 测试是否连接成功
4.data同级目录创建mongodb.config 记事本打开mongodb.config
dbpath=h:\mongodb\mongodbinstall\data\db
logpath=h:\mongodb\mongodbinstall\data\log\mongodb.log
5.用管理员身份打开cmd命令行,进入h:/mongodb/mongodbinstall/bin目录,输入如下的命令:
mongod --config h:\mongodb\mongodbinstall\mongo.config --install --servicename "mongodb"
services.msc可以看到mongodb的服务已经启动

mongodb安装配置完成后,cmd直接录入mongo可进入mongo的命令行,show dbs可以看到现有的数据库(我把之前数据库备份的ns文件放入db文件夹内,show dbs的时候并没有显示出来)

然后安装mongovue(只有mysql可以免费导入到mongodb,因为有sqlserver的对应数据库,,,所以转化通过sqlserver转化为mysql再导入到mongovue)
sqlserver->mysql:mysql中导入向导-》选择odbc-》选择sql server native client 、设置连接(服务器名(本机127.0.0.1)然后sqlserver用户名,密码)下一步-》下一步。。。。结束。
mysql->mongodb:add 一个数据库-》右键rdbms import 然后填写连接。

原文链接:http://blog.csdn.net/chenqiangdage/article/details/50098031