关于Hbase客户端和regionserver之间的单连接

时间:2023-01-25 08:30:47

利用Hbase的客户端进行Get或者scan操作时,在regionserver端用netstat -anp|grep 60020时,发现每一个Hbase客户端只有一个和该regionserver的连接,无论hbase client是否开启了多个线程进行并发操作。 后来翻了一下源码,果然是这样的。参见下面的源码截图,

关于Hbase客户端和regionserver之间的单连接

关于Hbase客户端和regionserver之间的单连接

对同一个目的地的RegionServer来说,connection只有一个。这样设计的初衷是为了共享连接,减少维护多个连接的开销

当然也可以用在hbase client的 API中设置采用多个连接的方式,如

conf.set("hbase.client.ipc.pool.type","RoundRobin");
conf.set("hbase.client.ipc.pool.size", "200");
table = new HTablePool(conf, 400,PoolType.RoundRobin);

 

可以参考一下两个链接

http://comments.gmane.org/gmane.comp.java.hadoop.hbase.user/11534

https://issues.apache.org/jira/browse/HBASE-2939