hbase

1、提高Hbase API写入操作效率:

  • Write Buffer Size Hbase Client会在数据累积到设置的阈值后才提交Region
    Server。这样做的好处在于可以减少RPC连接次数
  • Compression 压缩
    HColumnDescriptor hcd = new HColumnDescriptor(familyName);
    hcd.setCompressionType(Algorithm.SNAPPY); 数据量大,边压边写也会提升性能的,毕竟IO是大数据最严重的瓶颈,哪怕使用了SSD也一样。压缩方式推荐使用SNAPPY。从压缩率和压缩速度来看,性价比最高。
  • 预分区和rowkey散列:防止热点写

laogooooog 发布了24 篇原创文章 · 获赞 0 · 访问量 896 私信 关注

相关文章

超详细的记录了HBase 集群搭建的整个过程,以及搭建过程出现...
头歌 HBase(相关的五个实验)
1.创建一个学生信息表,用来存储学生的姓名(姓名作为行键,...
大数据课程综合实验案例1 案例简介1.1 案例目的1.2 适用对象...
HBase从浅入深,(初级)什么是HBase,模型,NOSQL,架构,n...
Hadoop之Hbase安装和配置