`
kabike
  • 浏览: 597829 次
  • 性别: Icon_minigender_1
  • 来自: 大连
社区版块
存档分类
最新评论

浅谈Hbase 的强一致性

 
阅读更多
从一开始就知道hbase是CAP中的CP系统,即hbase是强一致性的.我原来一直以为hbase的强一致性是因为底层的HDFS写入时,必须所有副本都写入成功才能返回.最近才想明白,hbase之所以是CP系统,实际和底层HDFS无关,它是CP系统,是因为对每一个region同时只有一台region server为它服务,对一个region所有的操作请求,都由这一台region server来响应,自然是强一致性的.在这台region server fail的时候,它管理的region failover到其他region server时,需要根据WAL log来redo,这时候进行redo的region应该是unavailable的,所以hbase降低了可用性,提高了一致性.设想一下,如果redo的region能够响应请求,那么可用性提高了,则必然返回不一致的数据(因为redo可能还没完成),那么hbase就降低一致性来提高可用性了.
1
0
分享到:
评论
1 楼 fei33423 2017-09-25  
同意你的说法. hbase 的强一致性分为两部分来说.
数据分为两部分  1.文件存储 2.hbase region 本身有 lsm 的内存数据.

对于第一部分,hdfs 的数据有个特点不可变. 对于不可变的数据好处是不用考虑更新时的数据一致性. 而分布式的数据一致性本身的由来也是因为各个不同的人想改同一个值(paxos 是 大家都想对"决议"进行修改,使其变成某个值)
meta 数据的修改时通过 zk 的,所以一致性也得到了保证.

对于第二部分数据,由于只有一个 region,只有一个操作者.故也没啥一致性问题.

相关推荐

Global site tag (gtag.js) - Google Analytics