1. HBase 简介HBase 简介
jacksujacksu

3. HBase使用场景
• 典型互联网搜索问题
• 捕获增量数据（facebook的Like）
• 内容服务（Tweeter、Facebook帖子
、Instagram 图片和微博等）
• 信息交换（Facebook短信）
• 不适合场景（Join、报表的事务）

4. HBase架构

5. HRegionServer
Hregion Server ClusterHregion Server ClusterHregion Server ClusterHregion Server Cluster
Hregion ServerHregion ServerHregion ServerHregion Server 1111 Hregion ServerNHregion ServerNHregion ServerNHregion ServerNHregion ServerHregion ServerHregion ServerHregion Server 2222 . . .. . .. . .. . .
H W A LH W A LH W A LH W A L
HRegionNHRegionNHRegionNHRegionN. . .. . .. . .. . .
MemStoreMemStoreMemStoreMemStore
Hregion ServerHregion ServerHregion ServerHregion Server
S t o r eS t o r eS t o r eS t o r e
HRegionHRegionHRegionHRegion
S t o r eS t o r eS t o r eS t o r e1111
S t o r eS t o r eS t o r eS t o r e3333 StoreNStoreNStoreNStoreN
S t o r eS t o r eS t o r eS t o r e2222
H F i l eH F i l eH F i l eH F i l e
StoreFileStoreFileStoreFileStoreFile 1111
H F i l eH F i l eH F i l eH F i l e
StoreFileStoreFileStoreFileStoreFile 2222
H F i l eH F i l eH F i l eH F i l e
StoreFileStoreFileStoreFileStoreFile 1111
. . .. . .. . .. . .

6. WAL(Write Ahead Log)
RegionARegionARegionARegionA RegionBRegionBRegionBRegionB RegionCRegionCRegionCRegionC
HLogKeyHLogKeyHLogKeyHLogKey HLogKeyHLogKeyHLogKeyHLogKey
WALEditWALEditWALEditWALEdit
HLogKeyHLogKeyHLogKeyHLogKey
WALEditWALEditWALEditWALEditWALEditWALEditWALEditWALEdit
• Key包含数据所属的表名及RegionName，timeStamp，sequenceNumber等信息。
• Value保存了WALEdit实例，WALEdit包含客户端每一次发来的变更信息。

7. Region

8. Store&MemStore
• 不同的ColumnFamily存储在不同的Store中
• 在将数据写入StoreFile之前，会先写入
MemStore

9. StoreFile/HFile（一）

10. D a taD a taD a taD a ta D a taD a taD a taD a taD a taD a taD a taD a ta
M e taM e taM e taM e ta
((((OptionalOptionalOptionalOptional))))
M e taM e taM e taM e ta
((((OptionalOptionalOptionalOptional))))
File InfoFile InfoFile InfoFile Info
DataDataDataData
In d e xIn d e xIn d e xIn d e x
MetaMetaMetaMeta
In d e xIn d e xIn d e xIn d e x
TrailerTrailerTrailerTrailer
K e yK e yK e yK e y
V a lu eV a lu eV a lu eV a lu e
K e yK e yK e yK e y
V a lu eV a lu eV a lu eV a lu e
K e yK e yK e yK e y
V a lu eV a lu eV a lu eV a lu e
K e yK e yK e yK e y
V a lu eV a lu eV a lu eV a lu e
K e yK e yK e yK e y
V a lu eV a lu eV a lu eV a lu e
K e yK e yK e yK e y
V a lu eV a lu eV a lu eV a lu e
M agicM agicM agicM agic
StoreFile/HFile（二）
K e yK e yK e yK e y
LengthLengthLengthLength
V a l u eV a l u eV a l u eV a l u e
LengthLengthLengthLength
R o wR o wR o wR o w
LengthLengthLengthLength
R o wR o wR o wR o w
ColumnColumnColumnColumn
FamilyFamilyFamilyFamily
LengthLengthLengthLength
ColumnColumnColumnColumn
FamilyFamilyFamilyFamily
ColumnColumnColumnColumn
QualifieQualifieQualifieQualifie
rrrr
T i m eT i m eT i m eT i m e
S t a m pS t a m pS t a m pS t a m p
K e yK e yK e yK e y
T y p eT y p eT y p eT y p e
V a l u eV a l u eV a l u eV a l u e
K e yK e yK e yK e y

11. HBase的内部存储流程

12. split

13. Compaction

14. Client访问用户数据过程

15. Put请求

16. 总结
• 面向列族的key-value
• 依赖HDFS持久化
• 采用zookeeper管理和状态监控
• 提供单行锁，不支持多行锁和事务
• 自动分拆Split、自动压缩
(compaction,LSM的伴生技术)、自动
负载均衡、自动region迁移，自动
replication。

17. 参考文档
• HBase运维碎碎念http://www.slideshare.net/NinGoo/HBase-
8433555

18. ThanksThanks