hbase介绍及环境搭建课件八讲安装.pdfVIP

HBase介绍

HBase是参考的bigtable的一个开源产品，建立在hdfs之上

的一个提供高可靠性、高性能、列、可伸缩、实时读写的数据

库系统。是一种介于nosql和RDBMs之间的一种数据库系统，仅支

持通过rowkey和range进行数据的检索，主要非结构化数据

和半结构化数据。

HBase和Hadoop一样，目标是通过横向扩展，添加普通机器来

增加性能和计算性能。HBase特点：大(一个表可以有上亿

行以及百万级的行)、面向行、稀疏(由于null不占用空

间，所有表结果可以设计的非常稀疏)。

HBase组成结构

HBase使用Zookeeper进行集群节点管理，当然HBase自身集

成了一个ZK系统，不过一般情况在实际生产环境中不使用。

HBase由master和regionserver两类节点(如果使用HBase自带

的zk服务，那么还有HQuorumPeer进程)。Hbase支持提供

backupmaster进行master备份。其中master节点负责和zk进行

通信以及regionserver的相关位置信息，regionserver节点

实现具体对数据的操作，最终数据在hdfs上。

HBase架构

RegionServer集群结构

HBase逻辑结构

Row时间列簇a其他列

Key戳urlhosttitle其他...簇

r1t7host1

t6url2host0

t5title3

t4host1title2

t3url1

t2title1

t1url0host0title0

其他记录

HBase结构

keyvalue

r1:a:url:t6url2

r1:a:url:t3url1

r1:a:url:t1url0

r1:a:host:t7host1

r1:a:host:t6host0

r1:a:host:t4host1

r1:a:host:t0host0

r1:a:title:t5title3

r1:a:title:t4title2

r1:a:title:t2