HBase 的存储结构

2016-10-17 杜亦舒

HBase 中的表常常是超级大表，这么大的表，在 HBase 中是如何存储的呢？

HBase 会对表按行进行切分，划分为多个区域块儿，每个块儿名为 HRegion

HBase 是集群结构，会把这些块儿分散存储到多个服务器中，每个服务器名为HRegionServer

服务器多了，就需要一个管理者 HMaster，负责 HRegion 的分配、HRegionServer 负载均衡的处理等事务

当某个 HRegion 的大小达到阈值后，便会被分割开来，新的 HRegion 也会由 HMaster 进行分配，放置到合适的 HRegionServer 中

HRegion 是 HBase 中分布式存储的最小单元，但并不是存储的最小单元

HRegion 内部会按照列族进行切分，分为多个 Store，每个 Store 保存一个列族，所以 HRegion 由一个或者多个 Store 组成

每个 Strore 又由一个 MemStore 和 N个 StoreFile 组成

MemStore 是内存存储单元，当内存中数据达到阈值后，写入 StoreFile，StoreFile 以 HFile 格式保存

HBase 数据的物理存储是基于 Hadoop 的分布式存储的

这样，综合起来便形成了 HBase 的整体架构图

HBase 的存储结构相关推荐

一文讲清HBase的存储结构
![image](http://image.spacedong.top/Swan%20River.jpg) ### 前言 `Hbase` 是一个分布式的.多版本.面向列的开源 `KV` 数据库.运行在 ...
HBase 数据存储结构
在HBase中, 从逻辑上来讲数据大概就长这样: 单从图中的逻辑模型来看, HBase 和 MySQL 的区别就是: 将不同的列归属与同一个列族下支持多版本数据这看着感觉也没有那么太大的区别呀, ...
BigData NoSQL —— ApsaraDB HBase数据存储与分析平台概览
一.引言时间到了2019年,数据库也发展到了一个新的拐点,有三个明显的趋势: 越来越多的数据库会做云原生(CloudNative),会不断利用新的硬件及云本身的优势打造CloudNative数据库, ...
hbase查看表结构_HBase
HBase 是一种分布式.可扩展.支持海量数据存储的NoSQL 数据库. 逻辑结构物理存储结构数据模型逻辑上,HBase的数据模型同关系型数据库很类似,数据存储在一张表中,有行有列.HBase的 ...
Cassandra 的数据存储结构——本质是SortedMapRowKey, SortedMapColumnKey, ColumnValue
Cassandra 的数据存储结构 Cassandra 的数据模型是基于列族(Column Family)的四维或五维模型.它借鉴了 Amazon 的 Dynamo 和 Google's BigTab ...
Hadoop Hbase适合存储哪类数据？(转)
最适合使用Hbase存储的数据是非常稀疏的数据(非结构化或者半结构化的数据).Hbase之所以擅长存储这类数据,是因为Hbase是column-oriented列导向的存储机制,而我们熟知的RDBMS ...
java对象底层原存储结构图解_图解图库JanusGraph系列-一文知晓“图数据“底层存储结构...
大家好,我是洋仔,JanusGraph图解系列文章,实时更新~ 图数据库文章总目录: 转载文章请保留以下声明: 一:存储模式留言或私信我,邀请你加入"图数据库交流"微信群! 1. ...
hbase查看表结构_HBase 与Hive的集成
HBase与Hive的对比 Hive 数据仓库 Hive的本质其实就相当于将HDFS中已经存储的文件在Mysql中做了一个双射关系,以方便使用HQL去管理查询. 用于数据分析.清洗 Hive适用于离线 ...
分布式列数据库--理解hbase列存储机制、架构、表结构设计、命令操作
1. HBase简介 HBase是Hadoop Database的简称,是建立在Hadoop文件系统之上的分布式面向列的数据库. HBase和HDFS HDFS适用于存储大容量文件的分布式文件系统,不 ...

HBase 的存储结构

HBase 的存储结构

HBase 的存储结构相关推荐

最新文章

热门文章