HBase数据存储和架构

朴灿烈づ我的快乐病毒、 2022-12-20 02:25 145阅读 0赞

1.Table中的所有的行都是按照row key 字典序排列

2.Table在行的方向上分割为多个region

3.Region按大小分割的，每个表开始只有一个region,随着数据量的增多，region不断的增大，当增大到一个阈值的时候，region就会等分两个新的region,之后会有越来越多的region;

4.Region是HBase中分布式存储和负载均衡的最小单元。不同的region分布到不同的RegionServer上；

5.Region虽然是分布式存储的最小单元，但并不是存储的最小单元

Region由一个或者多个store组成，每个store对应一个CF  
每个store又由一个memstore和0到多个storeFile组成  
memstore存储在内存中，storefile存储在HDFS上

6.hbase命名空间

default -> 用户自定义的表

/stu
       /region
          /hstore=cf
              /storeFiles

hbase -> 系统自动的元数据表（namespace,meta）

/namespace
    
      /meta

查看所有的命名空间：list\_namespace  
查看此命名空间下的表：list\_namespace\_tables

7.读hbae数据流程

client   -> zookeeper(meta-region-server)   ->hbase:meta   -> region<=>regionserver

用户发起读的请求之后，首先会去读zookeeper上meta-region-server表信息，通过这个表可以找到HBase:meta表  
存放在哪个RegionServer上，然后再去对应的RegionServer上获取HBase:meta表的信息，此meta表信息记录了  
HBase所有表的region信息。我们可以通过namespace、表名、rowkey定位要读取的是哪个RegionServer上的region

--------------------

以上内容仅供参考学习，如有侵权请联系我删除！  
如果这篇文章对您有帮助，左下角的大拇指就是对博主最大的鼓励。  
您的鼓励就是博主最大的动力！

发表评论取消回复

表情：

评论列表（有 0 条评论，145人围观）

还没有评论，来说两句吧...

相关阅读

相关 HBase海量数据存储实战

数据库最常见的操作就是读写数据，接下来，针对HBase读写数据的流程进行详细介绍。读数据流程从HBase中读数据的流程其实就是寻址的流程，具体流程如下： (1) Cl

绝地灬酷狼/ 2023年10月07日 16:24/ 0 赞/ 42 阅读

相关大数据存储HBase

这两天要写一个方案，某单位想建一个中心数据库，汇聚各业务系统数据，以及各种网上抓取的预报数据。我设想是用HBase。主要考虑点是： 1、开源 2、支持海量数据该单

浅浅的花香味﹌/ 2023年02月28日 15:20/ 0 赞/ 25 阅读

相关 Hbase系统架构及数据结构

Hbase系统架构及数据结构一、基本概念 1.1 Row Key (行键) 1.2 Column Family（列族） 1.3

喜欢ヅ旅行/ 2023年01月03日 12:49/ 0 赞/ 177 阅读

相关 HBase数据存储和架构

1.Table中的所有的行都是按照row key 字典序排列 2.Table在行的方向上分割为多个region 3.Region按大小分割的，每个表开始只有一个region

朴灿烈づ我的快乐病毒、/ 2022年12月20日 02:25/ 0 赞/ 146 阅读

相关 HBase的高并发和实时处理数据、HBase系统架构

参考文章：[HBase的高并发和实时处理数据、HBase系统架构][HBase_HBase] 本文首先简单介绍了HBase,然后重点讲述了HBase的高并发和实时处理数据、

àì夳堔傛蜴生んèń/ 2022年09月13日 06:21/ 0 赞/ 358 阅读

相关带你了解 HBase 数据模型和 HBase 架构

> 摘要：HBase 是一个面向列的 NoSQL 数据库。本文分享自华为云社区《[HBase 架构：HBase 数据模型 & HBase 读/写机制][HBase _HBa

骑猪看日落/ 2022年09月12日 10:59/ 0 赞/ 226 阅读

相关 [Hbase]HBase架构详解和数据的读写流程

HBase架构图理解 ![Image 1][] 18.png 1. HMaster链接Zookeeper的目得：HMaster需要知道哪些HRegionServer

た入场券/ 2022年05月08日 00:06/ 0 赞/ 315 阅读

相关 hbase meta表数据存储

hbase meta表数据存储 1.meta表存储了在系统上的一系列的region信息。以及meta表的信息存储在zookeeper上。 2.meta表结构如下（

水深无声/ 2022年02月09日 12:23/ 0 赞/ 313 阅读

相关 Hbase底层实现——HBASE架构、HBASE数据存储、HBASE数据访问、HBASE的shell操作

多次面试都提到了这个问题，这次来系统的总结一下答题的要点吧。一、HBASE底层设计，也即HBASE的底层架构： 1、HBASE中有多个RegionServer 2、Re

Dear 丶/ 2021年09月22日 11:52/ 0 赞/ 470 阅读

相关 HBase数据检索流程与数据存储

一、HBase数据检索流程 > > > > ![Center][] 上图中，我们可以看出不管客户端读或写一个表的数据，首先链接Zookeeper，因为需

旧城等待，/ 2021年09月14日 02:52/ 0 赞/ 406 阅读