hbase命令行操作

1. HBase学习——1.HBase基础

HBase基础：

1. HBase简介：

   • 定义：HBase是一个建立在Hadoop文件系统之上的分布式、面向列的数据库，提供快速随机访问海量结构化数据的能力，是Hadoop生态系统的一部分。
   • 功能：利用Hadoop的文件系统提供容错能力，支持实时读写访问。

2. HBase与HDFS的关系：

   • HDFS：用于存储大容量文件的分布式文件系统，不支持快速单独记录查找，提供高延迟批量处理，数据只能顺序访问。
   • HBase：建立在HDFS之上，提供在较大的表中快速查找数据的能力，支持数十亿记录的低延迟访问单个行记录。

3. HBase存储机制：

   • 表结构：由行排序，由行键、列族、列和单元格组成。表中可以有多个列族和任意数量的列。
   • 索引与访问：列族内部使用哈希表和提供随机访问，并存储索引以快速查找HDFS文件中的数据。

4. 面向行与面向列：

   • 面向行：适用于联机事务处理，适用于实时系统。
   • 面向列：适用于联机分析处理，设计用于支持复杂的分析操作，提供直观易懂的查询结果。HBase是面向列的数据库。

5. 名词概念：

   • Rowkey：用于唯一区分某一行的数据，支持单行查询、范围扫描和全表扫描，对HBase性能影响重大。
   • Column：列，表示数据字段。
   • ColumnFamily：列族，一组列的集合。
   • Timestamp：时间戳，用于标识数据的版本。
   • Cell：由Rowkey、Column和Timestamp唯一确定的单元格，存储实际数据。

6. HBase特点：

   • 数据检索：仅通过主键和主键范围检索数据。
   • 事务支持：不支持复杂事务，只支持行级事务。
   • 数据类型：支持结构化、半结构化和非结构化数据。
   • 扩展方式：主要依靠横向扩展。

7. HBase表特点：

   • 大容量：表可以有上十亿行、上百万列。
   • 面向列：数据按列存储。
   • 稀疏性：表中允许存在大量空值。
   • 无模式：表结构灵活，不需要事先定义。

8. 应用场景：

   • 海量数据存储和准实时查询，如交通数据采集、订单流水数据保存、交易记录和历史数据库查询。

9. HBase架构：

   • 表分割：将表分割为区域，由区域服务器提供服务。
   • 主要组件：客户端库、主服务器和区域服务器，支持负载均衡和模式变化。
   • 区域服务器：管理区域，处理客户端请求，维护区域大小。
   • 主服务器：负责区域分配、负载均衡、模式变化和元数据操作。

10. Zookeeper在HBase中的作用：

    • 用于协调主服务器和区域服务器之间的活动，确保集群状态的一致性。

11. HBase命令：

    • 提供了丰富的命令行工具，包括创建、列出、禁用、启用、描述、修改和删除表，以及数据操作命令如put、get、scan和delete。
    • 常用的HBase命令包括status、version、table_help、whoami等，用于查询系统状态、版本信息、表相关命令帮助和当前用户信息。