hbaseshell命令

㈠ 已知HBase資料庫如下，請按要求寫出下列操作的HBase Shell命令。

1、scan 'student'
2、get 'student','201501'
3、這個題好像有問題，沒有寫列族是什麼，我就簡寫成'cf'l
put 'student','201504','cf:name','chenli'
put 'student','201504','cf:sex','male'
put 'student','201504','cf:age','26'
4、put 'student','2015003','cf:age','25' (更新其實就是新插入一條)
5、deleteall 'student','2015002'

㈡ 需要安裝什麼使用hbase shell客戶端工具

進入hbase shell console
$HBASE_HOME/bin/hbase shell
如果有kerberos認證，需要事先使用相應的keytab進行一下認證（使用kinit命令），認證成功之後再使用hbase shell進入可以使用whoami命令可查看當前用戶

hbase(main)> whoami

表的管理
1）查看有哪些表

hbase(main)> list

2）創建表

# 語法：create <table>, {NAME => <family>, VERSIONS => <VERSIONS>}
# 例如：創建表t1，有兩個family name：f1，f2，且版本數均為2
hbase(main)> create 't1',{NAME => 'f1', VERSIONS => 2},{NAME => 'f2', VERSIONS => 2}

3）刪除表
分兩步：首先disable，然後drop
例如：刪除表t1

hbase(main)> disable 't1'
hbase(main)> drop 't1'

4）查看錶的結構

# 語法：describe <table>
# 例如：查看錶t1的結構
hbase(main)> describe 't1'

5）修改表結構
修改表結構必須先disable

# 語法：alter 't1', {NAME => 'f1'}, {NAME => 'f2', METHOD => 'delete'}
# 例如：修改表test1的cf的TTL為180天
hbase(main)> disable 'test1'
hbase(main)> alter 'test1',{NAME=>'body',TTL=>'15552000'},{NAME=>'meta', TTL=>'15552000'}
hbase(main)> enable 'test1'

許可權管理
1）分配許可權

# 語法 : grant <user> <permissions> <table> <column family> <column qualifier> 參數後面用逗號分隔
# 許可權用五個字母表示： "RWXCA".
# READ('R'), WRITE('W'), EXEC('X'), CREATE('C'), ADMIN('A')
# 例如，給用戶『test'分配對表t1有讀寫的許可權，
hbase(main)> grant 'test','RW','t1'

2）查看許可權

# 語法：user_permission <table>
# 例如，查看錶t1的許可權列表
hbase(main)> user_permission 't1'

3）收回許可權

# 與分配許可權類似，語法：revoke <user> <table> <column family> <column qualifier>
# 例如，收回test用戶在表t1上的許可權
hbase(main)> revoke 'test','t1'

表數據的增刪改查
1）添加數據

# 語法：put <table>,<rowkey>,<family:column>,<value>,<timestamp>
# 例如：給表t1的添加一行記錄：rowkey是rowkey001，family name：f1，column name：col1，value：value01，timestamp：系統默認
hbase(main)> put 't1','rowkey001','f1:col1','value01'
用法比較單一。

2）查詢數據
a）查詢某行記錄

# 語法：get <table>,<rowkey>,[<family:column>,....]
# 例如：查詢表t1，rowkey001中的f1下的col1的值
hbase(main)> get 't1','rowkey001', 'f1:col1'
# 或者：
hbase(main)> get 't1','rowkey001', {COLUMN=>'f1:col1'}
# 查詢表t1，rowke002中的f1下的所有列值
hbase(main)> get 't1','rowkey001'

b）掃描表

# 語法：scan <table>, {COLUMNS => [ <family:column>,.... ], LIMIT => num}
# 另外，還可以添加STARTROW、TIMERANGE和FITLER等高級功能
# 例如：掃描表t1的前5條數據
hbase(main)> scan 't1',{LIMIT=>5}

c）查詢表中的數據行數

# 語法：count <table>, {INTERVAL => intervalNum, CACHE => cacheNum}
# INTERVAL設置多少行顯示一次及對應的rowkey，默認1000；CACHE每次去取的緩存區大小，默認是10，調整該參數可提高查詢速度
# 例如，查詢表t1中的行數，每100條顯示一次，緩存區為500
hbase(main)> count 't1', {INTERVAL => 100, CACHE => 500}

3）刪除數據
a )刪除行中的某個列值

# 語法：delete <table>, <rowkey>, <family:column> , <timestamp>,必須指定列名
# 例如：刪除表t1，rowkey001中的f1:col1的數據
hbase(main)> delete 't1','rowkey001','f1:col1'

註：將刪除改行f1:col1列所有版本的數據
b )刪除行

# 語法：deleteall <table>, <rowkey>, <family:column> , <timestamp>，可以不指定列名，刪除整行數據
# 例如：刪除表t1，rowk001的數據
hbase(main)> deleteall 't1','rowkey001'

c）刪除表中的所有數據

# 語法： truncate <table>
# 其具體過程是：disable table -> drop table -> create table
# 例如：刪除表t1的所有數據
hbase(main)> truncate 't1'

Region管理
1）移動region

# 語法：move 'encodeRegionName', 'ServerName'
# encodeRegionName指的regioName後面的編碼，ServerName指的是master-status的Region Servers列表
# 示例
hbase(main)>move '', 'db-41.xxx.xxx.org,60020,1390274516739'

2）開啟/關閉region

# 語法：balance_switch true|false
hbase(main)> balance_switch

3）手動split

# 語法：split 'regionName', 'splitKey'

4）手動觸發major compaction

#語法：
#Compact all regions in a table:
#hbase> major_compact 't1'
#Compact an entire region:
#hbase> major_compact 'r1'
#Compact a single column family within a region:
#hbase> major_compact 'r1', 'c1'
#Compact a single column family within a table:
#hbase> major_compact 't1', 'c1'

配置管理及節點重啟
1）修改hdfs配置
hdfs配置位置：/etc/hadoop/conf

# 同步hdfs配置
cat /home/hadoop/slaves|xargs -i -t scp /etc/hadoop/conf/hdfs-site.xml hadoop@{}:/etc/hadoop/conf/hdfs-site.xml
#關閉：
cat /home/hadoop/slaves|xargs -i -t ssh hadoop@{} "sudo /home/hadoop/cdh4/hadoop-2.0.0-cdh4.2.1/sbin/hadoop-daemon.sh --config /etc/hadoop/conf stop datanode"
#啟動：
cat /home/hadoop/slaves|xargs -i -t ssh hadoop@{} "sudo /home/hadoop/cdh4/hadoop-2.0.0-cdh4.2.1/sbin/hadoop-daemon.sh --config /etc/hadoop/conf start datanode"

2）修改hbase配置
hbase配置位置：

# 同步hbase配置
cat /home/hadoop/hbase/conf/regionservers|xargs -i -t scp /home/hadoop/hbase/conf/hbase-site.xml hadoop@{}:/home/hadoop/hbase/conf/hbase-site.xml

# graceful重啟
cd ~/hbase
bin/graceful_stop.sh --restart --reload --debug inspurXXX.xxx.xxx.org

㈢ Hadoop HBASE shell編程中 所有指令提示提示無效參數

你在while[xxx]之前將while中括弧內的東西(xxx)列印一下看就明白了：
echo xxx
可能原因是其中有參數帶有特殊字元，如」[」、「]「等，你可以這樣引用參數：
while [ ${var} = ${var2} ]
do
...
如果還可能有空串的話，這樣萬無一失：
while [ 」X${var}「 = "X${var2}" ]
do
...
X是隨便拼上去的一個字元，目的就是保證你那個串不會是空的

㈣ 如何登陸hbase shell

在命令行中輸入
hbase shell
即可

㈤ 如何在linux shell中嵌入hbase命令

1寫你要實現的功能的shell腳本 2chmod 增加可執行許可權 3放到類似usr/local/bin 之類的目錄下面，就是環境變數PATH能找到的目錄

㈥ 如何查看hadoop版本

通過在集群上執行：hadoop version 命令可以查看對應的hadoop的版本。

查看hadoop集群的位數：

執行：cd $HADOOP_HOME/lib/native

file libhadoop.so.1.0.0

Hadoop屬於一個能夠對大量數據進行分布式處理的軟體框架。 Hadoop 以一種可靠、高效、可伸縮的方式進行數據處理。

Hadoop的發行版除了有Apache hadoop外cloudera，hortonworks，mapR，DKhadoop等都提供了自己的商業版本。

商業發行版主要是提供了更為專業的技術支持，這對於大型企業更為重要，不同發行版都有自己的一些特點。

(6)hbaseshell命令擴展閱讀：

對比版選擇：DKhadoop發行版、cloudera發行版、hortonworks發行版。

1、DKhadoop發行版：有效的集成了整個HADOOP生態系統的全部組件，並深度優化，重新編譯為一個完整的更高性能的大數據通用計算平台，實現了各部件的有機協調。

因此DKH相比開源的大數據平台，在計算性能上有了高達5倍(最大)的性能提升。DKhadoop將復雜的大數據集群配置簡化至三種節點(主節點、管理節點、計算節點)，極大的簡化了集群的管理運維，增強了集群的高可用性、高可維護性、高穩定性。

2、Cloudera發行版：CDH是Cloudera的hadoop發行版，完全開源，比Apache hadoop在兼容性，安全性，穩定性上有增強。

3、€Hortonworks發行版：Hortonworks 的主打產品是Hortonworks Data Platform (HDP)，也同樣是100%開源的產品。

其版本特點：HDP包括穩定版本的Apache Hadoop的所有關鍵組件;安裝方便，HDP包括一個現代化的，直觀的用戶界面的安裝和配置工具。

㈦ shell怎樣過濾掉hbase-site.xml文件中的注釋項

hbase接到命令後存下變化信息或者寫入失敗異常的拋出，默認情況下。執行寫入時會寫到兩個地方：預寫式日誌（write-ahead log,也稱hlog）和memstore,以保證數據持久化。memstore是內存里的寫入緩沖區。客戶端在寫的過程中不會與底層的hfile直接交互，當menstore寫滿時，會刷新到硬碟，生成一個新的hfile.hfile是hbase使用的底層存儲格式。menstore的大小由hbase-site.xml文件里的系統級屬性hbase.hregion.memstore.flush.size來定義。
hbase在讀操作上使用了lru緩存機制（blockcache），blockcache設計用來保存從hfile里讀入內存的頻繁訪問的數據，避免硬碟讀。每個列族都有自己的blockcache。blockcache中的block是hbase從硬碟完成一次讀取的數據單位。block是建立索引的最小數據單位，也是從硬碟讀取的最小數據單位。如果主要用於隨機查詢，小一點的block會好一些，但是會導致索引變大，消耗更多內存，如果主要執行順序掃描，大一點的block會好一些，block變大索引項變小，因此節省內存。
LRU是Least Recently Used 近期最少使用演算法。內存管理的一種頁面置換演算法，對於在內存中但又不用的數據塊（內存塊）叫做LRU，操作系統會根據哪些數據屬於LRU而將其移出內存而騰出空間來載入另外的數據。

㈧ hbase shell輸錯命令後按回車不執行，只換行怎麼退出

輸入exit就可以了。親測有效

㈨ 啟動HBASE後沒有HBASE SHELL命令

你想運行hbase，但是hbase不在環境變數里，需要輸入完整路徑
比如：/usr/local/hbase/bin/hbase

㈩ hbase shell 什麼意思

hbase shell:
HBase是一個分布式的、面向列的開源資料庫,源於google的一篇論文《bigtable：一個結構化數據的分布式存儲系統》。HBase是Google Bigtable的開源實現，它利用Hadoop HDFS作為其文件存儲系統，利用Hadoop MapRece來處理HBase中的海量數據，利用Zookeeper作為協同服務。

hbase提供了一個shell的終端給用戶交互。通過執行 help get 可以看到命令的幫助信息。