HBase详解(02) - HBase-2.0.5安装

HBase详解(02) - HBase-2.0.5安装

HBase安装环境准备

  • Zookeeper安装

Zookeeper安装参考《Zookeeper详解(02) - zookeeper安装部署-单机模式-集群模式》

启动Zookeeper集群

bin/zkServer.sh start

  • Hadoop安装

Hadoop安装参考《Hadoop详解(02) - Hadoop3.1.3集群运行环境搭建》

启动Hadoop集群

sbin/start-dfs.sh

sbin/start-yarn.sh

Hbase安装

  • 安装包下载

HBase官网:https://hbase.apache.org/

Hbase安装包历史版本下载地址:https://archive.apache.org/dist/hbase/

hbase-2.0.5下载地址:https://archive.apache.org/dist/hbase/2.0.5/hbase-2.0.5-bin.tar.gz

  • 上传解压

将Hbase安装包hbase-2.0.5-bin.tar.gz上传到服务器的/opt/software目录

解压:

[hadoop@hadoop102 software]$ tar -zxvf hbase-2.0.5-bin.tar.gz -C /opt/module/

重命名

[hadoop@hadoop102 software]$ cd /opt/module/

[hadoop@hadoop102 module]$ mv hbase-2.0.5/ hbase

  • 修改配置文件hbase-env.sh

[hadoop@hadoop102 module]$ cd hbase/conf/

[hadoop@hadoop102 conf]$ vi hbase-env.sh

修改内容:

#使用独立的Zookeeper集群,找到如下内容,放开注释,将值修改为false

export HBASE_MANAGES_ZK=false

  • 修改配置文件hbase-site.xml

[hadoop@hadoop102 conf]$ vi hbase-site.xml

添加如下内容:

<configuration>

<property>

<name>hbase.rootdir</name>

<value>hdfs://hadoop102:9820/hbase</value>

</property>

<property>

<name>hbase.cluster.distributed</name>

<value>true</value>

</property>

<property>

<name>hbase.zookeeper.quorum</name>

<value>hadoop102,hadoop103,hadoop104</value>

</property>

</configuration>

注意:hbase.rootdir配置的端口为Hadoop namenode端口,即与hadoop中core-site.xml的fs.defaultFS值配置的端口一致

  • 修改regionservers

[hadoop@hadoop102 conf]$ vi regionservers

删除原来的内容,添加如下内容,表示需要启动的Region Server节点

hadoop102

hadoop103

hadoop104

  • 分发安装包

将HBase安装包分发到其他集群

[hadoop@hadoop102 module]$ scp -r hbase/ hadoop103:/opt/module/

[hadoop@hadoop102 module]$ scp -r hbase/ hadoop104:/opt/module/

  • 配置环境变量

[hadoop@hadoop102 module]$ sudo vi /etc/profile

在文件末尾添加如下内容

#HBASE_HOME

export HBASE_HOME=/opt/module/hbase

export PATH=$PATH:$HBASE_HOME/bin

注意:在hadoop103,hadoop104上也需要配置HBase的环境变量

  • 启动Hbase集群

[hadoop@hadoop102 hbase]$ cd /opt/module/hbase/

[hadoop@hadoop102 hbase]$ bin/start-hbase.sh

停止服务:

[hadoop@hadoop102 hbase]$ bin/stop-hbase.sh

  • 查看Hbase UI页面

浏览器中访问http://hadoop102:16010

HBase详解(02) - HBase-2.0.5安装

提示:如果集群之间的节点时间不同步,会导致regionserver无法启动,抛出ClockOutOfSyncException异常。

解决方法:

方法一:同步时间服务

方法二:设置属性:hbase.master.maxclockskew设置更大的值

<property>

    <name>hbase.master.maxclockskew</name>

    <value>180000</value>

    <description>Time difference of regionserver from master</description>

</property>

bin/hbase-daemon.sh start master

bin/hbase-daemon.sh start regionserver

 

HMaster高可用(可选)

在HBase中HMaster负责监控HRegionServer的生命周期,均衡RegionServer的负载,如果HMaster挂掉了,那么整个HBase集群将陷入不健康的状态,并且此时的工作状态并不会维持太久。所以HBase支持对HMaster的高可用配置。

[hadoop@hadoop102 hbase]$ bin/stop-hbase.sh

[hadoop@hadoop102 hbase]$ touch conf/backup-masters

[hadoop@hadoop102 hbase]$ echo hadoop103 > conf/backup-masters

[hadoop@hadoop102 hbase]$ scp -r conf/ hadoop103:/opt/module/hbase/

[hadoop@hadoop102 hbase]$ scp -r conf/ hadoop104:/opt/module/hbase/

[hadoop@hadoop102 hbase]$ bin/start-hbase.sh

http://hadooo102:16010

HBase详解(02) - HBase-2.0.5安装

访问备份节点的HMaster:http://hadoop103:16010

HBase详解(02) - HBase-2.0.5安装

HBase Shell操作

基本操作

1.进入HBase客户端命令行

[atguigu@hadoop102 hbase]$ bin/hbase shell

2.查看帮助命令

hbase(main):001:0> help

namespace的操作

1.查看当前Hbase中有哪些namespace

hbase(main):002:0> list_namespace

NAMESPACE

default(创建表时未指定命名空间的话默认在default下)

hbase(系统使用的,用来存放系统相关的元数据信息等,勿随便操作)

2.创建namespace

hbase(main):010:0> create_namespace "test"

 

hbase(main):010:0> create_namespace "test01", {"author"=>"wyh", "create_time"=>"2020-03-10 08:08:08"}

3.查看namespace

hbase(main):010:0> describe_namespace "test01"

4.修改namespace的信息(添加或者修改属性)

hbase(main):010:0> alter_namespace "test01", {METHOD => 'set', 'author' => 'weiyunhui'}

添加或者修改属性:

alter_namespace 'ns1', {METHOD => 'set', 'PROPERTY_NAME' => 'PROPERTY_VALUE'}

删除属性:

alter_namespace 'ns1', {METHOD => 'unset', NAME => ' PROPERTY_NAME '}

5.删除namespace

hbase(main):010:0> drop_namespace "test01"

注意: 要删除的namespace必须是空的,其下没有表。

表的操作

0.查看当前数据库中有哪些表

hbase(main):002:0> list

1.创建表

hbase(main):002:0> create 'student','info'

2.插入数据到表

hbase(main):003:0> put 'student','1001','info:sex','male'

hbase(main):004:0> put 'student','1001','info:age','18'

hbase(main):005:0> put 'student','1002','info:name','Janna'

hbase(main):006:0> put 'student','1002','info:sex','female'

hbase(main):007:0> put 'student','1002','info:age','20'

3.扫描查看表数据

hbase(main):008:0> scan 'student'

hbase(main):009:0> scan 'student',{STARTROW => '1001', STOPROW => '1001'}

hbase(main):010:0> scan 'student',{STARTROW => '1001'}

4.查看表结构

hbase(main):011:0> describe 'student'

5.更新指定字段的数据

hbase(main):012:0> put 'student','1001','info:name','Nick'

hbase(main):013:0> put 'student','1001','info:age','100'

6.查看"指定行"或"指定列族:列"的数据

hbase(main):014:0> get 'student','1001'

hbase(main):015:0> get 'student','1001','info:name'

7.统计表数据行数

hbase(main):021:0> count 'student'

8.删除数据

删除某rowkey的全部数据:

hbase(main):016:0> deleteall 'student','1001'

删除某rowkey的某一列数据:

hbase(main):017:0> delete 'student','1002','info:sex'

9.清空表数据

hbase(main):018:0> truncate 'student'

提示:清空表的操作顺序为先disable,然后再truncate。

10.删除表

首先需要先让该表为disable状态:

hbase(main):019:0> disable 'student'

然后才能drop这个表:

hbase(main):020:0> drop 'student'

提示:如果直接drop表,会报错:ERROR: Table student is enabled. Disable it first.

11.变更表信息

将info列族中的数据存放3个版本:

hbase(main):022:0> alter 'student',{NAME=>'info',VERSIONS=>3}

hbase(main):022:0> get 'student','1001',{COLUMN=>'info:name',VERSIONS=>3}

上一篇:2021-11-13


下一篇:[echo -e 在SHELL脚本和命令行中表现不同,脚本中多出-e