HBase的安装配置和使用

目录

HBase的安装配置和使用

前言

(1)小杜出品(海大计科大数据专用版),请收到者个人使用!!!

(2)本教程在目录上要留意,要根据使用者的具体情况去修改!

(3)出现“~”的目录大多数要使用安装账户/普通账户目录,但修改“/etc/profile”和“~/.bashrc”目录要使用root账户!

(4)慎用root账户,要使用root账户的地方会提示。“source /etc/profile”要安装账户/普通账户目录和root账户都弄!

(5)相关的表名或数据库名等记得要改改,不要和小杜一样!!!

(6)使用者可能会出现少数BUG,请自行解决。本教程未收录BUG解决方法!

一、HBase环境的搭建

(1)安装ZooKeeper(普通账户+root账户)

(2)安装HBase(普通账户+root账户)

二、HBase的基本操作

(1)HBase服务器基本操作

(2)表的创建与查看

(3)表操作


HBase的安装配置和使用

前言

(1)小杜出品(海大计科大数据专用版),请收到者个人使用!!!

(2)本教程在目录上要留意,要根据使用者的具体情况去修改!

(3)出现“~”的目录大多数要使用安装账户/普通账户目录,但修改“/etc/profile”和“~/.bashrc”目录要使用root账户!

(4)慎用root账户,要使用root账户的地方会提示。“source /etc/profile”要安装账户/普通账户目录和root账户都弄!

(5)相关的表名或数据库名等记得要改改,不要和小杜一样!!!

(6)使用者可能会出现少数BUG,请自行解决。本教程未收录BUG解决方法!

一、HBase环境的搭建

(1)安装ZooKeeper(普通账户+root账户)

1、解压并安装ZooKeeper的jar包【已将ZooKeeper的jar包上传到Master结点】。

cp ~//resources/software/zookeeper/zookeeper-3.4.6.tar.gz ~/
cd
tar -xzvf ~/zookeeper-3.4.6.tar.gz

2、创建data文件夹和log文件夹。(文件夹要自己创建,zookeeper不会创建)

mkdir ~/zookeeper-3.4.6/zkdata
mkdir ~/zookeeper-3.4.6/zkdata/log

3、复制生成配置文件zoo.cfg。

cd ~/zookeeper-3.4.6/conf
cp zoo_sample.cfg zoo.cfg

4、修改配置文件zoo.cfg的dataDir项、添加各节点主机名。

gedit zoo.cfg

修改以下内容:

dataDir=/home/2011921408dxb/zookeeper-3.4.6/zkdata
dataLogDir=/home/2011921408dxb/zookeeper-3.4.6/zkdata/log

添加以下内容

server.1= master:2888:3888
server.2= slave:2888:3888

5、将安装目录同步到其它节点。

scp -r /home/2011921408dxb/zookeeper-3.4.6 2011921408dxb@slave:/home/2011921408dxb/

6、在master节点创建myid文件。

echo "1">> /home/2011921408dxb/zookeeper-3.4.6/zkdata/myid

7、在slave节点创建myid文件。

echo "2">> /home/2011921408dxb/zookeeper-3.4.6/zkdata/myid

8、将各节点的ZooKeeper安装目录添加到系统环境变量配置文件中(root账户)

gedit /etc/profile

添加以下内容:

export ZOOKEEPER_HOME=/home/2011921408dxb/zookeeper-3.4.6
export PATH=$PATH:$ZOOKEEPER_HOME/bin

9、激活系统环境变量设置文件,使其生效。

[特殊步骤 (root账户) 注:该步骤每台虚拟机用一次就好]
vim ~/.bashrc
在最后一行添加 source /etc/profile
重启结点
[主要步骤 (普通账户+root账户)]
source /etc/profile

10、所有节点都开启ZooKeeper服务并检查状态

zkServer.sh start
zkServer.sh status

(2)安装HBase(普通账户+root账户)

1、解压并安装HBase的jar包【已将HBase的jar包上传到Master结点】。

cp ~//resources/software/hbase/hbase-1.1.3-bin.tar.gz ~/
cd
tar -xzvf ~/hbase-1.1.3-bin.tar.gz

2、修改HBase的3个配置文件:hbase-env.sh、hbase-site.xml、regionservers;

(1)hbase-env.sh

gedit ~/hbase-1.1.3/conf/hbase-env.sh

查看相关信息:

gedit /home/2011921408dxb/.bash_profile

修改以下内容:(文件路径不要带空格)

export JAVA_HOME=/usr/java/jdk1.7.0_71/
export HBASE_CLASSPATH=/home/2011921408dxb/hbase-1.1.3/conf/  【Hbase的配置目录】
export HBASE_MANAGES_ZK=false

(2)hbase-site.xml

gedit ~/hbase-1.1.3/conf/hbase-site.xml

在<configuration></configuration>之间添加以下内容:

<property>
    <name>hbase.rootdir</name>
    <value>hdfs://master:9000/hbase</value>
</property>
<property>
    <name>hbase.master.info.port</name>
    <value>60010</value>
</property>
<property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
</property>
<property>
    <name>hbase.zookeeper.quorum</name>
    <value>master,slave</value>
</property>

(3)regionservers

gedit ~/hbase-1.1.3/conf/regionservers

用以下内容覆盖原内容:

slave

3、将安装目录同步到其它节点

scp -r /home/2011921408dxb/hbase-1.1.3 2011921408dxb@slave:/home/2011921408dxb/

4、将各节点的HBase安装目录添加到系统环境变量配置文件中(root账户)

gedit /etc/profile

添加以下内容:

export HBASE_HOME=/home/2011921408dxb/hbase-1.1.3
export PATH=$PATH:$HBASE_HOME/bin

5、激活系统环境变量设置文件,使其生效。

[特殊步骤]
vim ~/.bashrc
在最后一行添加 source /etc/profile
重启结点
[主要步骤]
source /etc/profile

二、HBase的基本操作

(1)HBase服务器基本操作

1、开启HBase服务;

在master结点:

cd ~/hadoop-2.5.2
sbin/start-all.sh
cd ~/Desktop
zkServer.sh start
start-hbase.sh

在slave结点:

cd ~/Desktop
zkServer.sh start

2、进入HBase shell

hbase shell

3、查询当前HBase服务的版本信息(hbase shell)

version

4、列出所有表

list

(2)表的创建与查看

1、使用HBase Shell完成下列个“个人信息表”的创建(表名自定义);

HBase的安装配置和使用

create 'table', {NAME => 'Persondata'}, {NAME =>'Info', VERSIONS => 3}

2、完成上述表格数据的输入

put 'table','1000','Persondata:name','Alice'
put 'table','1000','Persondata:gender','female'
put 'table','1000','Info:address','Los Angels'
put 'table','1000','Info:address','Boston'
put 'table','1000','Info:address','New York'
put 'table','1001','Persondata:name','John'
put 'table','1001','Info:phone','3749274'
put 'table','1001','Info:phone','3478193'
put 'table','1002','Persondata:name','Sam'
put 'table','1002','Persondata:gender','male'
put 'table','1002','Info:address','Houston'

3、查看上面所创建表格的表结构;

describe 'table'

4、查看表的所有数据(要求能查看最近两个版本的数据);

scan 'table',  {COLUMNS => ['Persondata', 'Info'], VERSIONS=>2}

5、删除表(非必要,只是方便出错了,删除重新来!)

disable 'table'
drop 'table'

(3)表操作

1、向“个人信息表”中添加如下一行数据:

行键Row Key:1003;
列族Persondata→列name:James;
列族Company→列name:Tencent;
alter 'table',{NAME=>'Company'}
put 'table','1003','Persondata:name','James'
put 'table','1003','Company:name','Tencent'
scan 'table'

2、修改“个人信息表”的模式,删除列族“Company”;

alter 'table','delete'=>'Company'
scan 'table'

3、更新“个人信息表”中Row Key为“1003”列为“address”的数据为“Shenzhen”;

put 'table','1003','Info:address','Shenzhen'
scan 'table'

4、删除“个人信息表”的“phone”列;

delete 'table','1000','Info:phone'
delete 'table','1001','Info:phone'
delete 'table','1002','Info:phone'
delete 'table','1003','Info:phone'
scan 'table'

5、删除Row Key为“1001”的整行数据;

deleteall 'table','1001'
scan 'table'

6、查询“个人信息表”中现有的行数;

count 'table'

7、查看表的所有数据

scan 'table'

8、退出HBase shell

exit

9、停止HBase服务

在master结点:

stop-hbase.sh
cd ~/Desktop
zkServer.sh stop
cd ~/hadoop-2.5.2
sbin/stop-all.sh

在master结点:

cd ~/Desktop
zkServer.sh stop
上一篇:第 11 篇 : 安装ZooKeeper-集群


下一篇:【Kafka安装】