当前位置: 代码迷 >> 综合 >> HBase:HBase的集群环境搭建
  详细解决方案

HBase:HBase的集群环境搭建

热度:149   发布时间:2023-09-06 11:25:04.0

HBase的集群环境搭建

注意事项:HBase强依赖zookeeper和hadoop,安装HBase之前一定要保证zookeeper和hadoop启动成功,且服务正常运行


  • 第一步:下载对应的HBase的安装包:
    所有关于CDH版本的软件包下载地址如下
    http://archive.cloudera.com/cdh5/cdh/5/
    HBase对应的版本下载地址如下
    http://archive.cloudera.com/cdh5/cdh/5/hbase-1.2.0-cdh5.14.0.tar.gz
  • 第二步:压缩包上传并解压:
    将我们的压缩包上传到node01服务器的/export/softwares路径下并解压
cd /export/softwares/
tar -zxvf hbase-1.2.0-cdh5.14.0-bin.tar.gz -C ../servers/
  • 第三步:修改配置文件:
    第一台机器进行修改配置文件
cd /export/servers/hbase-1.2.0-cdh5.14.0/conf

修改第一个配置文件hbase-env.sh
注释掉HBase使用内部zk

vim hbase-env.sh

export JAVA_HOME=/export/servers/jdk1.8.0_141
export HBASE_MANAGES_ZK=false

修改第二个配置文件hbase-site.xml
修改hbase-site.xml
vim hbase-site.xml

<configuration><property><name>hbase.rootdir</name><value>hdfs://node01:8020/hbase</value>  </property><property><name>hbase.cluster.distributed</name><value>true</value></property><!-- 0.98后的新变动,之前版本没有.port,默认端口为60000 --><property><name>hbase.master.port</name><value>16000</value></property><property><name>hbase.zookeeper.quorum</name><value>node01:2181,node02:2181,node03:2181</value></property><property><name>hbase.zookeeper.property.dataDir</name><value>/export/servers/zookeeper-3.4.5-cdh5.14.0/zkdatas</value></property>
</configuration>
  • 修改第三个配置文件regionservers
    vim regionservers
node01
node02
node03
  • 创建back-masters配置文件,实现HMaster的高可用
    cd /export/servers/hbase-1.2.0-cdh5.14.0/conf
    vim backup-masters
node02
  • 第四步:安装包分发到其他机器
    将我们第一台机器的hbase的安装包拷贝到其他机器上面去
cd /export/servers/
scp -r hbase-1.2.0-cdh5.14.0/ node02:$PWD
scp -r hbase-1.2.0-cdh5.14.0/ node03:$PWD
  • 第五步:三台机器创建软连接
    因为hbase需要读取hadoop的core-site.xml以及hdfs-site.xml当中的配置文件信息,所以我们三台机器都要执行以下命令创建软连接
ln -s /export/servers/hadoop-2.6.0-cdh5.14.0/etc/hadoop/core-site.xml /export/servers/hbase-1.2.0-cdh5.14.0/conf/core-site.xml
ln -s /export/servers/hadoop-2.6.0-cdh5.14.0/etc/hadoop/hdfs-site.xml /export/servers/hbase-1.2.0-cdh5.14.0/conf/hdfs-site.xml
  • 第六步:三台机器添加HBASE_HOME的环境变量
    vim /etc/profile
export HBASE_HOME=/export/servers/hbase-1.2.0-cdh5.14.0
export PATH=:$HBASE_HOME/bin:$PATH
  • 第七步:HBase集群启动
    第一台机器执行以下命令进行启动
cd /export/servers/hbase-1.2.0-cdh5.14.0
bin/start-hbase.sh

警告提示:HBase启动的时候会产生一个警告,这是因为jdk7与jdk8的问题导致的,如果linux服务器安装jdk8就会产生这样的一个警告
HBase:HBase的集群环境搭建
我们可以只是掉所有机器的hbase-env.sh当中的
“HBASE_MASTER_OPTS”和“HBASE_REGIONSERVER_OPTS”配置 来解决这个问题。不过警告不影响我们正常运行,可以不用解决
我们也可以执行以下命令单节点进行启动
启动HMaster命令

bin/hbase-daemon.sh start master

启动HRegionServer命令

bin/hbase-daemon.sh start regionserver

为了解决HMaster单点故障问题,我们可以在node02和node03机器上面都可以启动HMaster节点的进程,以实现HMaster的高可用

bin/hbase-daemon.sh start master
  • 第七步:页面访问
    浏览器页面访问
    http://192.168.100.100:60010/master-status