centos hbase集群搭建步骤是什么_https

在centos系统上构建高可用hbase集群，需要以下步骤：

准备阶段

硬件资源: 至少三台服务器，建议配置为16核cpu、32gb内存、1tb ssd硬盘和千兆网络，确保网络互通。
操作系统: 所有服务器安装centos 7.x系统。
jdk环境: 安装java 8或更高版本jdk。

hbase集群部署

1. 安装依赖包

在所有节点执行以下命令，安装必要的依赖：

sudo yum install -y java-1.8.0-openjdk-devel wget

登录后复制

2. 下载并解压hbase

在所有节点下载并解压hbase安装包 (替换2.4.9为实际版本号):

wget https://downloads.apache.org/hbase/2.4.9/hbase-2.4.9-bin.tar.gz
tar -zxvf hbase-2.4.9-bin.tar.gz -c /usr/local/hbase/

登录后复制

3. 设置hbase环境变量

在hbase安装目录下配置环境变量，使系统能够识别hbase：

echo "export hbase_home=/usr/local/hbase" >> /etc/profile
echo "export path=$hbase_home/bin:$path" >> /etc/profile
source /etc/profile

登录后复制

4. 配置hbase核心配置文件

hbase-env.sh: 设置java_home和hbase_manages_zk。 hbase_manages_zk=false 表示由外部zookeeper管理。

cd /usr/local/hbase/conf
vi hbase-env.sh
# 添加或修改以下内容
export java_home=/usr/local/java/jdk1.8.0_202  # 替换为你的jdk路径
export hbase_manages_zk=false

登录后复制

hbase-site.xml: 配置hbase核心参数，包括hdfs根目录、集群模式、master端口、zookeeper集群地址等。 (请替换namenode, zookeeper1, zookeeper2, zookeeper3 为你的实际主机名或ip地址)

<configuration>
  <property>
    <name>hbase.rootdir</name>
    <value>hdfs://namenode:9000/hbase</value>
  </property>
  <property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
  </property>
  <property>
    <name>hbase.master.port</name>
    <value>16000</value>
  </property>
  <property>
    <name>hbase.zookeeper.quorum</name>
    <value>zookeeper1,zookeeper2,zookeeper3</value>
  </property>
  <property>
    <name>hbase.zookeeper.property.datadir</name>
    <value>/usr/local/zookeeper</value>  # zookeeper数据目录
  </property>
</configuration>

登录后复制

5. 配置regionservers

在$hbase_home/conf/regionservers文件中，列出所有regionserver节点的主机名或ip地址，每行一个。

6. 启动集群

启动hadoop: 在所有节点启动hdfs和yarn (start-dfs.sh, start-yarn.sh)。
启动zookeeper: 在zookeeper服务器上启动zookeeper服务 (/usr/local/zookeeper/bin/zkserver.sh start)。
启动hbase: 在hbase master节点启动hbase (start-hbase.sh)。