HBase与Zookeeper在CentOS上如何协同

HBase与Zookeeper在CentOS上的协同工作主要涉及安装、配置和启动这两个组件，并理解它们在HBase集群中的作用和相互关系。以下是详细的步骤和说明：

1. 安装Zookeeper

首先，在CentOS上安装Zookeeper。以下是一个基本的安装步骤：

• 下载Zookeeper：

  wget http://mirror.bjtu.edu.cn/apache/zookeeper/zookeeper-3.4.5/zookeeper-3.4.5.tar.gz
  

• 解压文件：

  chmod +x zookeeper-3.4.5.tar.gz
  tar -xzvf zookeeper-3.4.5.tar.gz
  

• 移动到指定目录：

  cp -rf zookeeper-3.4.5 /opt/bigdata/
  

• 配置环境变量：

  编辑 /etc/profile 文件，添加以下内容：

  export ZOOKEEPER_HOME=/opt/bigdata/zookeeper-3.4.5
  export PATH=$ZOOKEEPER_HOME/bin:$PATH
  

• 启动Zookeeper：

  source /etc/profile
  cd /opt/bigdata/zookeeper-3.4.5/bin
  ./zkServer.sh start
  

• 检查Zookeeper状态：

  ./zkServer.sh status
  

2. 安装HBase

接下来，在CentOS上安装HBase：

• 下载HBase：

  wget http://archive.apache.org/dist/hbase/hbase-1.2.6/hbase-1.2.6-bin.tar.gz
  

• 解压文件：

  chmod +x hbase-1.2.6-bin.tar.gz
  tar -xzvf hbase-1.2.6-bin.tar.gz
  

• 移动到指定目录：

  cp -rf hbase-1.2.6 /opt/bigdata/
  

• 配置环境变量：

  编辑 /etc/profile 文件，添加以下内容：

  export HBASE_HOME=/opt/bigdata/hbase-1.2.6
  export PATH=$HBASE_HOME/bin:$PATH
  

• 配置 hbase-env.sh：

  编辑 /opt/bigdata/hbase-1.2.6/conf/hbase-env.sh 文件，设置 JAVA_HOME：

  export JAVA_HOME=/usr/local/src/software/jdk1.8
  export HBASE_MANAGES_ZK=false
  

• 配置 hbase-site.xml：

  编辑 /opt/bigdata/hbase-1.2.6/conf/hbase-site.xml 文件，添加以下内容：

  <configuration>
      <property>
          <name>hbase.rootdir</name>
          <value>hdfs://hadoop001:9000/hbase</value>
      </property>
      <property>
          <name>hbase.cluster.distributed</name>
          <value>true</value>
      </property>
      <property>
          <name>hbase.master.port</name>
          <value>16000</value>
      </property>
      <property>
          <name>hbase.zookeeper.quorum</name>
          <value>hadoop001,hadoop002,hadoop003</value>
      </property>
      <property>
          <name>hbase.zookeeper.property.dataDir</name>
          <value>/usr/local/src/software/zookeeper/mydata</value>
      </property>
  </configuration>
  

• 配置 regionservers 文件：

  编辑 /opt/bigdata/hbase-1.2.6/conf/regionservers 文件，去掉默认的 localhost，加入如下内容：

  hadoop001
  hadoop002
  hadoop003
  

• 复制HBase到其他节点：

  scp -rp /opt/bigdata/hbase-1.2.6 root@hadoop002:/opt/bigdata/
  scp -rp /opt/bigdata/hbase-1.2.6 root@hadoop003:/opt/bigdata/
  

• 配置环境变量：

  在每个节点上，编辑 /etc/profile 文件，添加以下内容：

  export HBASE_HOME=/opt/bigdata/hbase-1.2.6
  export PATH=$HBASE_HOME/bin:$PATH
  

• 重新载入配置文件：

  source /etc/profile
  

• 启动HBase：

  在主节点上启动HBase：

  cd /opt/bigdata/hbase-1.2.6/bin
  ./start-hbase.sh
  

3. 验证集成

• 检查HBase状态：

  hbase shell status 'simple'
  

• 检查Zookeeper状态：

  ./zkServer.sh status
  

HBase与Zookeeper的协同工作原理

• HMaster节点的高可用管理：通过Zookeeper的Master Election机制保证任何时刻只有一个HMaster在运行。
• RegionServer状态监控：HRegionServer的上、下线信息及时通知HMaster，若有HRegionServer崩溃可以通过Zookeeper来进行分配协调。
• 分布式一致锁：提供分布式一致锁，保证数据写入的事务性。
• 元数据管理：Zookeeper中存储了-ROOT-表的地址、HMaster的地址、HRegionServer地址、HBase的Schema和表的元数据，当Client连接到HBase时，需要首先访问Zookeeper以获取这些核心数据。

通过以上步骤，你可以在CentOS上成功集成HBase与Zookeeper，并理解它们在HBase集群中的作用和相互关系。