温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

【HBase-1】HBase安装配置,使用独立zookeeper

发布时间:2020-07-07 21:21:40 来源:网络 阅读:1474 作者:浮尔魔司 栏目:大数据

1.HBase安装配置,使用独立zookeeper

2.修改环境变量:
第一台机器规划为master, 第二台机器为RegionServer,再在第一台机器上启动RegionServer
制作一个集群
1 master
2 RegionServer

在机器上执行:vi /etc/profile,添加如下内容:
export HBASE_HOME=/usr/local/src/hbase
export PATH=$PATH:$HBASE_HOME/bin

3、修改配置文件:


vi  /hbase/conf/hbase-site.xml 
<configuration>
<property>
#hbasemaster的主机和端口
<name>hbase.master</name>
<value>hostip2:60000</value>
</property>
<property>
#时间同步允许的时间差
<name>hbase.master.maxclockskew</name> 
<value>180000</value>
</property>
<property>
#共享目录,持久化hbase数据
#hdfs://hostip2:9000 为已经搭建好的hdfs
<name>hbase.rootdir</name>
<value>hdfs://hostip2:9000/hbase</value>
</property>
<property>
 #是否分布式运行,false即为单机
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
#zookeeper地址
<name>hbase.zookeeper.quorum</name>
<value>hostip3,hostip5</value>
</property>
<property>
#zookeeper配置信息快照的位置,zookeeper 保持信息的文件,默认为/tmp 重启会丢失
<name>hbase.zookeeper.property.dataDir</name>
<value>/home/hadoop/hbase/tmp/zookeeper</value>
</property>
<property>  
#2181为zookeeper的clientPort
<name>hbase.zookeeper.property.clientPort</name>  
<value>2181</value>  
</property>  
</configuration>

vi /hbase/conf/hbase-env.sh

export JAVA_HOME=/usr/java/jdk1.7.0_45   //jdk安装目录
export HBASE_CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar  //hadoop配置文件的位置
export HBASE_MANAGES_ZK=false   #如果使用独立安装的zookeeper这个地方就是false,自带的设置为true

vi /conf/regionservers

hostip3
hostip5

4、.将Hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下:

hdfs-site.xml:

<configuration>
    <!-- 指定HDFS副本的数量 -->
        <property>
            <name>dfs.replication</name>
            <value>2</value>
        </property>
</configuration>

core-site.xml:

<configuration>
     <property>
            <name>fs.defaultFS</name>
            <value>hdfs://hostip2:9000</value>
        </property>
        <!-- 指定hadoop运行时产生文件的存储目录 -->
        <property>
            <name>hadoop.tmp.dir</name>
            <value>/usr/local/src/hadoop-2.6.4/hdpdata</value>
        </property>
</configuration>

5、将hbase目录发送到其他机器,分别启动 master、regionserver

./hbase-daemon.sh start master

./hbase-daemon.sh start regionserver

6、网页查看:http://hostip2:16010/

进程查看 jps

3201 Main
9092 HRegionServer
29125 HMaster
13240 Jps
16012 DataNode
12766 ZooKeeperMain

7、zookeeper查看
./zkCli.sh 连入

[zk: localhost:2181(CONNECTED) 1] ls /
[zookeeper, hbase]

[zk: localhost:2181(CONNECTED) 2] ls /hbase
[replication, meta-region-server, rs, splitWAL, backup-masters, 
table-lock, flush-table-proc, region-in-transition, online-snapshot, 
master, running, recovering-regions, draining, namespace, hbaseid, table]

[zk: localhost:2181(CONNECTED) 5] ls /hbase/rs
[host1,16020,1543922854774, host2,16201,1543834531685]

8、扩展1
如果要起双master,hbase-daemon.sh start master 是起不来的,因为hbase-site.xml 写了

<property>
#hbasemaster的主机和端口
<name>hbase.master</name>
<value>IP1:60000</value>
</property>

需要使用 /hbase/bin> ./local-master-backup.sh start 2

zk 查看

[zk: localhost:2181(CONNECTED) 26] ls /hbase/backup-masters
[host1,1543924655750]
向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI