hbase-1.1.3 hadoop-2.6.2 ha分散配置に基づく

2841 ワード

クラスタの説明
hadoop-2.5.2 ha方式で導入され、すべてのnamenodeはhdfs://masters,zookeeperアドレス:bi 3:2181,bi 4:2181,bi 5:2181
IP
ホスト名
配置
192.168.2.10
bi10
hadoop-2.6.2,HMaster,HRegionServer
192.168.2.12
bi12
hadoop-2.6.2,HMaster,HRegionServer
192.168.2.13
bi13
hadoop-2.6.2
Hbase-1.1.3配置
habse-1.1.3から/home/hadoop/work/hbase-1.1.3への解凍
conf/hbase-envを変更します.sh,HBASE_が必要CLASSSPATH=hadoopプロファイルの場所、そうでないとhbaseが認識できませんhdfs://masters/hbaseこのnamenode haの構成方法.
# The java implementation to use.  Java 1.7+ required.
export JAVA_HOME=/home/hadoop/work/jdk1.7.0_75

# Extra Java CLASSPATH elements.  Optional.
export HBASE_CLASSPATH=/home/hadoop/work/hadoop-2.6.2/etc/hadoop

# Tell HBase whether it should manage it's own instance of Zookeeper or not.
export HBASE_MANAGES_ZK=false

conf/hbase-siteを変更します.xml
<configuration>
  <property>
    <name>hbase.rootdir</name>
    <value>hdfs://masters/hbase</value>
  </property>
  <property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
  </property>
  <property>
    <name>hbase.master</name>
    <value>60000</value>
  </property>
  <property>
    <name>hbase.zookeeper.quorum</name>
    <value>bi3:2181,bi4:2181,bi5:2181</value>
  </property>
  <property>
    <name>hbase.client.write.buffer</name>
    <value>20971520</value>
  </property>
  <property>
    <name>hbase.zookeeper.property.dataDir</name>
    <value>/home/hadoop/work/hbase-1.1.3/zookeeper/</value>
  </property>
  <property>
    <name>hbase.tmp.dir</name>
    <value>/home/hadoop/work/hbase-1.1.3/tmp/</value>
  </property>
</configuration>

conf/regionserversの変更
bi10
bi12

修正~/.bash_profile、環境変数を増やす
#init hbase_environment
export HBASE_HOME=/home/hadoop/work/hbase-1.1.3
export PATH=$PATH:$HBASE_HOME/bin

habseの起動
bi 10でhabseを起動
[hadoop@bi10 hbase-1.1.3]$ start-hbase.sh 
starting master, logging to /home/hadoop/work/hbase-1.1.3/logs/hbase-hadoop-master-bi10.out
bi12: starting regionserver, logging to /home/hadoop/work/hbase-1.1.3/bin/../logs/hbase-hadoop-regionserver-bi12.out
bi10: starting regionserver, logging to /home/hadoop/work/hbase-1.1.3/bin/../logs/hbase-hadoop-regionserver-bi10.out

bi 12で別のHMasterを起動
[hadoop@bi12 hbase-1.1.3]$ hbase-daemon.sh start master
starting master, logging to /home/hadoop/work/hbase-1.1.3/logs/hbase-hadoop-master-bi12.out

プロセスを見ると、2台のホストにHRegionServerがあるはずです.HMasterが正しいです.