大資料HBase系列之HBase分散式資料庫部署
阿新 • • 發佈:2018-11-02
一、部署準備
1. 依賴框架
- 大資料Hadoop系列之Hadoop分散式叢集部署:https://blog.csdn.net/volitationLong/article/details/80285123
- 大資料Zookeeper系列之Zookeeper叢集部署:https://blog.csdn.net/volitationLong/article/details/82706210
2. 安裝介質
3. 主機規劃
IP地址 | 主機名 | HBase應用 |
---|---|---|
192.168.233.134 | host14 | HRegionServer |
192.168.233.133 | host15 | HRegionServer |
192.168.233.136 | host16 | HMaster |
二、HBase部署
1. 上傳解壓介質
scp -r hbase-2.1.0-bin.tar.gz host16:/opt/tools/hadoop-system/ ssh host16 cd /opt/tools/hadoop-system/ mkdir -p /opt/apache/hbase/ tar zxf ./hbase-2.1.0-bin.tar.gz -C /opt/apache/hbase/
2. 配置HBase
cd /opt/apache/hbase/hbase-2.1.0
2.1 配置hbase-env
mkdir -p /opt/apache/hbase/pids
vim conf/hbase-env.sh
export JAVA_HOME=/apps/svr/java/jdk1.8.0_172 export HADOOP_HOME=/opt/apache/hadoop/hadoop-2.7.3 export HBASE_CLASSPATH=$HADOOP_HOME/etc/hadoop export HBASE_MANAGES_ZK=false export HBASE_PID_DIR=/opt/apache/hbase/pids
2.2 配置regionservers
vim conf/regionservers
host14
host15
2.3 配置hbase-site.xml
cp /opt/apache/hadoop/hadoop-2.7.3/etc/hadoop/core-site.xml ./conf
cp /opt/apache/hadoop/hadoop-2.7.3/etc/hadoop/hdfs-site.xml ./conf
vim conf/hbase-site.xml
<configuration>
<!-- 指定ZooKeeper叢集位置 -->
<property>
<name>hbase.zookeeper.quorum</name>
<value>host14,host15,host16</value>
</property>
<!-- Zookeeper寫資料目錄,與ZooKeeper叢集上配置相一致 -->
<property>
<name>hbase.zookeeper.property.dataDir</name>
<value>/opt/apache/zookeeper/data</value>
</property>
<!-- Zookeeper的埠號 -->
<property>
<name>hbase.zookeeper.property.clientPort</name>
<value>2181</value>
</property>
<!-- RegionServers共享目錄 -->
<property>
<name>hbase.rootdir</name>
<value>hdfs://host16:9000/hbase</value>
</property>
<!-- 開啟分散式模式 -->
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<!-- 指定Hbase的master的位置 -->
<property>
<name>hbase.master</name>
<value>hdfs://host16:60000</value>
</property>
<!-- 使用本地檔案系統設定為false,使用hdfs設定為true -->
<property>
<name>hbase.unsafe.stream.capability.enforce</name>
<value>true</value>
</property>
</configuration>
3. 配置HBase環境變數
3.1 配置.bash_profile
$ vim ~/.bash_profile
# HBASE_HOME
export HBASE_HOME=/opt/apache/hbase/hbase-2.1.0
export PATH=$PATH:$HBASE_HOME/bin
3.2 立即生效
$ source ~/.bash_profile
4. 拷貝HBase
scp -r /opt/apache/hbase/ host14:/opt/apache/
scp -r /opt/apache/hbase/ host15:/opt/apache/
5. 啟動HBase
start-hbase.sh
5.1 WEB UI驗證