ubuntu上hbase集群搭建
在Ubuntu上搭建HBase集群涉及多个步骤,包括安装Java、配置Hadoop、安装HBase以及配置HBase集群。以下是一个基本的指南:
1. 安装Java
HBase需要Java环境,首先确保你的系统上安装了Java。
sudo apt update
sudo apt install openjdk-8-jdk
验证Java安装:
java -version
2. 配置Hadoop
HBase依赖于Hadoop,所以你需要先配置Hadoop。
下载并解压Hadoop
wget https://archive.apache.org/dist/hadoop/common/hadoop-3.3.1/hadoop-3.3.1.tar.gz
tar -xzvf hadoop-3.3.1.tar.gz -C /usr/local/
配置Hadoop
编辑/usr/local/hadoop/etc/hadoop/hadoop-env.sh文件,设置JAVA_HOME:
export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64
编辑/usr/local/hadoop/etc/hadoop/core-site.xml文件,添加以下内容:
<
configuration>
<
property>
<
name>
fs.defaultFS<
/name>
<
value>
hdfs://localhost:9000<
/value>
<
/property>
<
/configuration>
编辑/usr/local/hadoop/etc/hadoop/hdfs-site.xml文件,添加以下内容:
<
configuration>
<
property>
<
name>
dfs.replication<
/name>
<
value>
3<
/value>
<
/property>
<
/configuration>
启动Hadoop
start-dfs.sh
验证Hadoop是否启动成功:
jps
你应该能看到NameNode、DataNode和SecondaryNameNode等进程。
3. 安装HBase
下载并解压HBase
wget https://archive.apache.org/dist/hbase/2.4.9/hbase-2.4.9-bin.tar.gz
tar -xzvf hbase-2.4.9-bin.tar.gz -C /usr/local/
配置HBase
编辑/usr/local/hbase/conf/hbase-site.xml文件,添加以下内容:
<
configuration>
<
property>
<
name>
hbase.rootdir<
/name>
<
value>
hdfs://localhost:9000/hbase<
/value>
<
/property>
<
property>
<
name>
hbase.cluster.distributed<
/name>
<
value>
true<
/value>
<
/property>
<
property>
<
name>
hbase.zookeeper.quorum<
/name>
<
value>
localhost<
/value>
<
/property>
<
property>
<
name>
hbase.zookeeper.property.dataDir<
/name>
<
value>
/usr/local/hbase/zookeeper<
/value>
<
/property>
<
/configuration>
创建HBase数据目录和日志目录:
mkdir -p /usr/local/hbase/data
mkdir -p /usr/local/hbase/logs
启动HBase
start-hbase.sh
验证HBase是否启动成功:
jps
你应该能看到HMaster、HRegionServer和QuorumPeerMain等进程。
4. 配置HBase集群
如果你有多个节点,需要在每个节点上进行相同的配置,并确保它们能够相互通信。
配置Hadoop集群
在每个节点上编辑/usr/local/hadoop/etc/hadoop/core-site.xml和/usr/local/hadoop/etc/hadoop/hdfs-site.xml文件,确保它们指向正确的NameNode和DataNode。
配置HBase集群
在每个节点上编辑/usr/local/hbase/conf/hbase-site.xml文件,确保hbase.zookeeper.quorum包含所有节点的地址。
例如:
<
property>
<
name>
hbase.zookeeper.quorum<
/name>
<
value>
node1,node2,node3<
/value>
<
/property>
启动HBase集群
在主节点上启动HBase Master:
start-hbase-master.sh
在每个RegionServer节点上启动HBase RegionServer:
start-hbase-regionserver.sh
验证集群状态:
hbase shell
status 'simple'
你应该能看到集群的状态信息。
5. 验证集群
使用HBase shell连接到集群并创建一个表来验证集群是否正常工作:
hbase shell
create 'test_table', 'cf'
put 'test_table', 'row1', 'cf:col1', 'value1'
get 'test_table', 'row1'
如果一切正常,你应该能够看到插入的数据。
通过以上步骤,你应该能够在Ubuntu上成功搭建一个HBase集群。
声明:本文内容由网友自发贡献,本站不承担相应法律责任。对本内容有异议或投诉,请联系2913721942#qq.com核实处理,我们将尽快回复您,谢谢合作!
若转载请注明出处: ubuntu上hbase集群搭建
本文地址: https://pptw.com/jishu/764864.html
