zl程序教程

您现在的位置是:首页 >  数据库

当前栏目

Hadoop综合练习第十节–HBase安装部署详解大数据

2023-06-13 09:20:24 时间
1 运行环境说明 1.1 硬软件环境

l  主机操作系统:Windows 64 bit,双核4线程,主频2.2G,6G内存

l  虚拟软件:VMware® Workstation 9.0.0 build-812388

l  虚拟机操作系统:CentOS 64位,单核,1G内存

l  JDK:1.7.0_55 64 bit

l  Hadoop:1.1.2

1.2 机器网络环境

集群包含三个节点:1个namenode、2个datanode,其中节点之间可以相互ping通。节点IP地址和主机名分布如下:


所有节点均是CentOS6.5 64bit系统,防火墙均禁用,所有节点上均创建了一个hadoop用户,用户主目录是/usr/hadoop。所有节点上均创建了一个目录/usr/local/hadoop,并且拥有者是hadoop用户。

2 书面作业1:安装HBase 2.1 书面作业1内容

安装HBase,有条件的同学都按完全分布式安装,将安装过程和最后测试成功的界面抓图提交。

 

2.2 安装过程 2.2.1下载HBase安装包

从Apache网站上(hbase.apache.org)下载HBase稳定发布包:

http://mirrors.cnnic.cn/apache/hbase/hbase-0.96.2/

clip_image002

2.2.2上传HBase

把下载的hbase-0.96.2-hadoop1-bin.tar.gz安装包,使用SSH Secure File Transfer工具(第1、2周作业2.1.3.1介绍)上传到/home/hadoop/Downloads 目录下

clip_image004

2.2.3解压并移动目录

1.  使用如下命令解压,解压后出现hbase-0.96.2-hadoop1文件夹:

cd /home/hadoop/Downloads

tar -zxf hbase-0.96.2-hadoop1-bin.tar.gz

clip_image006

2.  使用如下命令把解压目录迁移到/usr/local下:

sudo mv hbase-0.96.2-hadoop1 /usr/local/hbase-0.96.2

clip_image008

2.2.4设置环境变量

1.  使用sudo vi /etc/profile命令修改系统环境变量

export HBASE_HOME=/usr/local/hbase-0.96.2

export PATH=$PATH:$HBASE_HOME/bin

clip_image010

2.  使环境变量生效

source /etc/profile

clip_image012

3.  验证环境变量生效

hbase version

clip_image014

2.2.5编辑hbase-env.sh

1.  打开hbase-env.sh文件

cd /usr/local/hbase-0.96.2/conf

sudo vi hbase-env.sh

clip_image016

2.  修改该文件配置

#Java环境

export JAVA_HOME=/usr/lib/java/jdk1.7.0_55

#通过hadoop的配置文件找到hadoop集群

export HBASE_CLASSPATH=/usr/local/hadoop-1.1.2/conf

#使用HBASE自带的zookeeper管理集群

export HBASE_MANAGES_ZK=true

clip_image018

clip_image020

2.2.6编辑hbase-site.xml

1.  打开hbase-site.xml配置文件

cd /usr/local/hbase-0.96.2/conf

sudo vi hbase-site.xml

clip_image022

2.  配置hbase-site.xml文件

configuration

  property

  name hbase.rootdir /name

  value hdfs://hadoop1:9000/hbase /value // Hbase该项并不识别机器IP,只能使用机器hostname

  /property

  property

  name hbase.cluster.distributed /name

  value true /value

  /property

  property

  name hbase.zookeeper.quorum /name

  value hadoop1,hadoop2,hadoop3 /value

  /property

/configuration

clip_image024

2.2.7编辑regionservers文件

使用如下命令打开regionservers配置文件:

sudo vi regionservers

clip_image026

加入如下内容:

hadoop2

hadoop3

clip_image028

2.2.8分发程序文件

1.  在其他两个节点hadoop2、hadoop3创建HBase存放目录并赋予权限

sudo mkdir /usr/local/hbase-0.96.2

sudo chown –R hadoop /usr/local/hbase-0.96.2

clip_image030

2.  在hadoop1节点把HBase分发到hadoop2和hadoop3中

cd /usr/local

scp -r hbase-0.96.2/* [email protected]:/usr/local/hbase-0.96.2/

scp -r hbase-0.96.2/* [email protected]:/usr/local/hbase-0.96.2/

clip_image032

clip_image034

2.2.9设置分发节点设置环境变量

按照hadoop1节点环境修改hadoop2、hadoop3系统环境变量,使用 sudo vi /etc/profile 打开配置文件:

export HBASE_HOME=/usr/local/hbase-0.96.2

export PATH=$PATH:$HBASE_HOME/bin

clip_image036

设置后使用 source /etc/profile 生效设置环境变量

2.2.10  启动HBase

通过如下命令启动Hbase

cd /usr/local/hbase-0.96.2/bin

./start-hbase.sh

clip_image038

2.2.11  验证启动

1.  查看各节点状态

hadoop1:

clip_image040

hadoop2、hadoop3:

clip_image042

2.  进入hbase的shell命令行,创建表member并进行查看

clip_image044

原创文章,作者:ItWorker,如若转载,请注明出处:https://blog.ytso.com/8563.html

分布式文件系统,分布式数据库区块链并行处理(MPP)数据库,数据挖掘开源大数据平台数据中台数据分析数据开发数据治理数据湖数据采集