HBase-2.4.6安装教程 附常见错误解决_hbase2.4.6-程序员宅基地

技术标签: 大数据学习  hadoop  big data  hbase  

我这里采用了jdk1.8.0_301+hadoop-3.3.1+zookeeper-3.6.3+hbase-2.4.6的版本
不同版本可能不能兼容,兼容性问题可以去官网查看http://hbase.apache.org/book.html#_preface

我这里有三台虚拟机,hadoop102,hadoop103,hadoop104

1、zookeeper正常部署

首先保证三台机器的zookeeper正常启动

[user@hadoop102 zookeeper-3.6.3]$ bin/zkServer.sh start
[user@hadoop103 zookeeper-3.6.3]$ bin/zkServer.sh start
[user@hadoop104 zookeeper-3.6.3]$ bin/zkServer.sh start

2、Hadoop正常部署

[user@hadoop102 hadoop-3.3.1]$ sbin/start-dfs.sh
[user@hadoop102 hadoop-3.3.1]$ sbin/start-yarn.sh

3、安装配置HBase

从官网下载需要的HBase安装包https://hbase.apache.org/downloads.html

1、解压

我这里选择安装在/opt/module目录下

[user@hadoop102 software]$ tar -zxvf hbase-2.4.6-bin.tar.gz -C /opt/module/

2、修改hbase-env.sh文件

[user@hadoop102 hbase-2.4.6]$ vim conf/hbase-env.sh

下面是要修改的信息
这些信息在文档中原本是注释了,删除注释即可,路径要改为自己的安装路径

export JAVA_HOME=/opt/module/jdk1.8.0_301
export HBASE_CLASSPATH=/opt/module/hbase-2.4.6/conf
export HBASE_MANAGES_ZK=false

3、修改hbase-site.xml文件

[user@hadoop102 hbase-2.4.6]$ vim conf/hbase-site.xml 

下面是修改的信息

<!-- hadoop端口号,要与hadoop中core-site.xml对应 -->
<property>
        <name>hbase.rootdir</name>
        <value>hdfs://hadoop102:8020/hbase</value>
</property>
<!-- true为分布式集群,false为单机模式 -->
<property>
        <name>hbase.cluster.distributed</name>
        <value>true</value>
</property>

<property>
        <name>hbase.zookeeper.quorum</name>
        <value>hadoop102,hadoop103,hadoop104</value>
</property>
<property>
        <name>hbase.zookeeper.property.dataDir</name>
        <value>/opt/module/zookeeper-3.6.3/zkData</value>
</property>
<!-- 本地文件系统的临时文件夹。可以修改到一个更为持久的目录上 -->
<property>
        <name>hbase.tmp.dir</name>
        <value>./tmp</value>
</property>
<!-- v2.1版本,在分布式情况下,设置为false -->
<property>
        <name>hbase.unsafe.stream.capability.enforce</name>
        <value>false</value>
</property>

<property>
        <name>hbase.wal.provider</name>
        <value>filesystem</value>
</property>

3、修改regionservers文件信息

修改为:

hadoop102
hadoop103
hadoop104

4、将Hadoop中的配置文件放入conf中

[user@hadoop102 hbase-2.4.6]$ cp /opt/module/hadoop-3.3.1/etc/hadoop/core-site.xml   /opt/module/hbase-2.4.6/conf/
[user@hadoop102 hbase-2.4.6]$ cp /opt/module/hadoop-3.3.1/etc/hadoop/hdfs-site.xml /opt/module/hbase-2.4.6/conf/

也可以用软连接配置

[user@hadoop102 hbase-2.4.6]$ ln -s /opt/module/hadoop-3.3.1/etc/hadoop/core-site.xml /opt/module/hbase-2.4.6/conf/core-site.xml
[user@hadoop102 hbase-2.4.6]$ ln -s /opt/module/hadoop-3.3.1/etc/hadoop/hdfs-site.xml /opt/module/hbase-2.4.6/conf/hdfs-site.xml

5、预编译

这一步操作我也没搞懂是干什么的,安装完成后有问题百度后做了这部操作就好了

 cp $HBASE_HOME/lib/client-facing-thirdparty/htrace-core-4.2.0-incubating.jar $HBASE_HOME/lib/

6、分发HBase文件

[user@hadoop102 module]$ scp -r /opt/module/hbase-2.4.6 hadoop@hadoop103:/opt/module/hbase-2.4.6
[user@hadoop102 module]$ scp -r /opt/module/hbase-2.4.6 hadoop@hadoop104:/opt/module/hbase-2.4.6

7、启动HBase

[user@hadoop102 hbase-2.4.6]$ bin/start-hbase.sh

8、检查运行状态

在主机(regionservers文件的第一行的主机名)上能看到进程HMaster
在所有机器上有进程HRegionServer说明启动成功
在这里插入图片描述
进入Hbase客户端

[user@hadoop102 hbase-2.4.6]$ bin/hbase shell

查看数据库有那些表

hbase:001:0> list

如果没报错说明启动成功
在这里插入图片描述

4、常见错误解决方案

注意你的Hadoop,zookeeper,HBase之间一定要兼容
在重启zookeeper之前一定要删掉日志目录,我这里是zkData,最好关机后在新建该文件和对应的myid

启动时抛出ClockOutOfSyncException异常

如果集群之间的节点时间不同步,会导致 regionserver 无法启动,抛出ClockOutOfSyncException 异常
https://www.jianshu.com/p/4160388ddc9f(能百度解决的问题为什么要自己写呢)

进入客户端使用list报ServerNotRunningYetException异常

原因是hadoop处在安全模式下。所以hbase的操作会出现异常。具体原理我目前还不太清楚。解决方案是手动退出安全模式

./hadoop dfsadmin -safemode leave 

完成后重启hbase

jps查看时没有HMaster进程

拷贝文件到对应目录,之后重启

cp $HBASE_HOME/lib/client-facing-thirdparty/htrace-core-4.2.0-incubating.jar $HBASE_HOME/lib/
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/jdsaiasodh/article/details/120667128

智能推荐

如何配置filezilla服务端和客户端_filezilla server for windows (32bit x86)-程序员宅基地

文章浏览阅读7.8k次,点赞3次,收藏9次。如何配置filezilla服务端和客户端百度‘filezilla server’下载最新版。注意点:下载的版本如果是32位的适用xp和win2003,百度首页的是适用于win7或更高的win系统。32和64内容无异。安装过程也是一样的。一、这里的filezilla包括服务端和客户端。我们先来用filezilla server 架设ftp服务端。看步骤。1选择标准版的就可以了。 _filezilla server for windows (32bit x86)

深度学习图像处理01:图像的本质-程序员宅基地

文章浏览阅读724次,点赞18次,收藏8次。深度学习作为一种强大的机器学习技术,已经成为图像处理领域的核心技术之一。通过模拟人脑处理信息的方式,深度学习能够从图像数据中学习到复杂的模式和特征,从而实现从简单的图像分类到复杂的场景理解等多种功能。要充分发挥深度学习在图像处理中的潜力,我们首先需要理解图像的本质。本文旨在深入探讨深度学习图像处理的基础概念,为初学者铺平通往高级理解的道路。我们将从最基础的问题开始:图像是什么?我们如何通过计算机来理解和处理图像?

数据探索阶段——对样本数据集的结构和规律进行分析_数据分析 规律集-程序员宅基地

文章浏览阅读62次。在收集到初步的样本数据之后,接下来该考虑的问题有:(1)样本数据集的数量和质量是否满足模型构建的要求。(2)是否出现从未设想过的数据状态。(3)是否有明显的规律和趋势。(4)各因素之间有什么样的关联性。解决方案:检验数据集的数据质量、绘制图表、计算某些特征量等,对样本数据集的结构和规律进行分析。从数据质量分析和数据特征分析两个角度出发。_数据分析 规律集

上传计算机桌面文件图标不见,关于桌面上图标都不见了这类问题的解决方法-程序员宅基地

文章浏览阅读8.9k次。关于桌面上图标都不见了这类问题的解决方法1、在桌面空白处右击鼠标-->排列图标-->勾选显示桌面图标。2、如果问题还没解决,那么打开任务管理器(同时按“Ctrl+Alt+Del”即可打开),点击“文件”→“新建任务”,在打开的“创建新任务”对话框中输入“explorer”,单击“确定”按钮后,稍等一下就可以见到桌面图标了。3、问题还没解决,按Windows键+R(或者点开始-->..._上传文件时候怎么找不到桌面图标

LINUX 虚拟网卡tun例子——修改_怎么设置tun的接收缓冲-程序员宅基地

文章浏览阅读1.5k次。参考:http://blog.csdn.net/zahuopuboss/article/details/9259283 #include #include #include #include #include #include #include #include #include #include #include #include _怎么设置tun的接收缓冲

UITextView 评论输入框 高度自适应-程序员宅基地

文章浏览阅读741次。创建一个inputView继承于UIView- (instancetype)initWithFrame:(CGRect)frame{ self = [superinitWithFrame:frame]; if (self) { self.backgroundColor = [UIColorcolorWithRed:0.13gre

随便推点

字符串基础面试题_java字符串相关面试题-程序员宅基地

文章浏览阅读594次。字符串面试题(2022)_java字符串相关面试题

VSCODE 实现远程GUI,显示plt.plot, 设置x11端口转发_vscode远程ssh连接服务器 python 显示plt-程序员宅基地

文章浏览阅读1.4w次,点赞12次,收藏21次。VSCODE 实现远程GUI,显示plt.plot, 设置x11端口转发问题服务器 linux ubuntu16.04本地 windows 10很多小伙伴发现VSCode不能显示figure,只有用自带的jupyter才能勉强个截图、或者转战远程桌面,这对数据分析极为不方便。在命令行键入xeyes(一个显示图像的命令)会failed,而桌面下会出现:但是Xshell能实现X11转发图像,有交互功能,但只能用Xshell输入命令plot,实在不方便。其实VScode有X11转发插件!!方法_vscode远程ssh连接服务器 python 显示plt

element-ui switch开关打开和关闭时的文字设置样式-程序员宅基地

文章浏览阅读3.3k次,点赞2次,收藏2次。element switch开关文字显示element中switch开关把on-text 和 off-text 属性改为 active-text 和 inactive-text 属性.怎么把文字描述显示在开关上?下面就是实现方法: 1 <el-table-column label="状态"> 2 <template slot-scope="scope">..._el-switch 不同状态显示不同字

HttpRequestUtil方法get、post、JsonToPost_httprequestutil.httpget-程序员宅基地

文章浏览阅读785次。java后台发起请求使用的工具类package com.cennavi.utils;import org.apache.http.Header;import org.apache.http.HttpResponse;import org.apache.http.HttpStatus;import org.apache.http.client.HttpClient;import org.apache.http.client.methods.HttpPost;import org.apach_httprequestutil.httpget

App-V轻量级应用程序虚拟化之三客户端测试-程序员宅基地

文章浏览阅读137次。在前两节我们部署了App-V Server并且序列化了相应的软件,现在可谓是万事俱备,只欠东风。在这篇博客里面主要介绍一下如何部署客户端并实现应用程序的虚拟化。在这里先简要的说一下应用虚拟化的工作原理吧!App-V Streaming 就是利用templateServer序列化出一个软件运行的虚拟环境,然后上传到app-v Server上,最后客户..._app-v 客户端