hbase与hadoop版本兼容问题，强烈谴责hadoop生态圈耦合性

查看master启动日志如下：

2020-08-25 14:43:09,043 WARN [RS-EventLoopGroup-1-1] concurrent.DefaultPromise: An exception was thrown by org.apache.hadoop.hbase.io.asyncfs.FanOutOneBlockAsyncDFSOutputHelper$4.operationComplete()
java.lang.IllegalArgumentException: object is not an instance of declaring class

进到hbase shell中执行命令会失败，报错：

ERROR: org.apache.hadoop.hbase.ipc.ServerNotRunningYetException: Server is not run yet.

启动hbase时jps查看master和regionserver进程都启动成功，但是打开webui界面查看时，页面中显示 backup master以及不显示regionserver情况，下面能看到master进程一直显示正在启动中，Initialize ServerManager and schedule SCP for crash servers。

而且查看zookeeper节点明显感觉hbase节点目录结构残缺，异常，丢失regionserver等信息。

原因就是hbase2.3.x不兼容hadoop 3.3.x，虽然hbase官网上4.Basic Prerequisities目录中显示兼容，但实际情况是不兼容的。截至到2021.12.22日hbase2.3和2.4都不兼容hadoop 3.3。最后我选择了hbase2.3和hadoop3.2，它俩兼容。集群搭建过程不变，hbase能正常工作，一开始我以为自己搭集群时哪有错，但实际上没有错，只是软件兼容性问题。仅以此篇文章纪念2021.12.23这沉重的一天。

hbase与hadoop版本兼容问题，强烈谴责hadoop生态圈耦合性相关推荐

【云计算 Hadoop】Hadoop 版本生态圈 MapReduce模型
忘的差不多了, 先补概念, 然后开始搭建集群实战 ... . 一 Hadoop版本和生态圈 1. Hadoop版本 (1) Apache Hadoop版本介绍 Apache的开源项目开发流程 : ...
Hadoop与Hbase 版本兼容（官网）
Hbase与JDK兼容问题: Hadoop 与 Hbase 版本兼容问题: 打对号的兼容.http://hbase.apache.org/book.html#replication Hadoo ...
hadoop+hive+flink+hbase交互的版本兼容性
与Hive兼容的Hadoop版本[3] Flink支持的Hive[1] 1.x.y, 2.x.y 1.0.0 1.0.1 1.x.y, 2.x.y 1.1.0 1.1.1 1.x.y, 2.x.y 1 ...
hbase的2.2.4版本支持哪个版本的hadoop_2019 年，Hadoop 还是数据处理的可选方案吗？...
作者丨Christian Hollinger 译者丨方彦目前云驱动数据处理和分析呈上升趋势,我们在本文中来分析下,Apache Hadoop 在 2019 年是否还是一个可选方案. 从我第一次使用 ...
Apache 大数据组件各个版本兼容信息
Apache 各个版本兼容信息框架旧版本Hadoop2 新版本hadoop3 安装教程链接 Hadoop 2.7.2 3.1.3 Hadoop HA 集群搭建,基于hadoop3 Zookeepe ...
hadoop再次集群搭建（3）-如何选择相应的hadoop版本
之前接触过很多很多hadoop版本,现在重新搭建平台,面临选择哪个版本的问题. 当我们决定是否采用某个软件用于开源环境时,通常需要考虑以下几个因素: (1)是否为开源软件,即是否免费. (2) 是否有 ...
Apache 、CDH、TDH、HDP、MapR等Hadoop版本区别
一.简述目前Hadoop的发行版除了Apache的开源版本之外,还有华为发行版.Intel发行版.Cloudera发行版(CDH).Hortonworks发行版(HDP).MapR等,所有这些发行版 ...
自学大数据：用以生产环境的Hadoop版本比较
一.背景介绍生产环境中,hadoop的版本选择是一个公司架构之时,很重要的一个考虑因素.这篇文章根据就谈谈现在主流的hadoop版本的比较.如果有不同意见,或者指正,希望大家能交流. Apache ...
Apache Hadoop版本详解
由doop版本混乱多变,因此,Hadoop的版本选择问题一直令很多初级用户苦恼.本文总结了ApacheHadoop和Cloudera Hadoop的版本衍化过程,并给出了选择Hadoop版本的一些建议 ...
Hadoop版本选择探讨
由于Hadoop版本混乱多变,因此,Hadoop的版本选择问题一直令很多初级用户苦恼.本文总结了Apache Hadoop和Cloudera Hadoop的版本衍化过程,并给出了选择Hadoop版本的 ...

hbase与hadoop版本兼容问题，强烈谴责hadoop生态圈耦合性

hbase与hadoop版本兼容问题，强烈谴责hadoop生态圈耦合性相关推荐

最新文章

热门文章