E-MapReduce上如何升级EMR-Core

本文档将介绍如何将老集群的EMR-Core升级到最新版本

什么是EMR-Core

EMR-Core是E-MapReduce集群上支持Hadoop生态组件读写OSS的依赖包。它提供一种高效地读写OSS数据的实现，并不断地在优化。所以，随着E-MapReduce版本的迭代，我们就有必要升级老集群上的EMR-Core以获得更好的性能，当然也包括修复很多BUG。

使用说明

升级工具下载地址

注意：

1. 本工具暂时只支持EMR-3.x系列，即支持EMR-3.0.0以上版本升级到最新EMR-Core。EMR-2.x系列的工具近期也会上线。
1. 本工具在升级过程中需要重启相关服务，切记判断服务重启风险，选在升级窗口停服进行升级。需要重启的服务包括Yarn和Hive。

1. SSH 登录到集群emr-header-1节点
2. 切换到hadoop账户下：su hadoop; cd
3. 下载升级工具包：wget http://emr-agent-pack.oss-cn-hangzhou.aliyuncs.com/upgrade/upgrade.tgz
4. 解压: tar zxvf upgrade.tgz
5. 开始升级，由于EMR集群分为HA和非HA集群两种，所以在执行脚本时需要传入集群类型参数，接受“ha”和“normal”两个参数，例如./upgrade.sh normal
6. 等待脚本执行完，检查相关服务是否正常，包括YARN和Hive服务

E-MapReduce上如何升级EMR-Core相关推荐

mrcc srcc_mrcc – MapReduce上的分布式C编译器系统
mrcc srcc The mrcc project's homepage is here: mrcc project. mrcc项目的主页在这里: mrcc project . 抽象 (Abstra ...
打造史上最小尺寸.Net Core单文件应用程序
.Net Core支持将应用程序发布成单文件进行部署和分发. 以下示例将Windows应用作为独立的单文件应用程序发布: dotnet publish -r win-x64 -c Release /p ...
Azure App Service 如何在第一时间用上最新版 .NET Core
点击上方关注"汪宇杰博客" ^_^ 导语微软会经常对 .NET Core 发布更新,通常为安全补丁.这不,今天早上,.NET Core 3.1.5 更新发布了.然而 Azure ...
.NET开发框架(五)-IIS上部署ASP.NET Core项目教程
在之前教程中,我们分享了框架的功能与视频演示介绍(文尾底部提供往期教程快捷链接) 系列教程:从初学者到架构师的一步步蜕变本篇经验将和大家介绍如何在IIS上部署ASP.NET Core项目,希望对初学 ...
升级.Net Core RC1的类库项目
微软终于发布了.Net Code RC2了,作为一个软粉当然是第一时间升级了.<升级.Net Core RC2的那些事>系列文章主要是记录本人升级RC2的相关步骤以及遇到过的坑. 第一篇先 ...
在IIS上部署ASP.NET Core Web API
目录 Visual Studio 2019和Dot Net Core 3.0 Windows Server上的Dot Net Core运行时在服务器上启用IIS IIS应用程序池 IIS网站创建A ...
使用Jenkins在Azure Web App上进行ASP.NET Core应用程序的持续集成和部署（CI/CD）–第4天
目录主题路线图 Jenkins 先决条件使用Jenkins Azure Pipeline在Azure上的ASP.NET Core应用程序的CI/CD 创建新的管道作业添加参数添加管道脚本运 ...
使用Jenkins在Azure Web App上进行ASP.NET Core应用程序的持续集成和部署（CI/CD）–第3天
目录主题路线图先决条件 Azure Active Directory和服务主体创建一个Azure Active Directory和服务主体将应用程序集成到角色将Jenkins与Azure ...
使用Jenkins在Azure Web App上进行ASP.NET Core应用程序的持续集成和部署（CI/CD）–第2天
目录主题路线图先决条件将ASP.NET Core应用发布到Azure应用服务在Azure上配置Jenkins 在Azure上创建Jenkins服务器解锁Jenkins 结论主题本系列文 ...
使用Jenkins在Azure Web App上进行ASP.NET Core应用程序的持续集成和部署（CI/CD）–第1天
目录介绍路线图 DevOps 持续集成持续部署 Jenkins Azure Web App服务主题先决条件安装Jenkins 先决条件下载并安装 Jenkins插件让它运行安装自定义 ...

E-MapReduce上如何升级EMR-Core

什么是EMR-Core

使用说明

E-MapReduce上如何升级EMR-Core相关推荐

最新文章

热门文章