体验Hadoop3.0生态圈-CDH6.1时代的来临

　　　　　　　　　　　　体验Hadoop3.0生态圈-CDH6.1时代的来临

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　作者：尹正杰

　　我在公司使用的是CDH5.15.1这个发行版本，具体的部署文档之前也有给大家分享过。Cloudera成立于2008年，在企业和大型机构在寻求解决棘手的大数据问题时，往往会使用开源软件基础架构Hadoop的服务。2018年10月，均为开源平台的Cloudera与Hortonworks公司宣布他们以52亿美元的价格合并。

　　由于最近在学习DBA相关的知识技能，托更了关于CDH6.0的实战部署笔记。不过没关系，我会把CDH6.X的一些新特性和整个部署过程娓娓道来。其实部署方法和之前分享的笔记大同小异~安装部署笔记，可参考官网：https://www.cloudera.com/documentation/enterprise/6/6.1/topics/installation_reqts.html#pre-install。

一.CDH6.1的新特性

1>.支持两个以上的NameNode；

2>.

3>.

4>.

5>.

6>.

7>.

二.下载CDH和CM

1>.CDH的选择

　　下载地址：https://archive.cloudera.com/cdh6/6.1.0/parcels/。

2>.CM的选择

　　下载地址：https://archive.cloudera.com/cm6/6.1.0/redhat7/yum/RPMS/x86_64/。

3>.cdh中的hadoop组件

　　cdh6.1中的组件 : https://archive.cloudera.com/cdh6/6.1.0/redhat7/yum/RPMS/x86_64/.

　　cdh5.15中的组件：https://archive.cloudera.com/cdh5/redhat/7/x86_64/cdh/5.15.1/RPMS/x86_64/

三.安装前准备

　　准备一台服务器10G内存左右即可。

转载于:https://www.cnblogs.com/yinzhengjie/p/10306681.html

体验Hadoop3.0生态圈-CDH6.1时代的来临相关推荐

QQ概念版促使用户进入体验2.0时代
4月19日,腾讯悄然启动一款专供Win7系统的QQ概念版的试用计划.该版本推出的"动感相框"."动态背景"."桌面好友"等系列3D创新交互功 ...
Hadoop3.0时代，怎么能不懂EC技术纠删码？个推为你解读
根据云存储服务商Backblaze发布的2021年硬盘"质量报告",现有存储硬件设备的可靠性无法完全保证,我们需要在软件层面通过一些机制来实现可靠存储.一个分布式软件的常用设计原则 ...
大数据学习系列：Hadoop3.0苦命学习（一）
传送门: 大数据学习系列:Hadoop3.0苦命学习(一) 大数据学习系列:Hadoop3.0苦命学习(二) 大数据学习系列:Hadoop3.0苦命学习(三) 大数据学习系列:Hadoop3.0苦命学 ...
大数据学习系列：Hadoop3.0苦命学习（五）
传送门: 大数据学习系列:Hadoop3.0苦命学习(一) 大数据学习系列:Hadoop3.0苦命学习(二) 大数据学习系列:Hadoop3.0苦命学习(三) 大数据学习系列:Hadoop3.0苦命学 ...
Hadoop3.0基础平台搭建(三节点),以及案例运行并使用python生成词云
一.设备配置列表,软件包二.主机名映射三.生成密钥四.将密钥发送到各个节点五.注意事项及验证六.关闭防火墙和SeLinux安全模块(所有主机均需操作七.解压JDK.hadoop包,设置Ja ...
hadoop3.0 分布式搭建/安装
原文:http://blog.csdn.net/u010499619/article/details/52886872 最近打算尝试在服务器上安装hadoop3.0,由于服务器上本来搭建好hadoop ...
配置开发者本地hadoop-3.0.0环境
1 配置开发者本地hadoop环境参考网址:https://blog.csdn.net/songhaifengshuaige/article/details/79575308 1.1.下载hadoo ...
centos7 hadoop3.0.1安装
安装JDK rpm -qa | grep java 找出OPENJDK yum -y remove java 上一步复制的jdk文件名卸载openjdk rpm -ivh jdk文件名安装jdk ...
spark 2.2 读取 Hadoop3.0 数据异常 org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterfa
spark 2.2 读取 Hadoop3.0 数据异常 Exception in thread "main" java.lang.IllegalAccessError: class ...

体验Hadoop3.0生态圈-CDH6.1时代的来临

体验Hadoop3.0生态圈-CDH6.1时代的来临相关推荐

最新文章

热门文章