vSphere Big Data Extensions (BDE) 的最新2.0 版支持 主要Hadoop 软件供应商提供的所有当前版本,包括YARN 以及 Hadoop 2.0。BDE 2.0 还可以创建仅包含基础架构的集群,暨一组已安装客户机操作系统的虚拟机。随后,您可以使用您满意的 Hadoop安装和管理工具来执行群集的部署和日常管理。BDE模板虚拟机中包含新版 CentOS (6.4),以提高Hadoop/YARN 应用程序的性能。这一版本还提高了对各种BDE 服务的运行状况检查能力,以提供一个更加友好的使用环境。

主题

支持最新的 Hadoop 版本与 Hadoop2.X 和 YARN(Yet Another ResourceNegotiator) 

在将应用迁移到新基础架构(例如 Hadoop 2.0 和 YARN)方面,客户已经表现出一定的兴趣。目前,大多数 Hadoop软件供应商支持 Apache Hadoop 版本 2.X (最新版本)。与旧版本相比,这一新版本有着显著的变化。新版本包含 YARN,这对于Hadoop 应用程序的开发人员和部署人员而言,是一种不同的模式。本质上,Hadoop 1.0 的 Job Tracker 已经在 YARN 中重新构造,成为调度器和资源管理器;而Application Master这一新组件承担了控制应用程序流的职责。更改YARN 中的模式是为了提供关注点分离、实现更高的扩展性和更好的资源利用率。从此以后,YARN 将成为使用 Hadoop 平台的程序的构造模式。

VMwarevSphere BDE 自2013年起开始支持部分 YARN 发行版。此最新版 BDE (2.0) 支持 YARN/2.0 的所有发行版。

下表显示了BDE 2.0所支持的Hadoop发行版。《vSphere BDE 管理员和用户指南》中包含有关这一方面的详细信息,请访问http://www.vmware.com/bde。

Hadoop 发行版支持列表

发行版  支持的版本 
Apache Hadoop

2.0

1.2.1

Apache BigTop 0.7.0
Cloudera  

5.0.0

4.6.0

Hortonworks 

2.1, 2.0

1.3

Intel

3.0.2

2.5

MapR 

3.1

3.0.2

Pivotal 

2.0,

1.1

Hadoop 性能 

虚拟机中的 Hadoop 应用程序性能是客户感兴趣的主要领域之一。

目前BDE2.0使用CentOS 6.4 作为虚拟机模板的默认操作系统,BDE 使用该模板创建新虚拟机并利用操作系统的新功能来优化 Hadoop 性能。如果用户想将自己喜欢的CentOS 或 RedHat Enterprise Linux 用作虚拟机操作系统,也可以在 BDE 中进行更改操作。

易于使用  

运行状况检查

BDE 2.0 提供一组运行状况检查屏幕,使用户可以查看 BDE/Serengeti 服务的状态。

以下是两个 BDE 这项新增功能示例,显示环境中的所有服务正在运行,且状况良好。

您还可以通过下面显示的第二个运行状况检查屏幕,确保所有管理服务器进程已成功完成。

错误检查

其次,目前已有了改进的预先检查功能,可以确保用户在启动一组虚拟机的置备流程之前,选择了合理的配置,例如,为客户机操作系统磁盘、交换空间等分配合理的存储空间量。这些前提条件由 BDE GUI 强制检查,用户可以根据需要使用 Serengeti 命令行执行操作,回避检查 。

用于管理网络的IPv6

客户希望尽可能多的使用 IPv6 网络连接。BDE 2.0 支持IPv6 网络连接。Hadoop网络本身可以使用 IPv4 进行隔离,而 BDESerengeti Server 可以使用 IPv6 进行工作。

合作伙伴启用

与第三方管理工具集成

目前可以使用 BDE 部署 “仅包含基础架构”的虚拟机群集(暨, 包含客户机操作系统,但未安装 Hadoop 软件的虚拟机),稍后通过第三方管理工具向其添加用户需要的特定Hadoop 软件。您可以使用此 BDE 2.0 功能置备一组虚拟机,然后使用Cloudera Manager、Ambari 或Pivotal Command Center 之类的工具部署和管理这些虚拟机中的 Hadoop 软件组件。

作为概念验证的一部分,我们展示了可以把这种两步部署流程做成工作流,由VMware vCloud Automation Center (vCAC) 管理工具集控制。本方案使用BDE API 创建虚拟机,然后在这些虚拟机中使用 Cloudera Manager API 来安装和配置 CDH。这个解决方案的演示可从此处获取: http://v.youku.com/v_show/id_XNzI4OTM4NjU2.html ,并在 2014 年 6 月的Hadoop 峰会上展示。

国际化支持

BDE2.0 提供级别 1 的国际化支持。对于希望使用 BDE 界面的日本客户和中国客户,将提供本地语言支持。

VMware宣布Big Data Extensions 2.0 GA相关推荐

  1. 大数据虚拟化零起点-5基础运维第四步-部署vSphere Big Data Extensions 1.0 vApp

    VMware vSphere Big Data Extensions(简称BDE)beta版本于2013年6月正式发布,同年9月22日作为vSphere 5.5的新功能正式上市.作为VMware推出的 ...

  2. couchbase_Spring Data Couchbase 1.0 GA发布

    couchbase Spring Data Couchbase 1.0 GA版本已发布! 该项目是Spring Data项目的一部分,该项目旨在为新数据存储提供熟悉且一致的基于Spring的编程模型, ...

  3. Spring Data Couchbase 1.0 GA发布

    Spring Data Couchbase 1.0 GA版本已发布! 该项目是Spring Data项目的一部分,该项目旨在为新数据存储提供熟悉且一致的基于Spring的编程模型,同时保留特定于存储的 ...

  4. 如何下载vSphere Big Data Extensions 1.0免费试用版

    下载步骤: 1. 点击vSphere产品评估中心 2. 请登录或创建账户以访问下载目录.有账户的用户,请直接登录后,参考下载流程从以下第5步起. 3. 浏览并更新您的用户档案,并接受表单末尾的最终用户 ...

  5. VMware发布vSphere Big Data Extensions

    大数据和虚拟化是近十年IT行业炙手可热的两大发展趋势.VMware公司作为虚拟化领域的领导者,致力于帮助vSphere用户提高大数据项目的管理效率.通过全新发布的VMware vSphere Big ...

  6. 灵活管理Hadoop各发行版的运维利器 - vSphere Big Data Extensions

    vSphere Big Data Extensions(BDE)提供了部署Hadoop多种厂商发行版的巨大灵活性,为客户提供三大价值: 为所支持的Hadoop版本提供调优的基础架构,VMware和Ha ...

  7. VMware NSX for vSphere 6.3.0 发行说明

    VMware NSX for vSphere 6.3.0 发行说明  上次更新时间 2017年10月02日  添加到 MyLibrary VMware NSX for vSphere 6.3.0 | ...

  8. Apache Hadoop 3.0.0 GA版正式发布,可以部署到线上

    今天凌晨 Apache Hadoop 3.0.0 GA 版本正式发布,这意味着我们就可以正式在线上使用 Hadoop 3.0.0 了!这个版本是 Apache Hadoop 3.0.0 的第一个稳定版 ...

  9. 在 VMware ESXi 5.5 和 6.0.x 中支持大于 2 TB 的虚拟机磁盘 (2058287)

    Purpose 免责声明:本文为 Support for virtual machine disks larger than 2 TB in VMware ESXi 5.5 and 6.0.x (20 ...

最新文章

  1. 广义典型相关分析_重复测量数据分析及结果详解(之二)——广义估计方程
  2. 计算机类对口升学都可以升啥专业,计算机专业对口升学专业试题.doc
  3. linux批量过去5小时前文件名,Linux批量修改文件名
  4. oracle之三手工不完全恢复
  5. 显示2位小数 python3_自动化常用语言python,版本3和2有何变化?
  6. deferred对象
  7. Android与iOS/WP8跨平台整合设计与开发_专栏
  8. wps插入批注快捷键是哪个?
  9. 【lidar】单目深度估计与伪雷达点云、可视化
  10. 数据分析03-(数值型描述统计及项目分析)
  11. 微空间私人定向共享系统设计与实现-计算机毕业设计源码+LW文档
  12. 联客云虚拟工作手机(云手机)应用行业及场景
  13. 大数据开发工程师要求高么?有前景么
  14. ssm毕设项目高校学生社团管理系统n4pcu(java+VUE+Mybatis+Maven+Mysql+sprnig)
  15. 面向对象基础案例(2)
  16. 人工智能程序可1秒检测出肠癌 准确率86% | 医疗
  17. ubuntu 常用命令及国内更新源
  18. 关于碰到开机自动弹出图片查看器和右下角弹游戏各种广告的解决方法
  19. 1、RDA8910(4GCAT1)CSDK二次开发:环境搭建
  20. LeetCode+ 16 - 20 双指针、排序|暴搜、递归|双指针、排序|链表|栈、字符串

热门文章

  1. 06-02-测试 Office Online Server Updated 2018
  2. Linux-C-Program:makefile
  3. 洛谷 P2163 [SHOI2007]Tree 园丁的烦恼
  4. C#Winform窗体中传值
  5. 知道这20个正则表达式,能让你少写1,000行代码
  6. EasyUi – 4.datagrid
  7. 日本Quoine的ICO平台正式将BCH作为融资货币
  8. 10 Windows编程——鼠标消息
  9. 1Python进阶强化训练之装饰器使用技巧进阶
  10. hdu 1251 统计拼图