适用于Apache Hadoop 2.0 M5的Spring
Spring高兴地宣布了Spring for Apache Hadoop 2.0 M5里程碑版本,同时它们也越来越接近候选版本。 在Spring博客中 ,新版本2.0与1.0版本之间有很好的比较。 根据它:
用于Apache Hadoop的Spring 1.0版本将HDFS和MapReduce与MapReduce v1或MapReduce v2(YARN)结合使用。 默认发行版是具有其他功能的Apache Hadoop 1.2.1,例如Hadoop 2.2.0,Pivotal HD 1.1,Cloudera CDH4 MR1或MR2 YARN和Hortonworks HDP 1.3。
另一方面,Spring for Apache Hadoop 2.0除了继续提供对HDFS和MapReduce支持的改进外,还着重于添加YARN应用程序开发支持。 2.0版本的默认发行版是Apache Hadoop 2.2.0。
在下面,您可以在Spring IO里程碑存储库中看到特定的工件及其各自的传递依赖项:
- 2.0.0.M5(默认– Apache Hadoop稳定版2.2.0)
- 2.0.0.M5-hadoop12(Apache Hadoop稳定版1.2.1)
- 2.0.0.M5-phd1(Pivotal HD 1.1)
- 2.0.0.M5-cdh4(Cloudera CDH4 MR1)
- 2.0.0.M5-cdh5(Cloudera CDH5 YARN beta)
- 2.0.0.M5-hdp20(Hortonworks HDP 2.0)
Spring for Apache Hadoop 2.0版本还提供:
- 新的Spring纱子项目中对YARN功能的支持。 借助spring-yarn框架,可以开发基于Spring的应用程序,并可以使用YARN将其部署为在Hadoop v2上运行。
- Spring Boot对YARN的支持。 现在,Spring Boot应用程序可以部署在YARN上。
- Hadoop YARN功能的基于注释的编程模型和基于注释的配置。
YARN示例中包含所有新的YARN功能,因此您可以在此处检查它们。
Spring Data-hadoop-store子项目也可以在这里提供更好的支持,以使用DataWriter和DataReader实现将数据写入HDFS的方式,支持文本文件和SequenceFiles格式(带有或不带有压缩)。 新的子项目还与Kite SDK的数据集支持集成在一起。
有关特定项目的更多信息,请参见项目页面 。
翻译自: https://www.javacodegeeks.com/2014/02/spring-for-apache-hadoop-2-0-m5.html
适用于Apache Hadoop 2.0 M5的Spring相关推荐
- Spring for Apache Hadoop 1.0 GA
Spring总是惊喜不断,这次又提供了Spring Hadoop模块,方便开发人员使用hadoop不少 Spring Hadoop 终于发布了 1.0 的正式版,该版本据首个里程碑发布到现在已经 1 ...
- Spring for Apache Hadoop 1.0发布
SpringSource发布了Spring for Apache Hadoop 1.0. 开发者能够通过它编写基于Spring Framework的Hadoop应用,还能很容易地与Spring Bat ...
- Apache Hadoop 3.0.0 GA版正式发布,可以部署到线上
今天凌晨 Apache Hadoop 3.0.0 GA 版本正式发布,这意味着我们就可以正式在线上使用 Hadoop 3.0.0 了!这个版本是 Apache Hadoop 3.0.0 的第一个稳定版 ...
- Spring XD 1.0.0.M5在这里!
Spring XD宣布发布Spring XD 1.0.0.Milestone 5 . 您可以从这里下载. 根据发布的Spring XD 1.0.0.M5 ,Spring XD是用于实时分析,批处理,数 ...
- apache hadoop_春天遇见Apache Hadoop
apache hadoop SpringSource 刚刚宣布了适用于Apache Hadoop的Spring的第一个GA版本 . 该项目的目的是简化基于Hadoop的应用程序的开发. 您可以下载该项 ...
- 春天遇见Apache Hadoop
SpringSource 刚刚宣布了适用于Apache Hadoop的Spring的第一个GA版本 . 该项目的目的是简化基于Hadoop的应用程序的开发. 您可以下载该项目在这里 ,并检查了Mave ...
- 官网教程:什么是Apache Hadoop?
英文原文地址:http://hadoop.apache.org/ Apache™Hadoop®项目为可靠的,可扩展的分布式计算开发开源软件. Apache Hadoop软件库是一个框架,它允许使用简单 ...
- Apache Hadoop 2.7如何支持读写OSS
背景 2017.12.13日Apache Hadoop 3.0.0正式版本发布,默认支持阿里云OSS对象存储系统,作为Hadoop兼容的文件系统,后续版本号大于等于Hadoop 2.9.x系列也支持O ...
- hadoop漏洞_【漏洞公告】CVE-2017-7669:Apache Hadoop远程权限提升漏洞
Apache Hadoop是支持数据密集型分布式应用,并以Apache 2.0许可协议发布的软件框架.近期,国外安全研究人员发现,在Apache Hadoop 2.8.0版本.3.0.0-alpha1 ...
最新文章
- echarts词云第一次出现不了数据要刷新才能出现_红米K30 4G版评测:1599元的120Hz屏幕刷新率...
- if(a==1且a==2且a==3),有没有可能为true?
- 数据蒋堂 | 迭代聚合语法
- 设计模式:常见模式案例
- 计算机转集成光学,集成光学
- oracle locked time,Oracle里面的用户smsdb无法登录 LOCKED(TIMED)
- Python面试题目--汇总
- spring 事务持久性_项目学生:Spring数据的持久性
- Http基本身份验证在Spring Security中如何工作?
- easycode不推荐使用_为什么?mysql不推荐使用uuid或者雪花id作为主键?
- SAP License:如何导入License
- jetson nano的USB转232 DB9串口线选购
- 大数据基于TMDB的电影数据分析系统安装及使用
- layui框架实战案例(9):layPage 静态数据分页组件
- 超级记忆/图像数字记忆 110位数字图像转换表 0-9
- html表格制作实战
- SpringBoot+Vue实现邮箱登录注册功能
- 2018年物联网趋势
- 64位win7下安装SQL Server 2008(图文解说版)----本人备注
- Duang一夏,安码企业流程化管控软件优惠季来了! 活动介绍
热门文章
- android studio 配置国内镜像
- mysql 时间 1_(转)mysql日期时间函数1
- Multi-catch parameters are not allowed for source level below 1.7 解决方法
- java安全 ——JAAS(Java 认证和授权服务)开发指南
- java泛型程序设计——通配符类型+通配符的超类型限定
- spring mvc 提示_Spring BootHibernate提示
- jakarta ee_适用于Java EE / Jakarta EE开发人员的Micronaut
- 琥珀ai_琥珀项目:Java的未来暴露
- hystrix合并请求_Hystrix中的批处理(折叠)请求
- 使用AWS Elastic Beanstalk轻松进行Spring Boot部署