Spring高兴地宣布了Spring for Apache Hadoop 2.0 M5里程碑版本,同时它们也越来越接近候选版本。 在Spring博客中 ,新版本2.0与1.0版本之间有很好的比较。 根据它:

用于Apache Hadoop的Spring 1.0版本将HDFS和MapReduce与MapReduce v1或MapReduce v2(YARN)结合使用。 默认发行版是具有其他功能的Apache Hadoop 1.2.1,例如Hadoop 2.2.0,Pivotal HD 1.1,Cloudera CDH4 MR1或MR2 YARN和Hortonworks HDP 1.3。

另一方面,Spring for Apache Hadoop 2.0除了继续提供对HDFS和MapReduce支持的改进外,还着重于添加YARN应用程序开发支持。 2.0版本的默认发行版是Apache Hadoop 2.2.0。

在下面,您可以在Spring IO里程碑存储库中看到特定的工件及其各自的传递依赖项:

  • 2.0.0.M5(默认– Apache Hadoop稳定版2.2.0)
  • 2.0.0.M5-hadoop12(Apache Hadoop稳定版1.2.1)
  • 2.0.0.M5-phd1(Pivotal HD 1.1)
  • 2.0.0.M5-cdh4(Cloudera CDH4 MR1)
  • 2.0.0.M5-cdh5(Cloudera CDH5 YARN beta)
  • 2.0.0.M5-hdp20(Hortonworks HDP 2.0)

Spring for Apache Hadoop 2.0版本还提供:

  • 新的Spring纱子项目中对YARN功能的支持。 借助spring-yarn框架,可以开发基于Spring的应用程序,并可以使用YARN将其部署为在Hadoop v2上运行。
  • Spring Boot对YARN的支持。 现在,Spring Boot应用程序可以部署在YARN上。
  • Hadoop YARN功能的基于注释的编程模型和基于注释的配置。

YARN示例中包含所有新的YARN功能,因此您可以在此处检查它们。

Spring Data-hadoop-store子项目也可以在这里提供更好的支持,以使用DataWriter和DataReader实现将数据写入HDFS的方式,支持文本文件和SequenceFiles格式(带有或不带有压缩)。 新的子项目还与Kite SDK的数据集支持集成在一起。

有关特定项目的更多信息,请参见项目页面 。

翻译自: https://www.javacodegeeks.com/2014/02/spring-for-apache-hadoop-2-0-m5.html

适用于Apache Hadoop 2.0 M5的Spring相关推荐

  1. Spring for Apache Hadoop 1.0 GA

    Spring总是惊喜不断,这次又提供了Spring Hadoop模块,方便开发人员使用hadoop不少 Spring Hadoop 终于发布了 1.0 的正式版,该版本据首个里程碑发布到现在已经 1 ...

  2. Spring for Apache Hadoop 1.0发布

    SpringSource发布了Spring for Apache Hadoop 1.0. 开发者能够通过它编写基于Spring Framework的Hadoop应用,还能很容易地与Spring Bat ...

  3. Apache Hadoop 3.0.0 GA版正式发布,可以部署到线上

    今天凌晨 Apache Hadoop 3.0.0 GA 版本正式发布,这意味着我们就可以正式在线上使用 Hadoop 3.0.0 了!这个版本是 Apache Hadoop 3.0.0 的第一个稳定版 ...

  4. Spring XD 1.0.0.M5在这里!

    Spring XD宣布发布Spring XD 1.0.0.Milestone 5 . 您可以从这里下载. 根据发布的Spring XD 1.0.0.M5 ,Spring XD是用于实时分析,批处理,数 ...

  5. apache hadoop_春天遇见Apache Hadoop

    apache hadoop SpringSource 刚刚宣布了适用于Apache Hadoop的Spring的第一个GA版本 . 该项目的目的是简化基于Hadoop的应用程序的开发. 您可以下载该项 ...

  6. 春天遇见Apache Hadoop

    SpringSource 刚刚宣布了适用于Apache Hadoop的Spring的第一个GA版本 . 该项目的目的是简化基于Hadoop的应用程序的开发. 您可以下载该项目在这里 ,并检查了Mave ...

  7. 官网教程:什么是Apache Hadoop?

    英文原文地址:http://hadoop.apache.org/ Apache™Hadoop®项目为可靠的,可扩展的分布式计算开发开源软件. Apache Hadoop软件库是一个框架,它允许使用简单 ...

  8. Apache Hadoop 2.7如何支持读写OSS

    背景 2017.12.13日Apache Hadoop 3.0.0正式版本发布,默认支持阿里云OSS对象存储系统,作为Hadoop兼容的文件系统,后续版本号大于等于Hadoop 2.9.x系列也支持O ...

  9. hadoop漏洞_【漏洞公告】CVE-2017-7669:Apache Hadoop远程权限提升漏洞

    Apache Hadoop是支持数据密集型分布式应用,并以Apache 2.0许可协议发布的软件框架.近期,国外安全研究人员发现,在Apache Hadoop 2.8.0版本.3.0.0-alpha1 ...

最新文章

  1. echarts词云第一次出现不了数据要刷新才能出现_红米K30 4G版评测:1599元的120Hz屏幕刷新率...
  2. if(a==1且a==2且a==3),有没有可能为true?
  3. 数据蒋堂 | 迭代聚合语法
  4. 设计模式:常见模式案例
  5. 计算机转集成光学,集成光学
  6. oracle locked time,Oracle里面的用户smsdb无法登录 LOCKED(TIMED)
  7. Python面试题目--汇总
  8. spring 事务持久性_项目学生:Spring数据的持久性
  9. Http基本身份验证在Spring Security中如何工作?
  10. easycode不推荐使用_为什么?mysql不推荐使用uuid或者雪花id作为主键?
  11. SAP License:如何导入License
  12. jetson nano的USB转232 DB9串口线选购
  13. 大数据基于TMDB的电影数据分析系统安装及使用
  14. layui框架实战案例(9):layPage 静态数据分页组件
  15. 超级记忆/图像数字记忆 110位数字图像转换表 0-9
  16. html表格制作实战
  17. SpringBoot+Vue实现邮箱登录注册功能
  18. 2018年物联网趋势
  19. 64位win7下安装SQL Server 2008(图文解说版)----本人备注
  20. Duang一夏,安码企业流程化管控软件优惠季来了! 活动介绍

热门文章

  1. android studio 配置国内镜像
  2. mysql 时间 1_(转)mysql日期时间函数1
  3. Multi-catch parameters are not allowed for source level below 1.7 解决方法
  4. java安全 ——JAAS(Java 认证和授权服务)开发指南
  5. java泛型程序设计——通配符类型+通配符的超类型限定
  6. spring mvc 提示_Spring BootHibernate提示
  7. jakarta ee_适用于Java EE / Jakarta EE开发人员的Micronaut
  8. 琥珀ai_琥珀项目:Java的未来暴露
  9. hystrix合并请求_Hystrix中的批处理(折叠)请求
  10. 使用AWS Elastic Beanstalk轻松进行Spring Boot部署