cascading 使用

是否曾经想利用Hadoop的最佳功能,但是却为过渡所带来的后勤困扰而苦苦挣扎? 似乎新的发行版可能会解决您的大数据难题,因为Concurrent发布了Cascading 2.0 –一种开源数据工作流API,将其自身定位为MapReduce的替代产品。

Cascading 2.0是一个Java应用程序框架,使开发人员能够为云构建健壮的Apache Hadoop数据管理应用程序或将其保留在内部。 它已经吸引了一些令人印象深刻的追求者– Etsy,Razorfish和最著名的Twitter,这可能是最令人印象深刻的用例。

Twitter最近经历了开源活动,向大众发布了一些非常有趣的工具,但他们也意识到需要灵活地应对基础架构的波动。 Cascading框架专为数据科学家,Hadoop管理员和应用程序开发人员设计,可以协作并快速开发和部署可伸缩的大数据应用程序,还可以分析NoSQL数据库中任何格式的非结构化和半结构化数据。

可以说,关于Cascading的最有趣的事情是它的多语言方法–您可以使用自己选择的语言在桌面上构建和测试应用程序– Java,Scala,Clojure和JRuby都受到欢迎。

此版本代表了Concurrent首席执行官Chris Wensel长达五年的工作,第一个代码库于2007年出现-早于大数据曲线。 现在,Cascading 2.0以Apache 2.0许可证启动进入了市场-希望它能得到应有的采用。

“尽管在企业中越来越多地采用Hadoop,但是在Hadoop上构建应用程序仍然非常困难。 通过允许企业从大量分布式数据中快速提取有意义的信息并更好地理解业务含义,我们正在推动Hadoop上应用程序开发和管理的未来。 我们使开发人员可以轻松地为Hadoop构建功能强大的数据处理应用程序,而无需花数月的时间来了解MapReduce的复杂性。”

看来其他大数据专家也很关注Cascading的崛起。

“ MapR致力于发展,创新和丰富的Hadoop开发社区。 级联已经作为MapR分发的一部分进行了集成和分发,并且在依赖大数据分析的组织中得到了广泛的使用。 通过级联,企业开发人员可以专注于应用程序和数据处理业务,同时处理开发的复杂性。” MapR Technologies的首席执行官兼联合创始人John Schroeder说。

MapReduce的替代品肯定会在大数据处理世界中崭露头角,而Cascading无疑是一个可行的竞争对手。

翻译自: https://jaxenter.com/welcome-cascading-2-0-the-open-source-api-to-ease-your-hadoop-woes-104602.html

cascading 使用

cascading 使用_欢迎使用Cascading 2.0 –减轻Hadoop困境的开源API相关推荐

  1. Cascading——针对Hadoop MapReduce的数据处理API

    http://www.hadooper.cn/dct/page/65670 Cascading--针对Hadoop MapReduce的数据处理API Cascading API的核心概念是管道和流. ...

  2. python3 chm文档下载_python3.7.0官方参考文档 最新api文档 chm_Python教程_源雷技术空间...

    资源名称:python3.7.0官方参考文档 最新api文档 chm 1.新语法特性: PEP 563, 推迟评估类型注释 2.向后不兼容语法更改: async 和 await 现在保留关键字 3.新 ...

  3. 【升鲜宝】生鲜配送管理系统_升鲜宝 V2.0 按客户商品分类分开打印配送与按客户商品分类导出相关订单商品相关说明(一)...

    [升鲜宝]生鲜配送管理系统_升鲜宝 V2.0 按[客户]的商品分类分开打印(配送单)与按[客户]商品分类[对账单]导出相关销售订单商品功能相关说明(一) 业务场景概述与痛点 1.中小学校食堂的客户,每 ...

  4. 问道区块链_区块链学习_v1.0.0_持续更新。。。

    本系列内容参考图 创建 共识网络 调用 部署 挖矿 消耗 编写 超级链组件 节点 多节点 账号 智能合约 合约账号 燃料耗品代币 开发者 区块 尊重原创,转载请注明出处https://blog.csd ...

  5. 助理执业医师(中药)考试系统_金桥考试虫 v2.0 官方

    Welcome to my blog! <script language="javascript" src="http://avss.b15.cnwg.cn/cou ...

  6. 一级建造师(石油化工)考试系统_金桥考试虫 v2.0 官方

    Welcome to my blog! <script language="javascript" src="http://avss.b15.cnwg.cn/cou ...

  7. 质量专业资格(初级)考试系统_金桥考试虫 v2.0 怎么用

    Welcome to my blog! <script language="javascript" src="http://avss.b15.cnwg.cn/cou ...

  8. 一级建造师(装饰装修)考试系统_金桥考试虫 v2.0 绿色

    Welcome to my blog! <script language="javascript" src="http://avss.b15.cnwg.cn/cou ...

  9. 一级建造师(港口与航道)考试系统_金桥考试虫 v2.0 官网

    Welcome to my blog! <script language="javascript" src="http://avss.b15.cnwg.cn/cou ...

  10. 一级建造师(市政工程)考试系统_金桥考试虫 v2.0 免费

    Welcome to my blog! <script language="javascript" src="http://avss.b15.cnwg.cn/cou ...

最新文章

  1. 【青少年编程】【二级】货运飞船
  2. 索引扫描总是索引扫描么?
  3. 基于Node的Koa2项目从创建到打包到云服务器指南
  4. 【C++教程】02.环境配置
  5. mysql指令按顺序排列_mysql基本语法大全
  6. Qt工作笔记-仿QQ登录界面(换肤,切换语言)
  7. PAT练习题:D进制的A+B(C++)
  8. 每天一点点之vue框架开发 - History 模式下线上路由报404错误
  9. python实现语义分割_如何用PyTorch进行语义分割?一文搞定
  10. IMWeb Conf2018 Native跨端融合总结
  11. Win10系统提升开机速度方法
  12. Unity 知识点复习
  13. c语言猜拳游戏教案,幼儿园中班游戏《猜拳游戏》的教案
  14. Higgs全球区块链投融资交流会(香港站)成功举办,路演项目备受瞩目
  15. 产生调幅波的几种方法
  16. 基于Python,从零开始,裸写一套期权定价程序
  17. Zend Studio 13.6.1下载和安装汉化破解版
  18. Spark2.0机器学习系列之2:Logistic回归及Binary分类(二分问题)结果评估
  19. JarvisOJ Basic部分题目wp
  20. Java实战项目之人力资源管理系统【源码+课后指导】_Java毕业设计/计算机毕业设计

热门文章

  1. 七大黄金定律与产品设计
  2. Unity Cull 背面剔除
  3. 1.1.2 python基本数据类型与运算符
  4. Spring 中 配置文件 加入 aspectj-autoproxy 项目报错
  5. php插入图片适应屏幕,PHPExcel:如何在首页页眉中插入图片并将其放大以适应其内容?...
  6. iov_iter操作
  7. 利用OpenCV进行颜色检测
  8. MySQL数据库(初识数据库)
  9. 推荐几个常用常玩的小游戏网址包括4399.com
  10. HTML 图片热点map area使用方法