PiFlow大数据流水线系统v0.9源码

介绍：

PiFlow是一个简单易用，功能强大的大数据流水线系统。包含丰富的处理器组件，提供Shell、DSL、Web配置界面、任务调度、任务监控等功能。

特性：

1、简单易用
可视化配置流水线。
监控流水线。
查看流水线日志。
检查点功能。
2、扩展性强：
支持自定义开发数据处理组件。
3、性能优越：
基于分布式计算引擎Spark开发。
4、功能强大：
提供100+的数据处理组件。
包括Hadoop 、Spark、MLlib、Hive、Solr、Redis、MemCache、ElasticSearch、JDBC、MongoDB、HTTP、FTP、XML、CSV、JSON等。
集成了微生物领域的相关算法。

环境要求：

JDK 1.8
Spark-2.11.8
Apache Maven 3.1.0
Spark-2.1.0 及以上版本
Hadoop-2.6.0

网盘下载地址：

http://kekewl.net/tPM3zXxuKwS0

图片：

PiFlow大数据流水线系统v0.9源码相关推荐

PiFlow v0.5 发布：大数据流水线系统
开发四年只会写业务代码,分布式高并发都不会还做程序员? PiFlow是一个基于分布式计算框架Spark开发的大数据流水线系统.该系统将数据的采集.清洗.计算.存储等各个环节封装成组件,以所见即所得 ...
基于 HTML+ECharts 实现物流大数据可视化平台（含源码）
源码下载地址在文章末尾! 效果演示智慧仓储系统: 物流大数据服务平台: 物流云数据可视化平台: 智慧物流服务中心: 物联网数据统计平台: 源码下载地址 https://download.csdn.n ...
大数据毕设系列项目说明【源码+论文】
文章目录 1 项目下载步骤 2 项目包含内容 3 样例展示 4 代码样例 1 项目下载步骤 Hi,大家好,这里是学长开发的大数据可视化项目系列,大家可以用于自己的课设或毕设,可以灵活耦合任意数据,为自 ...
云帆教育大数据分享-Flume-0.9.4源码编译及一些编译出错解决方法
Flume-0.9.4源码编译及一些编译出错解决方法由于需要在Flume里面加入一些我需要的代码,这时候就需要重新编译Flume代码,因为在编译Flume源码的时候出现了很多问题,所以写出这篇博客, ...
Vue使用ECharts完成2020年全国各地区GDP总量大数据可视化面板（附源码）
就在上周全国各地区GDP总量上了热搜,一时兴起就想写个大数据面板展示既然决定要写,那么就要考虑到图表和图标的使用,这里我是用了我最熟悉的两大框架ECharts和element-ui 一.我的构思步骤 ...
ssm通用数据展示系统毕业设计-附源码200934
SSM通用数据展示系统的设计与实现摘要随着社会信息化的日益加强,传统的数据处理系统存在专用性太强.安全性不高.数据共享性差等缺陷,不利于企业应用.为了充分利用企业信息资产所带来的优势,企业迫切需 ...
【2016年第4期】大数据应用系统的消息驱动架构
贵芳1,李廉1,杨静1,武永卫2 1.合肥工业大学计算机与信息学院,安徽合肥 230009: 2.清华大学计算机科学与技术系,北京 100084 摘要:基于消息驱动框架的软件开发成为大数据应用系统的 ...
大数据画像系统-1.0
大数据画像系统-1.0 写在最前面操作流程与资源资源获取创建 Flask 工程添加必要第三方库将刚刚下载的文件放入 Flask 工程运行效果首页城市数据页个人画像页结语写在最前 ...
互联网金融时代下机器学习与大数据风控系统
机器学习在互联网金融行业中的应用在企业数据的应用的场景下,人们最常用的主要是监督学习和无监督学习的模型,在金融行业中一个天然而又典型的应用就是风险控制中对借款人进行信用评估.因此互联网金融企业依托互 ...

PiFlow大数据流水线系统v0.9源码

介绍：

特性：

环境要求：

网盘下载地址：

图片：

PiFlow大数据流水线系统v0.9源码相关推荐

最新文章

热门文章