Flink分支——Blink的第一次使用

Blink今年年初的时候开源了~
作为一个跟风小菜鸟，也想跟紧各大佬的步伐，研究下Blink呢。以下是自己在安装编译测试时的步骤和小小心得，与大家共勉。

Blink其实就是Flink的一个分支。他是由阿里巴巴集团基于Flink自主研发的。Flink后期可能会（也许ing）将Blink合并到master上。Flink其实主要就是处理两种数据类型：流（DataStream）和批（DataSet）（据说阿里在底层的一部分就把流和批的概念统一了，这样会更快）。更多Blink相关信息可以参考以下链接：

flink官网：
https://flink.apache.org/

阿里云实时计算：
https://help.aliyun.com/knowledge_detail/62522.html

编译Blink

1.准备工作

a.环境准备Java8以上版本maven3.5以上版本系统（linux，window，mac理论上都支持，我这里是在linux系统上编译的,win环境上编译的如果要在linux上使用，只能把编译好的jar包拷过去了，亲测有效的）b.源码准备到官网下载好flink的版本（注：要1.5.1以上的，这样才有blink分支）。有两种方式：一种是用git下载：>git clone https://github.com/apache/flink.git

另一种是直接官网下载src的tgz包（版本自行选择）
下载地址：[https://www.apache.org/dyn/closer.lua/flink/flink-1.8.0/flink-1.8.0-src.tgz]

2.开始编译

a.切换分支查看所有的分支>git branch -a

确定自己的分支（默认为master）
>git branch

切换成blink
>git checkout -b blink origin/blink
最后检查下是否切换过来了（*表示目前分支）
>git branch

b.打包编译
>mvn clean;mvn install -Dmaven.test.skip=true -Dcheckstyle.skip=true -Dfast

最后打包成功会在$FLINK_HOME/flink-dist/target路径下，找到flink-1.5.1.tar.gz

3.开始使用

把编译好的安装包布置到你想安装的服务器上就好了。
下篇文章主要讲Blink任务依赖于Yarn。以及Blink SQL Client初始用。

Flink分支——Blink的第一次使用相关推荐

阿里正式向 Apache Flink 贡献 Blink 源码
导读: 如同我们去年12月在 Flink Forward China 峰会所约,阿里巴巴内部 Flink 版本 Blink 将于 2019 年 1 月底正式开源.今天,我们终于等到了这一刻. 阿里资深 ...
1月28日云栖精选夜读 | 终于等到你！阿里正式向 Apache Flink 贡献 Blink 源码
如同我们去年12月在 Flink Forward China 峰会所约,阿里巴巴内部 Flink 版本 Blink 将于 2019 年 1 月底正式开源.今天,我们终于等到了这一刻. 热点热议终于等 ...
终于等到你！阿里正式向 Apache Flink 贡献 Blink 源码
阿里妹导读:如同我们去年12月在 Flink Forward China 峰会所约,阿里巴巴内部 Flink 版本 Blink 将于 2019 年 1 月底正式开源.今天,我们终于等到了这一刻. 阿里 ...
大数据框架 Flink、Blink、Spark Streaming、Structured Streaming 和 Storm 之间的区别
在 1.2 节中已经跟大家详细介绍了 Flink,那么在本节就主要 Blink.Spark Streaming.Structured Streaming 和 Storm 的区别. Flink Flin ...
Hadoop、spark、Flink、Blink、storm介绍
1.什么是hadoop(搭建集群) Hadoop是由java语言编写的,在分布式服务器集群上存储海量数据并运行分布式分析应用的开源框架,其核心部件是HDFS与MapReduce. HDFS是一个分布式 ...
Ververica Platform-阿里巴巴全新Flink企业版揭秘
摘要:2019云栖大会大数据 & AI专场,阿里巴巴资深技术专家王峰带来"Ververica Platform-阿里巴巴全新Flink企业版揭秘"的演讲.本文主要从Verv ...
阿里重磅开源Blink：为什么我们等了这么久？
12月20日,由阿里巴巴承办的 Flink Forward China 峰会在北京国家会议中心召开,来自阿里.华为.腾讯.美团点评.滴滴.字节跳动等公司的技术专家与参会者分享了各公司基于 Flink ...
大数据课程之Flink
大数据课程之Flink 第一章 Flink简介 1.初识Flink Apache Flink是一个框架和分布式处理引擎,用于对无界和有界数据流进行有状态计算.Flink被设计在所有常见的集群环境中运行 ...
flink 简单上手
第一章 Flink简介 1.初识Flink Apache Flink是一个框架和分布式处理引擎,用于对无界和有界数据流进行有状态计算.Flink被设计在所有常见的集群环境中运行,以内存执行速度和任意规 ...

Flink分支——Blink的第一次使用

Flink分支——Blink的第一次使用

编译Blink

1.准备工作

2.开始编译

3.开始使用

Flink分支——Blink的第一次使用相关推荐

最新文章

热门文章