flink安装以及运行自带wordcount示例(单机版,无hadoop环境)
1、下载安装包到/opt目录
2、解压安装包
tar zxf flink-1.6.1-bin-hadoop26-scala_2.11.tgz
3、启动flink
cd /opt/flink-1.6.1/bin[root@localhost bin]# ./start-cluster.sh
Starting cluster.
Starting standalonesession daemon on host localhost.localdomain.
Starting taskexecutor daemon on host localhost.localdomain.
此时可以打开浏览器在8081端口查看flink的web
运行wordcount示例
1、在控制台窗口1中启动一个本地服务
nc -l -p 9000
2、在控制台窗口2中提交flink程序
bin/flink run examples/streaming/SocketWindowWordCount.jar --hostname localhost
Starting execution of program
说明:该程序每隔5秒统计一次接收的数据中的单词个数
3、在控制台窗口3中打开out日志文件
log目录下的out文件会统计flink的执行结果。
cd /opt/flink-1.6.1/log
tail -f flink-root-taskexecutor-0-localhost.localdomain.out
out文件更新后会控制台中会自动显示新增的数据。
4、在控制台1中输入语句,在控制台3中查看统计结果,如下图所示:
5、在flink的web中查看运行的job
flink安装以及运行自带wordcount示例(单机版,无hadoop环境)相关推荐
- Flink安装及运行说明
目录 Flink部署Linux集群版 Flink任务提交方式 Flink运行架构 Flink部署Linux集群版 修改flink-conf.yaml,指定master节点地址 修改masters,配置 ...
- spark 运行自带python示例的方式
命令行直接执行: [root@master spark-2.2.0-bin-hadoop2.7]# bin/spark-submit examples/src/main/python/ml/kmean ...
- Flink三种运行模式安装部署
环境 Flink 1.8.2 jdk 1.8 hadoop 2.8.5 Local模式 在Local模式下仅模拟cluster集群,仅启动JobManager完成应用的运行.JobManager进程信 ...
- Oozie自带MapReduce示例的运行
示例很简单,但是却有很多坑,如下先给出最终的配置示例以及运行结果,最后给出其中遇到过的问题以及解决方法. 安装用户 Hadoop安装在root用户下: Oozie安装在wht用户下(一开始是安装在ro ...
- 第一天:什么是Flink、WordCount入门、Flink安装、并行度
1. 初识 Flink 在当前数据量激增的时代,各种业务场景都有大量的业务数据产生,对于这些不断产的数据应该如何进行有效的处理,成为当下大多数公司所面临的问题.目前比较流行的大数据处理引擎 Apach ...
- Alta 429板卡在安装厂家自带的驱动后,没法运行自带的例子的解决方法
一:最近的手里有一块Altadt CPCI-429(PMC-429+载板)板卡,拿到光盘以后,安装光盘中的驱动和相关LabVIEW的例子,发现在设备管理器上可以发现设备,但是运行自带的范例程序,程序一 ...
- 大数据Flink安装部署
目录 1 Local本地模式 1.1 原理 1.2 操作 1.3 测试 2 Standalone独立集群模式 2.1 原理 2.2 操作 2.3 测试 3 Standalone-HA高可用集群模式 3 ...
- 2021年大数据Flink(三):Flink安装部署 Local本地模式
目录 Flink安装部署 Local本地模式 原理 操作 测试 Flink安装部署 Flink支持多种安装模式 - Local-本地单机模式,学习测试时使用 - Standalone-独立集群模式,F ...
- Flink安装与编程实践(Flink1.9.1)
Flink安装与编程实践(Flink1.9.1) 1.安装Flink Flink的运行需要Java环境的支持,因此,在安装Flink之前,请先参照相关资料安装Java环境(比如Java8).然后,到F ...
最新文章
- 完美世界推穿戴式设备:能消灭“宅玩家”吗?
- linux系统查看性能,linux查看操作系统(linux查看性能)
- java 权限控制 demo_Java-访问控制权限
- Sass基础知识及语法
- ssas脚本组织程序_微服务架构:从事务脚本到领域模型
- 速芯科技完成1亿元人民币融资
- 安装提示没有安装包docker(转载)
- Python的并发并行[3] - 进程[1] - 多进程的基本使用
- python股票交易系统实现_python实现股票自动交易,自动量化交易软件
- 循环神经网络应用举例
- 16*16点阵字库HZK16的使用
- meson ninja调试dpdk
- word-wrap和word-break
- 微表情识别的图片预处理(python版)
- 【CodeForces 767C】Garland (树形DP)
- VC中三种常见中文内码的转换方法
- 【电商界的屠龙者-拼多多】——“拼多多”竞品分析
- 脉冲神经网络(Spiking Neural Network,SNN)概述
- usb 接口触摸屏驱动
- Android事件分发简单介绍
热门文章
- python综合设计问题_Python 设计和历史的 27 个问题(2)
- 析砂性土层php泥浆护壁,砂卵石层钻探护壁工艺分析
- 蓝桥杯——输出米字形
- ~~朴素dijkstra算法 (搜索与图论)(附模板题AcWing 849. Dijkstra求最短路 I)
- 目标检测——标注文件的格式设计
- 深度学习——ReLU在x=0的时候是条线,为什么什么是非线性函数?
- X86,X86_32,X86_64
- OSError: [Errno 22] Invalid argument: ‘\u202aC:\\Windows\\Fonts\\方正粗黑宋简体.ttf‘解决方案
- 配置一台用于深度学习的个人工作站系统的实验记录[主机可以买现成的或自己配,裸机即可]
- [排版题] 例4.1 输出梯形