flume从指定网络端口采集数据输出到控制台

a1:agent的名称
r1:source的名称
k1:sink的名称
c1:channel的名称

# Name the components on this agent
a1.sources = r1
a1.sinks = k1
a1.channels = c1# Describe/configure the source
a1.sources.r1.type = netcat
a1.sources.r1.bind = hadoop000
a1.sources.r1.port = 44444# Describe the sink
a1.sinks.k1.type = logger# Use a channel which buffers events in memory
a1.channels.c1.type = memory
a1.channels.c1.capacity = 1000
a1.channels.c1.transactionCapacity = 100# Bind the source and sink to the channel
a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1

[hadoop@hadoop000 conf]$ vi example.conf

将上面的粘贴进来即可
启动agent:

flume-ng agent  \
--name a1 \
--conf $FLUME_HOME/conf \
--conf-file $FLUME_HOME/conf/example.conf \
-Dflume.root.logger=INFO,console

[hadoop@hadoop000 ~]$ telnet hadoop000 44444

flume从指定网络端口采集数据输出到控制台相关推荐

《Splunk智能运维实战》——1.3　从网络端口获取数据
本节书摘来自华章计算机<Splunk智能运维实战>一书中的第1章,第1.3节,作者 [美]乔史·戴昆(Josh Diakun),保罗R.约翰逊(Paul R. Johnson),德莱克·默 ...
日常使用——利用油猴脚本将数据所需要的数据输出的控制台
最近由于碰到需要从网页上扒下来不少数据表的内容,由于网站上有了相应的数据保护,无法直接从网页上复制,通过F12调出查看网页上的表格结构,发现数据卸载 titile属性里面,又设置的是只读. 因此想到利 ...
ssm idea后端接收数据输出在控制台时出现中文乱码
idea 后端接收数据输出在控制台时出现中文乱码环境 maven项目, ssm框架(spring+springmvc+mybatis)注解和配置文件混合开发, tomcat服务器解决乱码的方式(推 ...
flume监控一个文件实时采集新增的数据输出到控制台
Agent选型:exec source + memory channel + logger sink # Name the components on this agent a1.sources = ...
淘宝api开放平台买家卖家订单接口，python网络爬虫采集数据
custom-自定义API操作公共参数请求地址: https://console.open.onebound.cn/console/?i=Anzexi 名称类型必须描述 key String ...
【批处理命令BAT】一键关闭占用指定网络端口的进程
文章目录命令简介代码版本1 代码版本2 后续命令简介 Netstat 命令用于显示各种网络相关信息,如网络连接,路由表,接口状态 (Interface Statistics),masquerad ...
【大数据入门核心技术-Flume】（四）使用Flume采集数据到Hive
[大数据入门核心技术-Kafka](七)Ka 录一.准备工作 1.Hadoop环境安装 2.Flume安装部署二.采集数据到HDFS 1.配置任务文件 2.启动传输 3.查看是否同步成功三.常见 ...
ADC采集数据求平均
利用C语言的位移功能可以快速对采集2N次方数据取平均数例: /******************************************************************** ...
Flume安装部署，采集方案配置文件编写案例，启动agent采集数据
1.2 Flume实战案例 1.2.1 Flume的安装部署 1.Flume的安装非常简单,只需要解压即可,当然,前提是已有hadoop环境上传安装包到数据源所在节点上然后解压 tar -zxvf ...

flume从指定网络端口采集数据输出到控制台

flume从指定网络端口采集数据输出到控制台相关推荐

最新文章

热门文章