flume 1.7在windows下的安装与运行

一、安装

安装java，配置环境变量。
安装flume，flume的官网http://flume.apache.org/，下载地址，下载后直接解压即可。

二、运行

创建配置文件：在解压后的文件apache-flume-1.6.0-bin/conf下创建一个example.conf，内容如下。

 # example.conf: A single-node Flume configuration# Name the components on this agenta1.sources = r1a1.sinks = k1a1.channels = c1# Describe/configure the sourcea1.sources.r1.type = netcata1.sources.r1.bind = localhosta1.sources.r1.port = 44444# Describe the sinka1.sinks.k1.type = logger# Use a channel which buffers events in memorya1.channels.c1.type = memorya1.channels.c1.capacity = 1000a1.channels.c1.transactionCapacity = 100# Bind the source and sink to the channela1.sources.r1.channels = c1a1.sinks.k1.channel = c1

配置说明：

sources配置：

netcat 监控某个端口，将流经端口的每一个文本行数据作为Event输入
bind中是要添加 ip地址或主机名
port中是要添加绑定主机的端口

Flume模块sinks配置：

a1.sinks.k1.type=logger logger数据写入日志文件（打印出来）

Flume模式channels配置：

a1.channels.c1.type=memory
a1.channels.c1.capacity=1000
a1.channels.c1.transactionCapacity=100

momory event数据存储到内存中，缓存数据

1000 缓存的数据是1000条

100 每个事物缓存的最大单元数目

Flume模块channel配置:（配置sources，sinks文件与channel的关系）

a1.sources.r1.channels=c1

a1.sinks.k1.channel=c1

2.1、打开cmd进入到apache-flume-1.6.0-bin\bin目录下，运行如下命令。

 flume-ng.cmd  agent -conf ../conf  -conf-file ../conf/example.conf  -name a1  -property flume.root.logger=INFO,console

效果图（右键查看原图）：

2.2、另外打开一个cmd窗口，运行如下命令。

telnet localhost 44444

如果连接成功，则该窗口会变为输入状态，可以输入文字。同时在步骤2中的cmd窗口中，也会显示接收到的信息。效果图（右键查看原图）：

转载于:https://www.cnblogs.com/duanxz/p/9157299.html

flume 1.7在windows下的安装与运行相关推荐

caffe使用过程+digits在windows下的安装和运行
一.模型基本组成想要训练一个caffe模型,需要配置两个文件,包含两个部分:网络模型,参数配置,分别对应*.prototxt , ****_solver.prototxt文件. Caffe模型文件解 ...
怎么在windows上启动python_Windows下如何安装和运行Python
介绍了在Windows下如何安装和运行Python的方法. 工具/原料含有Windows操作系统的笔记本电脑 Python安装包方法/步骤 1 进入Python官网,下载Python安装执行文件, ...
Windows下RabbitMQ安装及注意事项
Windows下RabbitMQ安装及注意事项简介背景 1. RabbitMQ是一个由erlang开发的AMQP(Advanved Message Queue)的开源实现. Rabbit ...
Windows下MongoDB安装及创建用户名和密码
Windows下MongoDB安装及创建用户名和密码下载MongoDB的安装文件https://www.mongodb.com/download-center#community,选择合适的版本(注 ...
Windows下Wireshark安装版本选择方式
Windows下Wireshark安装版本选择方式 Wireshark版本分为1.X系列和2.X系列.1.X系列是早期版本,不提供中文版本.2.X系列是新版本,安装后,同时提供中文版和英文版.根据系统 ...
python怎么安装pandas模块-windows下如何安装Python、pandas
windows下如何安装Python.pandas 本篇主要涵盖以下三部分内容: Python.Pycharm的安装使用Pycharm创建.运行Python程序安装pandas 1.Python. ...
【转帖】Windows下PostgreSQL安装图解
Windows下PostgreSQL安装图解这篇文章主要为大家介绍了如果在Windows下安装PostgreSQL数据库的方法,需要的朋友可以参考下现在谈起免费数据库,大多数人首先想到的可能是My ...
memcache的windows下的安装和简单使用
原文:memcache的windows下的安装和简单使用 memcache是为了解决网站访问量大,数据库压力倍增的解决方案之一,由于其简单实用,很多站点现在都在使用memcache,但是memcach ...
TensorFlow在windows 下的安装
前言:从2015年谷歌将tensorflow开源后,这位用于深度学习的强大神器便把Caffe,Keras,Torch7等这一票人全部干掉,github上的star和fork是一路飙升,几乎是它们的总和 ...

flume 1.7在windows下的安装与运行

flume 1.7在windows下的安装与运行

一、安装

二、运行

flume 1.7在windows下的安装与运行相关推荐

最新文章

热门文章