我们都希望，配置文件是从一个服务引出，然后客户端监听服务端变化，实时重启自身加载最新配置，这样，我们就不用维护每个独立的客户端配置，更新也变得非常简单，而flume，显然意识到了这一个巨大的实惠，他是支持配置文件交由zookeeper维护的，这样我们在修改配置时，flume会自动重新加载。

1，zookeeper 添加节点

我们利用博客《使用zkweb维护zookeeper数据》中介绍的软件，编辑某一个随意路径，用于盛放我们的配置，路径如下：

2，flume 配置zk端

利用博客《linux 安装supervise服务》，我们配置其启动命令

#!/bin/bash
cd /export/home/flume/
bin/flume-ng agent --conf conf -z 192.168.10.83:2181 -p /flume/example  -name agent1 -Dflume.root.logger=INFO,console

总结：

这种方式，实现非常简单，但是他却代表了一种思路，我们处理问题的思路，我们在面对大量重复工作的时候，实际，我们完全可以交由机器去实现，而机器是善于做大量重复工作的，我们的工作既高效又简单。

flume高并发优化——（9）配置文件交由zookeeper管理相关推荐

Java高并发秒杀API(四)之高并发优化
Java高并发秒杀API(四)之高并发优化 1. 高并发优化分析关于并发并发性上不去是因为当多个线程同时访问一行数据时,产生了事务,因此产生写锁,每当一个获取了事务的线程把锁释放,另一个排队线程才 ...
MySQL的性能优化及自动化运维实践与Mysql高并发优化
首先,我们来看看DBA的具体工作,我觉得 DBA 真的很忙:备份和恢复.监控状态.集群搭建与扩容.数据迁移和高可用,这是我们 DBA 的功能. 了解这些功能以后要对体系结构有更加深入的了解,你不知道怎 ...
每秒上千订单场景下的分布式锁高并发优化实践！
本文授权转自石杉的架构笔记背景引入首先,我们一起来看看这个问题的背景? 前段时间有个朋友在外面面试,然后有一天找我聊说:有一个国内不错的电商公司,面试官给他出了一个场景题: 假如下单时,用分布式锁 ...
Java架构-每秒上千订单场景下的分布式锁高并发优化实践！
"上一篇文章我们聊了聊Redisson这个开源框架对Redis分布式锁的实现原理,如果有不了解的兄弟可以看一下:<拜托,面试请不要再问我Redis分布式锁实现原理>. 今天就给大 ...
网易高并发优化 | 公开课-02
网易严选中的高并发优化 (一)单机系统缓存优化 1.背景导入在单机情况下,CSD模型如果出现慢查询一般会把问题归结到数据库 CSD模型: 实际操作发现:当有2KW级别数据层查询是,统计总行数约1s, ...
抽奖活动的高可用、高并发优化
这几年工作中做过不少营销活动,这里以抽奖活动为例,讨论一下如何设计出一个高可用.高并发的营销系统. 高可用.高并发架构的核心是分流和限流.系统架构时,应根据每一种营销活动的场景与特性,制定不同的分流. ...
Seckill系统高并发优化
绝大多数秒杀系统都需要实现高并发,这样就必须在原来的项目基础上进行优化.简单的优化很有可能就会很大地提高系统的并发性能,但是这些优化往往是系统开发人员很少注意的,或者直接被人们忽略.因此要成为一个出色 ...
用分布式锁来防止库存超卖，但是是每秒上千订单的高并发场景，如何对分布式锁进行高并发优化来应对这个场景？
用分布式锁来防止库存超卖,但是是每秒上千订单的高并发场景,如何对分布式锁进行高并发优化来应对这个场景? 转载 codeing_doc 最后发布于2018-11-23 09:44:41 阅读数 1073 ...
MySQL高并发优化指南（万能通用），稳的一批~
先问大家一个问题:你是什么时候接触的MySQL?或者说是什么原因MySQL进入你的视野? 作为目前全世界最流行的开源数据库,从Yahoo.Google等大网站,到零售业.制造业.政府部门和学校的内部任 ...

flume高并发优化——（9）配置文件交由zookeeper管理

1，zookeeper 添加节点

2，flume 配置zk端

总结：

flume高并发优化——（9）配置文件交由zookeeper管理相关推荐

最新文章

热门文章