druid emitter 监控模块

在druid的提供了Request Logging的日志记录功能，除此之外druid还提供了emiter模块，可将druid的各个组件（broker,middlemanage,overlord、coordinator、historical）的metric发送http接口或者文件中。

（1）首先enable emitter merics,配置如下：

Property	Description	Default
`druid.emitter`	Setting this value to "noop", "logging", "http" or "parametrized" will initialize one of the emitter modules. value "composing" can be used to initialize multiple emitter modules.	noop

可根据实际情况，采用不同的方式来采集metrics.

（2）配置druid.monitoring.monitors 。

druid中提供了以下monitors

Name	Description
`io.druid.client.cache.CacheMonitor`	Emits metrics (to logs) about the segment results cache for Historical and Broker nodes. Reports typical cache statistics include hits, misses, rates, and size (bytes and number of entries), as well as timeouts and and errors.
`io.druid.java.util.metrics.SysMonitor`	This uses the SIGAR library to report on various system activities and statuses.
`io.druid.server.metrics.HistoricalMetricsMonitor`	Reports statistics on Historical nodes.
`io.druid.java.util.metrics.JvmMonitor`	Reports various JVM-related statistics.
`io.druid.java.util.metrics.JvmCpuMonitor`	Reports statistics of CPU consumption by the JVM.
`io.druid.java.util.metrics.CpuAcctDeltaMonitor`	Reports consumed CPU as per the cpuacct cgroup.
`io.druid.java.util.metrics.JvmThreadsMonitor`	Reports Thread statistics in the JVM, like numbers of total, daemon, started, died threads.
`io.druid.segment.realtime.RealtimeMetricsMonitor`	Reports statistics on Realtime nodes.
`io.druid.server.metrics.EventReceiverFirehoseMonitor`	Reports how many events have been queued in the EventReceiverFirehose.
`io.druid.server.metrics.QueryCountStatsMonitor`	Reports how many queries have been successful/failed/interrupted.
`io.druid.server.emitter.HttpEmitterMonitor`	Reports internal metrics of `http` or `parametrized` emitter (see below). Must not be used with another emitter type. See the description of the metrics here: https://github.com/druid-io/druid/pull/4973.

注意：配置时，需将不同的monitors配置到不同组件的配置中，如果全部配置在common.runtime.properties中，启动组件时，会出现错误，应该有的组件没有相关monitor的实现，导致启动失败。我所用的monitor配置如下：

common.runtime.properties	druid.monitoring.monitors=["io.druid.java.util.metrics.JvmMonitor","io.druid.java.util.metrics.JvmCpuMonitor","io.druid.java.util.metrics.JvmThreadsMonitor","io.druid.java.util.metrics.SysMonitor"]
broker	druid.monitoring.monitors=["io.druid.client.cache.CacheMonitor","io.druid.server.metrics.QueryCountStatsMonitor"]
middlemanage	--
overlord	--
coodinator	--
historical	druid.monitoring.monitors=["io.druid.client.cache.CacheMonitor","io.druid.server.metrics.HistoricalMetricsMonitor"]

（3）添加sigar.jar

由于部分monitor 采用sigar librart 采集组件的信息，默认druid/lib中没有相关jar，需将sigar.jar 添加到druid/lib目录下

（4）重启druid

druid emitter 监控模块相关推荐

Apache Druid安装部署手册
一 Apache Druid架构 1. Coordinator 监控Historical处理,负责分配segments到指定的服务,确保存在HIstorical中是自平衡的 2. Overlord 监 ...
druid安装与案例
2019独角兽企业重金招聘Python工程师标准>>> druid 可以运行在单机环境下,也可以运行在集群环境下.简单起见,我们先从单机环境着手学习. 环境要求 java7 或者更高 ...
Druid -- 基于Imply方式集群部署
向导集群部署 1. 下载tar包,上传服务器,解压 2. 修改配置文件common.runtime.properties 3. 修改coordinator配置,vi overlord/runtime ...
使用 Imply 安装部署 Druid 集群并测试
下载 imply 安装包 [root@node01 opt]# wget https://static.imply.io/release/imply-3.3.3.tar.gz 解压安装包并修改配置文件 ...
Apache Durid （HDFS原理特性读写测试集群部署架构设计）
Apache Durid (HDFS 集群部署) Apache Durid (HDFS 集群部署) 1. 分布式文件HDFS 1.1 HDFS简介 1.1.1 HDFS发展历史 1.1.2 HDFS设 ...
Java生鲜电商平台-监控模块的设计与架构
点击上方蓝色"方志朋",选择"设为星标" 回复"666"获取独家整理的学习资料! ‍ 来源:https://www.cnblogs.com/ ...
阿里巴巴开源项目 Druid 负责人温少访谈
本文是由转载而来. Druid是阿里巴巴开源平台上的一个项目,整个项目由数据库连接池.插件框架和SQL解析器组成.该项目主要是为了扩展JDBC的一些限制,可以让程序员实现一些特殊的需求,比如向密钥服 ...
Springboot04整合Druid
SpringBoot整合Druid完成MySQL数据访问,以及配置Druid监控模块整合 1 Druid Druid是一个关系型数据库连接池,它是阿里巴巴的一个开源项目.Druid支持所有JDBC兼容 ...
Druid连接池简介和配置
Druid是什么?有什么作用? Druid首先是一个数据库连接池,但它不仅仅是一个数据库连接池,它还包含一个ProxyDriver,一系列内置的JDBC组件库,一个SQL Parser. Druid的 ...
Druid.io index_realtime实时任务源码分析
目录前言以[消防]工作来形象类比实时任务大体流程介绍 Ingest 阶段 Persist 阶段 Merge 阶段 Hand off 阶段任务的提交到启动任务的提交相关源码分析任务队列和o ...

druid emitter 监控模块

druid emitter 监控模块相关推荐

最新文章

热门文章