ELK：Logstash 字段名称大小写切换

2024-05-13 22:36:10

一、背景

系统中需要按天和系统计算索引，但是日志中系统的名称大小写不一致，需求将大小写改为一致，记录下logstash字段如何进行大小写变换

二、实现

我们知道logstash提供了ruby的操作，Event API

logstash event api 说明

官网中的描述如下：

Ruby Filter插件可以执行任何ruby代码并且处理事件数据

filter {ruby {code => 'event.set("lowercase_field", event.get("message").downcase)'}
}

过滤器会把 message 值变为小写并且赋值给新字段 lowercase_field

我们获取的新索引名称可以设置为

 index => "myindex-%{+YYYY.MM.dd}-%{lowercase_field}"

当然大小写转换还可以使用filter的uppercase、lowercase

filter {mutate {uppercase => ["fieldname"]}
}

三、扩展

我们已经知道了配置方式，那么我们看一下 event set/get方法

1.Set

(1)方法

event.set(field, value)

(2)描述

该方法是可以修改字段的值并赋予新字段，我们上面看到的修改大小写即采用了get/set的方式。

2.Get

(1)方法

event.get(field)。

(2)描述

此字段的值；如果该字段不存在，则为nil。返回的值可以是字符串，数字或时间戳值。
field是发送到Logstash或在转换过程之后创建的结构化字段。 field也可以是嵌套的字段引用，例如

event.get("[foo][bar]")

ELK：Logstash 字段名称大小写切换相关推荐

ELK+logstash配置日志报警
需求通过读取日志文件监控,过滤日志信息的异常关键词,如ERR,error,Failed,warning等信息,将这些带有异常关键词的异常日志信息过滤出来,然后输出到zabbix,通过zabbix告警 ...
对话屏幕Dynpro(SE51) 屏幕元素屏幕属性 PAI事件的触发、屏幕元素Function Code设置屏幕流逻辑Screen Flow Logic 对话屏幕中的字段命名大小写问题
对话屏幕Dynpro(SE51) 屏幕元素屏幕属性 l 屏幕序号(Screen number).四个数字组成的序列号,用于在程序中确定屏幕,该序号在同一个ABAP程序内部是唯一的. l 屏幕类型 ...
11g表名大小写 oracle_oracle表名、字段名大小写问题。
oracle 表名 .字段名默认不区分大小写,除非建表语句中带双引号如CREATE TABLE "TableName"("ID" number). CRE ...
springboot-mybatis数据库字段和实体字段名称不一致，查询值为null
springboot-mybatis数据库字段和实体字段名称不一致,查询值为null 一.问题和原因二.我的解决,总结参考了:https://www.cnblogs.com/yif0118/p/14 ...
根据类名与字段名称取值（可用于循环取实体所有值非常好用）
/** * 根据字段名称取值 * * @param obj 类名 * @param fieldName 属性名 * @return */ public static Object getClassVa ...
access mysql字段对应_ACCESS数据库中表与字段名称修改
Sub RenameTable(conStr,oldName,newName) Dim objADOX Set objADOX=Server.CreateObject("ADOX.Catal ...
【Java 虚拟机原理】Class 字节码二进制文件分析四 ( 字段表数据结构 | 字段表详细分析 | 访问标志 | 字段名称 | 字段描述符 | 属性项目 )
文章目录前言一.字段表总数据结构二.访问标志三.字段名称四.字段描述符五.属性项目数前言上一篇博客 [Java 虚拟机原理]Class 字节码二进制文件分析三 ( 访问和修饰标志 | ...
php sql 字段名称,PHPSQL Server – 字段名称被截断
以下是相关代码: function connect(){ // DB credentials and info defined here.... $connection = odbc_connect( ...
增强用文本增强修改SAP标准屏幕中的字段名称属于元素的文本增强
如果想要改变标准屏幕中的字段名称,如把物料主数据基本数据元素的名字改为我们想要的名字 . 1.首先,事务MM03进入物料主数据的基本数据2视图中,将鼠标光标放在需要更改的字段"页格式&quo ...

最新文章

热门文章