logstash filter 处理json数据按原始数据字段数据存储

以下是实例

原始数据：

{"countnum":2,"checktime":"2017-05-23 16:59:32"}

1、无涉及字段类型转换 logstash filter 配置如下参数即可

if [type] == "onlinecount" {

json{

source => "message"

}

2、涉及字段类型转换

logstash filter

if [type] == "onlinecount" {

mutate{

split=>["message",","]

add_field => {

"coutnum" => "%{[message][0]}"

}

add_field => {

"checktime" => "%{[message][1]}"

}

remove_field => ["message"]

}

json{

source => "coutnum"

source => "checktime"

#convert => { "coutnum" => "integer" }

target => "coutnum"

target => "checktime"

}

转载于:https://blog.51cto.com/tobeawhole/1928723

logstash filter 处理json数据按原始数据字段数据存储相关推荐

构建全国统一的数据资产登记体系，是数据资源转变为数据资产的必由之路
原文刊载于<中国科学院院刊>2022年第10期专题"数据要素市场化配置问题探究",原文标题<关于构建全国统一的数据资产登记体系的思考>.本文为精简改编版. ...
解决后台json数据返回的字段需要替换的问题
有时候后台json数据返回的字段含有"id",也有可能是有时候为了减少代码的冗余,两页面之间只是数据模型个别属性的区别,所以这时候最好是用到模型属性的替换,用新的属性替换返回的js ...
python在json文件中查找指定数据_Python中json的取值如何使用python提取json中指定字段的数据...
python中为什么用json有什么作用如何用python读取json里面的值啊我爱你,所以我给了你伤害我的权力,只要我能忍受,我会一直陪伴着你,但你不能伤害我太多. 数据如下,我想要读取name. ...
Logstash filter grok正则的使用及介绍
一.Logstash企业级插件案例(EFLK架构) 1.常见的插件概述 gork插件:Grok是将⾮结构化⽇志数据解析为结构化和可查询的好⽅法.底层原理是基于正则匹配任意⽂本格式.该⼯具⾮常适合sy ...
logstash filter 过滤器详解
一.grok 正则捕获插件 grok是一个十分强大的logstash filter插件,他可以通过正则解析任意文本,将非结构化日志数据解析成结构化和方便查询的结构.是目前logstash 中解析非结构 ...
使用Spring Boot JPA Specification实现使用JSON数据来查询实体数据
文章目录使用Spring Boot JPA Specification实现使用JSON数据来查询实体数据需求概要 JSON 结构的设计使用策略模式执行不同的查询条件构造查询条件主逻辑具体的代 ...
python读json文件中不同的数据类型_怎么使用python提取json文件中的字段
python中为什么用json有什么作用 python的json模块中如何将变量添加到里面 python的json模块第一个是要打开的文件,第二个是打开的操作,为什么会如果你早认清你在别人心中没那么重 ...
Logstash~filter.kv插件使用教程（附带示例）
一.kv介绍用于解析key=value类型的消息,可以配置任意字符串来拆分数据,不一定非要用=符号,kv对的间隔也不一定非要用空格二.allow_duplicate_values 功能:允许重复键 ...
Cocos2d-x3.0游戏实例之《别救我》第十篇(完结)——用Json配置各类型怪物数据
现在我们有2种类型的怪物,而且创建的时候是写死在代码里的,这是要作死的节奏~ 所以,必须可配置,不然会累死人的. 笨木头花心贡献,啥?花心?不呢,是用心~ 转载请注明,原文地址: http://www ...

logstash filter 处理json数据按原始数据字段数据存储

logstash filter 处理json数据按原始数据字段数据存储相关推荐

最新文章

热门文章