1. 前言

今天遇到一个需求，使用Logstash将Oracle的一张表数据定时地同步到MySQL。数据源使用Jdbc Input Plugin没问题，但是官方文档介绍的输出插件没有Jdbc，也就是说不能直接配置Jdbc -> Jdbc同步。

经过一番思索，决定使用 Jdbc -> Http 的方式。

2. Http Output Plugin

2.1 介绍

Http 插件允许我们配置url接口地址，插件会将数据传到接口，然后就可以通过代码进行数据处理了。

2.2 配置

output {http {url => "http://192.168.1.144:99/depart

Logstash 使用http output处理数据相关推荐

使用logstash将Mysql中的数据导入到ElasticSearch中（详细步骤，win_Elasticsearch）
在之前转载的一腾讯高级工程师<一文彻底了解Logstash>对logstach有这详细的介绍,这里我只说明一下,将mysql中的数据使用logstash导入到es中,如何操作,具体步骤见下 ...
Logstash：导入 RSS feed 数据
在实际的使用过程中,我们有时希望正对 RSS 的数据来进行导入并进行搜索.在现实的许多微服务中,有很多的数据是根据 RSS feed 的形式来提供的,比如我们常见的点评网站等.那么我们有没有办法把这些 ...
logstash tcp multihost output(多目标主机输出,保证TCP输出链路的稳定性)
在清洗日志时,有一个应用场景,就是TCP输出时,须要在一个主机挂了的情况下,自已切换到下一个可用入口.而原tcp output仅支持单个目标主机设定.故本人在原tcp的基础上,开发出tcp_multi ...
sql 2008 使用output避免数据修改后的二次查询
表a (f1 primary key,f2,f3), 表b (f1,f3,f4) 现要根据表b修改表a中的相应字段的值,并将修改过的值显示出来,一般用法: 1 update a from b set ...
Logstash读取Kafka数据写入HDFS详解
强大的功能,丰富的插件,让logstash在数据处理的行列中出类拔萃通常日志数据除了要入ES提供实时展示和简单统计外,还需要写入大数据集群来提供更为深入的逻辑处理,前边几篇ELK的文章介绍过利用lo ...
logstash增量同步mysql数据到es
本篇本章地址:https://www.cnblogs.com/Thehorse/p/11601013.html 今天我们来讲一下logstash同步mysql数据到es 我认为呢,logstash是众 ...
使用logstash迁移es数据
推荐阅读 Helm3(K8S 资源对象管理工具)视频教程:https://edu.csdn.net/course/detail/32506 Helm3(K8S 资源对象管理工具)博客专栏:https: ...
logstash 数据重复问题
logstash 将多个配置文件放在同一个目录中启用一个logstash 实例,logstash 默认会简单的将配置文件组装在一起,如果你的输出是一样的配置,你有几个配置文件就会有几次相同的输出,输出 ...
大数据日志分析系统-logstash
logstash简介 Logstash 是一个开源的数据收集引擎,它具有备实时数据传输能力.它可以统一过滤来自不同源的数据,并按照开发者的制定的规范输出到目的地. logstash-2.2.2的配置: ...

Logstash 使用http output处理数据

1. 前言

2. Http Output Plugin

2.1 介绍

2.2 配置

Logstash 使用http output处理数据相关推荐

最新文章

热门文章