ES logstash7.4.2 mysql 数据同步

jar包
D:\logstash-7.4.2\logstash-core\lib\jars\mysql-connector-java-5.1.48.jar

这个jar包必须放到\logstash-7.4.2\logstash-core\lib\jars\目录下不然会报错找不到驱动目录

配置文件
D:\logstash-7.4.2\config\mysql.conf

input{jdbc{jdbc_driver_library=>"D:\logstash-7.4.2\logstash-core\lib\jars\mysql-connector-java-5.1.48.jar"jdbc_driver_class=>"com.mysql.jdbc.Driver"jdbc_connection_string=>"jdbc:mysql://127.0.0.1:3306/blog"jdbc_user=>"root"jdbc_password=>"root"statement=>"SELECT * FROM t_blog"}
}
output{elasticsearch{hosts=>['localhost:9200']index=>"blog"document_id=>"%{id}"}
}

DDL

CREATE TABLE `t_blog` (`id` int(11) NOT NULL AUTO_INCREMENT,`content` varchar(255) COLLATE utf8_bin DEFAULT NULL,`update_time` datetime DEFAULT NULL,PRIMARY KEY (`id`)
) ENGINE=MyISAM AUTO_INCREMENT=3 DEFAULT CHARSET=utf8 COLLATE=utf8_bin;

ES logstash7.4.2 mysql 数据同步相关推荐

ES和MySQL数据同步（简略版）
一.在docker配置elasticsearch和kibana 1.注:elasticsearch和kibana的版本要一致 elesticsearch --拉取镜像 docker pull dock ...
es与mysql数据同步 (go-mysql-es)
es与mysql数据同步 (go-mysql-es) 简介 go-mysql-elasticsearch是一款开源的高性能的Mysql数据同步ES的工具,其由go语言开发,编译及使用非常简单.go- ...
MYSQL数据同步到ＥＳ７
** 概述 ** 现在的项目数据量越来越大,全文检索功能使用场景也越来越普遍. 而我们一般的生产数据是在mysql,或其它一些数据库, 我们的产品数据就是mysql,而又要使用全文检索, 所以要把my ...
liunx下通过Canal将MySQL数据同步到Elasticsearch
liunx下通过Canal将MySQL数据同步到Elasticsearch 一.canal背景信息 Canal是Github中开源的ETL(Extract Transform Load)软件 cana ...
Mysql 数据同步到 Elasticsearch
阅读目录说明 1 同步原理 2 插件 logstash-input-jdbc go-mysql-elasticsearch elasticsearch-jdbc 3 logstash-input-j ...
通过Canal将MySQL数据同步到elasticsearch (mysql8+canal1.1.5+canal-adapter1.1.5+elasticsearch6.7.0+ik6.8.6)
经过几天的的深入研究(网上的文档很多,但是坑不少,少一个配置可能就走入了死胡同),特此将我部署的过程意义道来(参考文档通过Canal将MySQL数据同步到阿里云Elasticsearch - 检索分析 ...
RabbitMQ实现ElasticSearch和MySQL数据同步
RabbitMQ实现ElasticSearch和MySQL数据同步提示:写完文章后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录 RabbitMQ实现ElasticSearch和MySQ ...
MySql数据同步（双机热备）已正式应用上平台
经过一个多月的测试MYSQL的双机同步数据还是很不错的. 在家庭ADSL的4M的带宽下,有10个人在应用此网络,MYSQL数据同步还是照样正常,我想在正常的平台环境肯定更即时,效率更高! 但同时需要注 ...
MySQL数据同步的一个很初级运用
PHP程序员基本上都离不开MySQL,今天转载一篇关于MySQL数据同步的一个很初级运用. 今天由于工作需要,配置了一下主从同步,这里记录一下配置过程,以备查阅. 事先度娘了一番,主从同步需要保证主从 ...

ES logstash7.4.2 mysql 数据同步

ES logstash7.4.2 mysql 数据同步相关推荐

最新文章

热门文章