java怎么安装manven_Canal——Canal-Adapter源码在IDEA部署运行

一、下载源码

我这里用的是canal-1.1.4版本

源码结构

client-adapter项目就是本次要部署运行的

源码导入到IDEA中的结构如下：

二、安装配置

找到manven模块中有root的那个模块，然后点击install进行安装

待安装完成后，会在对应的项目的target目录下产生相应的运行包，如果不想在开发工具中运行的话，直接拷贝对应的包即可。

修改launcher的application.yml配置

es adapter配置

在launcher项目中的配置文件下创建es目录并加入所需要同步的配置文件

三、运行调试

配置完毕后，直接运行launcher这个springBoot项目即可，也就是运行CanalAdapterApplication这个类就可以了。

当看日志提示启动成功后就代表启动成功了！

四、测试验证

增量同步测试跟canal-adapter安装包部署运行一样，这里主要介绍及测试一下条件同步和全量同步功能，即etl功能。

launcher项目是一个spring boot项目，在其中的rest包下有一个controller类(CommonRest.java)，里面提供了一些接口，其中一个用于全量同步数据的接口

canal全量同步

我们按照注释的内容发送一个http请求即可：

canal_db1.yml为es目录下的配置文件，运行后出现以下提示信息，就可以让canal_db1.yml配置的数据表的所有数据全同步到es中了

在kibana中查看数据是否已经生成：

canal条件同步

如果想执行从某一个时刻的数据同步，在上面的测试URL后加上对应的参数就可以了

其参数由es的配置项决定的，以下截图的配置文件中的etlCondition：

五、修改源码

以下代码增加了从索引模板中获取mapping的处理逻辑：

重新编译打包：

在项目的target目录下，会生成编译后的包，我这里修改的是es相关的，路径如下：

更新到canal-adapter的plugin目录下，重新服务就可以了。

java怎么安装manven_Canal——Canal-Adapter源码在IDEA部署运行相关推荐

java计算机毕业设计游泳馆信息管理系统源码+数据库+系统+部署+lw文档
java计算机毕业设计游泳馆信息管理系统源码+数据库+系统+部署+lw文档 java计算机毕业设计游泳馆信息管理系统源码+数据库+系统+部署+lw文档本源码技术栈: 项目架构:B/S架构开发语言: ...
java计算机毕业设计政务大厅管理系统源码+数据库+系统+部署+lw文档
java计算机毕业设计政务大厅管理系统源码+数据库+系统+部署+lw文档 java计算机毕业设计政务大厅管理系统源码+数据库+系统+部署+lw文档本源码技术栈: 项目架构:B/S架构开发语言:Ja ...
[附源码]java+ssm计算机毕业设计基于Java通识课程管理系统v87xr(源码+程序+数据库+部署)
项目运行项目含有源码(见文末).文档.程序.数据库.配套开发软件.软件安装教程环境配置: Jdk1.8 + Tomcat7.0 + Mysql + HBuilderX(Webstorm也行)+ E ...
[附源码]java+ssm计算机毕业设计基于java的报刊杂志征订管理系统xdrwa(源码+程序+数据库+部署)
项目运行项目含有源码(见文末).文档.程序.数据库.配套开发软件.软件安装教程环境配置: Jdk1.8 + Tomcat7.0 + Mysql + HBuilderX(Webstorm也行)+ E ...
Java Swing Mysql实现图书管理系统源码附带高清视频指导运行教程
Java swing实现的图书管理系统实现的功能有管理员登录管理图书类别.信息.用户管理.新订书籍等等. 基础开发环境开发工具:Eclipse(MyEclipse.idea.sts) 我这里用的是 ...
java微信公众平台接口封装源码_微信公众号对接第三方平台（全网发布 java）源码含 jar...
[实例简介] 微信公众号对接第三方平台(全网发布 java)源码+jar 里面有完成全网发布的源码直接tomcat部署运行和所需的jar 具体对接流程,关注我们的博客 http://blog.csdn ...
Java餐厅点餐系统uniapp源码带安装教程
一套Java开发的餐厅点餐半成品系统,前端使用uniapp编写,经过本地测试,这套系统还有一些功能没完善好,有能力的朋友可以在这套系统基础上进行二次开发. 技术架构后端技术框架:springboot ...
Redhat linux 安装 gcc编译器,Gcc源码包，rpm包安装方法!
点评:分两种情况: 先看这篇转过来的文章,俺老孙懒得写了. Linux软件安装通用思路在Linux系统中,软件安装程序比较纷繁复杂,不过最常见的有两种: 1)一种是软件的源代码,您需要自己动手编译它 ...
基于java SpringBoot的医院门诊管理系统源码和论文
医院门诊信息管理系统是一个基于Internet的应用系统,它是一个面对当前的医院门诊管理工作基本还处于手工和半信息自动化处理状态而应运而生的一个基于Internet的一个信息自动化的系统,整个系统从符 ...

java怎么安装manven_Canal——Canal-Adapter源码在IDEA部署运行

java怎么安装manven_Canal——Canal-Adapter源码在IDEA部署运行相关推荐

最新文章

热门文章