ETL工具(数据同步)

一、研究了kettle

Kettle最早是一个开源的ETL工具

前置条件，kettle是一个jar包项目，依赖jdk。安装kettle需要安装好jdk环境

二、下载安装

1、源代码下载：

GitHub - pentaho/pentaho-kettle: Pentaho Data Integration ( ETL ) a.k.a KettlePentaho Data Integration ( ETL ) a.k.a Kettle. Contribute to pentaho/pentaho-kettle development by creating an account on GitHub.https://github.com/pentaho/pentaho-kettle/

kettle工具下载：

Pentaho from Hitachi Vantara - Browse Files at SourceForge.netEnd to end data integration and analytics platformhttps://sourceforge.net/projects/pentaho/files/2、目录说明

Spoon.bat: 图形界面方式启动作业和转换设计器。
Pan.bat: 命令行方式执行转换。
Kitchen.bat: 命令行方式执行作业。
Carte.bat: 启动web服务，用于 Kettle 的远程运行或集群运行。
Encr.bat: 密码加密

三、数据复制使用步骤

1、打开Spoon.bat文件

2、资源库

①选择开发方案，选择资源库方式

文件->新建->转换打开转换操作界面

② 工具 -> 向导 -> 创建数据库向导

输入数据库连接1

然后设置JDBC地址

第一次连接mysql需要下载mysql驱动，下载好驱动，放到你的spoon解压目录中的:data-integration/lib/里面，重启spoon

ETL工具(数据同步)相关推荐

ETL工具(数据同步) 二
kettle使用掌握之后,还需要掌握在linux下的定时执行的策略一.kettle使用感觉较为方便虽然kettle自带调度任务.但是前提是需要保持kettle打开.并且作业处在运行状态.不太适合用 ...
ETL的数据同步工具调研(持续更新中)
扯白了,数据同步工具就是"导数据 "的名称社区响应国内使用情况(以前程无忧为参考) SQOOP 更新缓慢,对于hbase2.x以上版本使用时需要老版本的jar包 9页 Dat ...
Kettle-开源的ETL工具集-实现SqlServer到Mysql表的数据同步并部署在Windows服务器上
场景 kettle 中文名称叫水壶,该项目的主程序员MATT希望把各种数据放到一个壶里,然后以一种指定的格式流出.是一款由纯Java编写的ETL工具,绿色无需安装,数据抽取高效稳定(数据迁移工具). ...
etl数据抽取工具_数据同步工具ETL、ELT傻傻分不清楚？3分钟看懂两者区别
什么是数据同步工具(ETL.ELT) 数据同步工具ETL或者ELT的作用是将业务系统的数据经过抽取.清洗转换之后加载到数据仓库的过程,目的是将企业中的分散.零乱.标准不统一的数据整合到一起,为企业的决 ...
数据提取、转换和加载 - ETL工具
ETL,Extraction-Transformation-Loading的缩写,中文名称为数据提取.转换和加载. ETL工具有:OWB(Oracle Warehouse Builder).ODI(O ...
数据库增量同步/ETL工具
数据同步与订阅: 比较推荐的是阿里的Canal.Zendesk的Maxwell.以及来自社区的Python-Mysql-Replication ETL工具 kettle Kettle 是一款国外开源的 ...
数据同步工具Sqoop
大数据Hadoop之--数据同步工具Sqoop Sqoop基本原理及常用方法 1 概述 Apache Sqoop(SQL-to-Hadoop)项目旨在协助RDBMS(Relational Databa ...
数据同步工具的研究（实时）
数据同步工具的研究(实时同步): FlinkCDC.Canal.Maxwell.Debezium --2023年01月17日 --Yahui Di 1. 常用CDC方案比较 2. FlinkCDC F ...
常用的数据集成ETL工具有哪些？
一.Informatica Informatica是全球领先的数据管理软件提供商.在如下 Gartner魔力象限位于领导者地位:数据集成工具魔力象限.数据质量工具魔力象限.元数据管理解决方案魔力象限. ...

ETL工具(数据同步)

GitHub - pentaho/pentaho-kettle: Pentaho Data Integration ( ETL ) a.k.a KettlePentaho Data Integration ( ETL ) a.k.a Kettle. Contribute to pentaho/pentaho-kettle development by creating an account on GitHub.https://github.com/pentaho/pentaho-kettle/

ETL工具(数据同步)相关推荐

最新文章

热门文章