数据同步工具—sqoop 2.x
sqoop 2.x
在上一节讲sqoop 的时候，提到过Sqoop的1.x 和 2.x 的版本差异比较大，所以我们今天来看一下sqoop 2.x ，需要注意的是1.99算是2.x版本的。
sqoop2比sqoop1的改进
- 引入sqoop server，集中化管理connector等
- 多种访问方式：CLI,Web UI，REST API
- 引入基于角色 的安全机制
基本架构如下
1.x 的架构如图
我们看到主要就是有了一个server
功能对比如下
安装配置
这里的安装和上一节没太大差别，所以我们就不描述那么细了，就直接解压安装就行了，这里的1.99 的版本就是我们今天介绍的2.x
数据同步工具—sqoop 2.x相关推荐
- 数据同步工具Sqoop
大数据Hadoop之--数据同步工具Sqoop Sqoop基本原理及常用方法 1 概述 Apache Sqoop(SQL-to-Hadoop)项目旨在协助RDBMS(Relational Databa ...
- ETL的数据同步工具调研(持续更新中)
扯白了,数据同步工具就是"导数据 "的 名称 社区响应 国内使用情况(以前程无忧为参考) SQOOP 更新缓慢,对于hbase2.x以上版本使用时需要老版本的jar包 9页 Dat ...
- Linux的rsync远程数据同步工具
Rsync(remote synchronize) 是一个远程数据同步工具,可以使用"Rsync算法"同步本地和远程主机之间的文件. rsync的好处是只同步两个文件不同的部分,相 ...
- etl数据抽取工具_数据同步工具ETL、ELT傻傻分不清楚？3分钟看懂两者区别
什么是数据同步工具(ETL.ELT) 数据同步工具ETL或者ELT的作用是将业务系统的数据经过抽取.清洗转换之后加载到数据仓库的过程,目的是将企业中的分散.零乱.标准不统一的数据整合到一起,为企业的决 ...
- fox pro删除单条数据_Mac文件夹数据同步工具——Sync Folders Pro
Mac版同步文件夹Pro(文件夹数据同步工具)分享给大家!Mac版同步文件夹Pro是一种功能强大的文件夹数据同步工具,可帮助您同步两一个文件夹的内容,包括任何子文件夹.使用文件夹同步软件,允许您在任一 ...
- DataX离线数据同步工具/平台
DataX离线数据同步工具/平台 DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL.SQL Server.Oracle.PostgreSQL.HDFS.Hive.O ...
- 分享改进 高性能数据同步工具(一)
题外:在博文索引中暂时列出了开源的计划一览,虫子开源的目的是希望能有更多的交流,部分软件可能小得连开源协议的认证价值都没有.不管程序有多小多简单,用心把一个完整的设计思路.实现过程以及测试结果展现给大 ...
- canal - 数据同步工具
一.应用场景 在前面Echarts - 实现图表显示中,我们使用了服务调用(统计表中的信息通过调用用户模块服务来获取)获取统计信息,这样耦合度高,效率相对较低,目前有另一种方法,通过实时同步数据库表的 ...
- 高效数据同步工具DataX的使用
一.DataX 简介 DataX 是阿里云 DataWorks 数据集成 的开源版本,主要就是用于实现数据间的离线同步. DataX 致力于实现包括关系型数据库(MySQL.Oracle 等).HDF ...
最新文章
- 基于OpenGL编写一个简易的2D渲染框架-03 渲染基本几何图形
- 将权限组件应用到新项目
- 一发工资就全部取出，会对银行流水有影响吗？
- Hive 元数据库表信息
- mysql 的标识符_MySQL查询或标识符在Jupyter中太长？
- PCB设计之：必知的PCB设计八大误区
- 苹果Mac一定要学会的快捷键
- 时间或许能改变那一切
- 行业精英解答十大游戏关卡设计问题
- 最速下降法python_算法最优化之最速下降法
- 新手小白如何做自媒体自媒体入门视频教程（3G教程）
- 一个技术工作者的四大核心价值理念
- python stdin stdout_Python子进程：给出stdin，读取stdout，然后给出更多stdin
- nginx部署访问phpadmin
- php去除英文和标点,php实现过滤中文标点符号及过滤英文标点符号的示例代码
- 185电缆的接法图解_三相电缆线的接法图解
- 测试微信号连接的开发的步骤
- WIn 10 企业版激活
- 【无标题sdasd】
- LWIP学习笔记---网际控制报文协议ICMP