四十二、ETL工具Kettle的转换步骤

1. ETL工具Kettle的转换步骤

1.1 Kettle转换步骤的具体内容：

字符串处理
1. 字符串的拆分
2. 字符串的替换
行列变换
其他转换步骤
1. 闭合距离
2. XSL转换
3. 数值范围

2 字符串的处理

2.1 字符串的拆分

按位置拆分字符串，完成对字符串的剪辑
按标志字符一列拆分成多列或多行
字符串的合并：
1. 多列合并为一列
2. 多行合并为一行

2.2 字符串的替换

值映射
使用正则表达式

2.3 字符串的其他转换

使用常量替换一个字段的值。
使用一个字段替换另一个字段的值。
字符串操作
1. 保留/移除字符串里的数字
2. 补充指定长度的字符川
3. 移去字符串里的特殊字符

3 行列变换及排序和排重

3.1 行转列（反正规化Denormaliser）

1. 功能：把多行的窄表转换成多列的宽表
2. 前提：需要事先按照分组字段排序
3. 特点：规范，便于扩展

3.2 列转行（正规化Normaliser）

把多列的宽表转换成多行的窄表
特点：方便查询

3.3 排序和排重

排序：使用快速排序算法对数据完成排序
排重
1. Unique Row: 需要事先排序
2. Unique Row（Hash）：不排序、速度快、占内存

四十二、ETL工具Kettle的转换步骤相关推荐

四十、ETL工具的输入步骤
1. ETL工具Kettle的输入步骤 1.1 Kettle输入步骤主要分为以下几类: 生成记录和自定义常量. 获取系统信息输入方式 2 生成记录和自定义常量 2.1 Kettle组件生成记录生成 ...
四十一、ETL工具kettle输出步骤
1. ETL工具Kettle的输出步骤 Kettle输入步骤主要分为以下几类: 数据库输出表输出更新.删除.插入和更新文件输出文本文件输出 XML输出 Excel文件输出其他报表和应用 2 ...
四十三、ETL工具的流程和应用
1. Kettle的流程步骤和应用步骤 Kettle应用步骤的作用:用来转换提供的一些工具类步骤.具体的内容包括: NULL值处理如何启动其他程序日志功能文件处理功能 2. 如何过滤数据在Ke ...
开源ETL工具kettle系列
开源ETL工具kettle系列之常见问题摘要:本文主要介绍使用kettle设计一些ETL任务时一些常见问题,这些问题大部分都不在官方FAQ上,你可以在kettle的论坛上找到一些问题的答案 1. J ...
开源ETL工具kettle系列之常见问题
摘要:本文主要介绍使用kettle设计一些ETL任务时一些常见问题,这些问题大部分都不在官方FAQ上,你可以在kettle的论坛上找到一些问题的答案 1. Join 我得到A 数据流(不管是基于文件或 ...
OpenCV学习笔记（四十一）——再看基础数据结构core OpenCV学习笔记（四十二）——Mat数据操作之普通青年、文艺青年、暴力青年 OpenCV学习笔记（四十三）——存取像素值操作汇总co
OpenCV学习笔记(四十一)--再看基础数据结构core 记得我在OpenCV学习笔记(四)--新版本的数据结构core里面讲过新版本的数据结构了,可是我再看这部分的时候,我发现我当时实在是看得太马 ...
maya批量命名插件_教你玩转MAYA的四十二精华造诣（第一期）
最近在整理文档时发现我收藏了一篇关于MAYA应用技巧的文章,突然有兴趣看了看,结果发现老版本MAYA中的某些内容很多已经无法应用于新版本.我又上网查了一下,结果发现网上好多帖子和我收藏的这篇内容基本一 ...
【Visual C++】游戏开发笔记四十二浅墨DirectX教程之十游戏输入控制利器 DirectInput专场
分享一下我老师大神的人工智能教程!零基础,通俗易懂!http://blog.csdn.net/jiangjunshow 也欢迎大家转载本篇文章.分享知识,造福人民,实现我们中华民族伟大复兴! 本系列文 ...
多麦克风做拾音的波束_乱侃外设篇四十二：一浪更比一浪强！HyperX Quadcast S 声浪加强版麦克风浅评...
原标题:乱侃外设篇四十二:一浪更比一浪强!HyperX Quadcast S 声浪加强版麦克风浅评乱侃外设篇四十二:一浪更比一浪强!HyperX Quadcast S 声浪加强版麦克风浅评 20 ...

四十二、ETL工具Kettle的转换步骤

1. ETL工具Kettle的转换步骤

1.1 Kettle转换步骤的具体内容：

2 字符串的处理

2.1 字符串的拆分

2.2 字符串的替换

2.3 字符串的其他转换

3 行列变换及排序和排重

3.1 行转列（反正规化Denormaliser）

3.2 列转行（正规化Normaliser）

3.3 排序和排重

四十二、ETL工具Kettle的转换步骤相关推荐

最新文章

热门文章