ETL工程师主要工作内容

ETL中三个字母分别代表的是Extract、Transform、Load，即抽取、转化、加载。数据抽取：从源数据系统抽取目的数据系统需求的数据；数据转换：将从源数据源获取的数据按照业务需求，转换成目的数据源要求的形式，并对错误、不一致的数据进行清洗和加工；数据加载：将转换后的数据装载到目的数据源。
ETL原本是作为构建数据仓库的一个环节，负责将分布的、异构数据源中的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转换、集成，最后加载到数据仓库或数据集市中，成为联机分析处理、数据挖掘的基础。

1、负责数据采集、数据模型设计和ETL的开发

2、参与集团数据仓库系统建设工作

3、参与调查客户需求及数据调研，数据对接方案设计

4、根据客户需求设计数据库模型，并使用工具开发报表

5、撰写系统开发各阶段文档

ETL工程师主要工作内容相关推荐

大数据工程师岗位工作内容是什么
如果你是大数据新人,或者想转行进入大数据领域,或者职业生涯上存在一些疑惑,大数据相关工作岗位很多,有大数据分析师.大数据挖掘算法工程师.大数据专家.大数据总监.大数据研究员.大数据科学家等等.接下来我 ...
运维工程师的工作内容有哪些？能详细列举一下吗？
新年新打算,很多小伙伴都打算在2022年从事运维工作.但他们不清楚运维工程师的工作内容主要有哪些?希望有朋友可以详细列举一下,可以详细介绍一下.这里我们就一起来聊聊吧! 首先,对于运维人员来说,核心任 ...
java工程师详细工作内容_java工程师主要工作内容
很多朋友想知道Java工程师工作内容是什么,下面就让我们来看看吧. java工程师的工作内容 Java工程师通过使用Java开发工具去完成产品的一系列开发测试.程序设计.bug测试工作.主要负责服务器 ...
在非互联网公司？！算法工程师的工作内容及心得建议
[导语]网上已经有很多在互联网公司工作的算法工程师的日常了,那么小编便来说说在咨询公司,身为算法工程师,工作是一种什么样子的体验,同时也为对咨询感兴趣的小伙伴指明点方向. 具体内容: 工作内容详解对 ...
[data engineering] （一）数据工程师的工作内容以及需要的软硬实力
工作内容 The role of a Data Engineer includes: Gathering data from disparate sources. Integrating data i ...
网络工程师的工作内容
关于成为网络工程师后具体的工作内容的问题 2006-8-2 陆续接到一些询问,说成为网络工程师后,具体的工作内容是哪些?因为不了解工作的内容,初出道者很难在互联网行业内获得一份工作 ,因为没有工作,所 ...
测试工程师的工作内容是什么？
软件测试工程师的一天是怎么度过的呢?其实可以按照时间轴进行分为三个阶段: 去上班的阶段工作中的阶段下班后的阶段清楚了一天时间的阶段划分,那么就可以知道一天的时间如何分配,以及自己的工作内容是什么 ...
嵌入式硬件开发工程师的工作内容
嵌入式硬件开发工程师主要编写嵌入式系统硬件总体方案和详细方案,要求理解嵌入式系统架构,有一定的C语言基础,熟悉ARM.PROTEL设计软件,有四层板开发经验. 成为优秀的嵌入式硬件开发工程师需具备以下 ...
软件测试工程师具体工作内容是什么?
使用各种测试技术和方法来测试和发现软件中存在的软件缺陷.测试技术主要分为黑盒测试和白盒测试两大类.其中黑盒测试技术主要有等价类划分法.边界值法.因果图法.状态图法.测试大纲法以及各类典型的软件故障模型 ...

ETL工程师主要工作内容

ETL工程师主要工作内容相关推荐

最新文章

热门文章