ETL工程师_个人职责
etl工程师是从事系统编程、数据库编程与设计,要掌握各种常用的编程语言的专业技术人员。也叫数据库工程师。
工作内容:
海量数据的ETL开发,抽取成各种数据需求。
参与数据仓库架构的设计及开发 。
参与数据仓库ETL流程优化及解决ETL相关技术问题。
熟悉主流数据库技术,如oracle、Sql server、PostgeSQL等。
精通etl架构,有一定的etl开发经验,了解日常作业的部署和调度。
会数据etl开发工具,如Datastage,Congos,Kettle等。
ETL中三个字母分别代表的是Extract
、Transform
、Load
,即抽取、转化、加载。
数据抽取:从源数据系统抽取目的数据系统需求的数据;
数据转换:将从源数据源获取的数据按照业务需求,转换成目的数据源要求的形式,并对错误、不一致的数据进行清洗和加工;
数据加载:将转换后的数据装载到目的数据源。
ETL工程师_个人职责相关推荐
- etlgr是什么服务器_什么是ETL,ETL工程师的的主要工作职责是什么?
谢邀. 我个人平时工作有40%的工作是ETL,主要是从各种系统里面用不同的语言和方法抓数据,以满足各种商业场景需求. 简单来说,如果把数据分析类比成做菜,ETL相当于备菜. 备菜不是个容易的事, 首先 ...
- ETL工程师的岗位详情岗位职责
ETL工程师 [岗位要求] 1.熟悉掌握linux常用命令awk.sed等,会使用写shell脚本 2.熟悉sql常用语句,建表语句等 3.office熟练,西路清晰,沟通能力强 4.做事细心,态度端 ...
- python开发和大数据开发工程师_大数据开发工程师的岗位职责
大数据开发工程师负责该领域的业务需求讨论,完成技术方案及数据开发.下面是学习啦小编整理的大数据开发工程师的岗位职责. 大数据开发工程师的岗位职责1 职责: 1.负责所分管团队的团队建设和日常管理工作; ...
- 数据仓库etl编程_莱牛教育:浅谈大数据ETL大数据工程师所需具备的能力
在当今这个数据大爆炸的时代,海量的数据存储.处理.分析.管理成为各大企业在数字经济时代的新的挑战.大数据工程师作为对海量数据进行处理.分析的专业型技能人才,对各大企业迅速转型到数字经济领域都起到非 ...
- 高级运维工程师证书_高级运维工程师的具体职责说明
高级系统运维工程师需要负责服务器的安装部署.上线发布.日常监控.故障处理.数据备份.日志分析.性能优化等工作.以下是学习啦小编整理的高级运维工程师的具体职责说明. 高级运维工程师的具体职责说明1 职责 ...
- python图像算法工程师_图像算法工程师的岗位职责
图像算法工程师需要负责公司业务中货架图像识别模型学习,维护,更新等工作.下面是学习啦小编为您精心整理的图像算法工程师的岗位职责. 图像算法工程师的岗位职责1 职责: 1.根据公司产品和业务需求,进行相 ...
- python运维开发工程师_运维开发工程师的工作职责精选
运维开发工程师需要负责优化.改进运维支撑系统,并保证其安全高效稳定的运行.下面是学习啦小编为您精心整理的运维开发工程师的工作职责精选. 运维开发工程师的工作职责精选1 职责: 1. 负责主导运维平台的 ...
- python大数据运维工程师待遇_大数据运维工程师的工作职责
大数据需要负责公司产品的技术支持.安装调试.客户使用培训及相关硬件的安装调试.下面是学习啦小编为您精心整理的大数据运维工程师的工作职责. 大数据运维工程师的工作职责1 职责: 1.负责和参与公司大数据 ...
- java中级工程师所需的技能_一个Java工程师的岗位职责及所需的知识技能!
据调查显示,世界上有大约900万的Java开发人员,作为即将成为这900万大军中的一员,你知道去企业后你的工作职责是什么吗?作为一名Java开发人员需要掌握哪些知识技能呢?这些可都关系到你的成长和利益 ...
最新文章
- .NET连接ORACLE数据库的方法
- evc4工程移植vs.net2005所碰到的问题积累
- uva 10127——ones
- 基于c++的音乐播放器(1)
- ktm390蓝牙连接安卓_车机蓝牙连接常见问题说明
- ios传感器应用开发最佳实践_同构 javascript 应用开发的最佳实践(Four)
- spring 事物的级别_Spring 事务中的隔离级别有哪几种?
- Vue2.0进阶组件篇2 解析饿了么(spinner组件)
- Python是个什么鬼?为什么这么多人都在学Python?
- 主梁弹性模量计算_混凝土松弛系数的实用计算
- Vscode 快速打开setting.json
- 2019年软件QA与测试八大关键词
- DZ插件制作简易入门教程(自学手记)第一篇
- 河北职高计算机专业高考分数线,河北职高对口本科大学录取分数线
- Begin...end
- Linux安全篇-iptables
- 基于java的项目总结
- 诈骗防范案例提醒:【韵⁢⁢达】您好, 因您用韵⁢⁢达收过12次,现复⁢制囗⁢令
- win7旗舰版 Internet协议版本4的设置方法 --转载
- 区块链技术 英文(BlockChain Terminal)简称BCT ——区块链终端