etl工程师是从事系统编程、数据库编程与设计,要掌握各种常用的编程语言的专业技术人员。也叫数据库工程师。

工作内容:

海量数据的ETL开发,抽取成各种数据需求。

参与数据仓库架构的设计及开发 。

参与数据仓库ETL流程优化及解决ETL相关技术问题。

熟悉主流数据库技术,如oracle、Sql server、PostgeSQL等。

精通etl架构,有一定的etl开发经验,了解日常作业的部署和调度。

会数据etl开发工具,如Datastage,Congos,Kettle等。

ETL中三个字母分别代表的是ExtractTransformLoad,即抽取、转化、加载。

  • 数据抽取:从源数据系统抽取目的数据系统需求的数据;
  • 数据转换:将从源数据源获取的数据按照业务需求,转换成目的数据源要求的形式,并对错误、不一致的数据进行清洗和加工;
  • 数据加载:将转换后的数据装载到目的数据源。

ETL工程师_个人职责相关推荐

  1. etlgr是什么服务器_什么是ETL,ETL工程师的的主要工作职责是什么?

    谢邀. 我个人平时工作有40%的工作是ETL,主要是从各种系统里面用不同的语言和方法抓数据,以满足各种商业场景需求. 简单来说,如果把数据分析类比成做菜,ETL相当于备菜. 备菜不是个容易的事, 首先 ...

  2. ETL工程师的岗位详情岗位职责

    ETL工程师 [岗位要求] 1.熟悉掌握linux常用命令awk.sed等,会使用写shell脚本 2.熟悉sql常用语句,建表语句等 3.office熟练,西路清晰,沟通能力强 4.做事细心,态度端 ...

  3. python开发和大数据开发工程师_大数据开发工程师的岗位职责

    大数据开发工程师负责该领域的业务需求讨论,完成技术方案及数据开发.下面是学习啦小编整理的大数据开发工程师的岗位职责. 大数据开发工程师的岗位职责1 职责: 1.负责所分管团队的团队建设和日常管理工作; ...

  4. 数据仓库etl编程_莱牛教育:浅谈大数据ETL大数据工程师所需具备的能力

    ​ 在当今这个数据大爆炸的时代,海量的数据存储.处理.分析.管理成为各大企业在数字经济时代的新的挑战.大数据工程师作为对海量数据进行处理.分析的专业型技能人才,对各大企业迅速转型到数字经济领域都起到非 ...

  5. 高级运维工程师证书_高级运维工程师的具体职责说明

    高级系统运维工程师需要负责服务器的安装部署.上线发布.日常监控.故障处理.数据备份.日志分析.性能优化等工作.以下是学习啦小编整理的高级运维工程师的具体职责说明. 高级运维工程师的具体职责说明1 职责 ...

  6. python图像算法工程师_图像算法工程师的岗位职责

    图像算法工程师需要负责公司业务中货架图像识别模型学习,维护,更新等工作.下面是学习啦小编为您精心整理的图像算法工程师的岗位职责. 图像算法工程师的岗位职责1 职责: 1.根据公司产品和业务需求,进行相 ...

  7. python运维开发工程师_运维开发工程师的工作职责精选

    运维开发工程师需要负责优化.改进运维支撑系统,并保证其安全高效稳定的运行.下面是学习啦小编为您精心整理的运维开发工程师的工作职责精选. 运维开发工程师的工作职责精选1 职责: 1. 负责主导运维平台的 ...

  8. python大数据运维工程师待遇_大数据运维工程师的工作职责

    大数据需要负责公司产品的技术支持.安装调试.客户使用培训及相关硬件的安装调试.下面是学习啦小编为您精心整理的大数据运维工程师的工作职责. 大数据运维工程师的工作职责1 职责: 1.负责和参与公司大数据 ...

  9. java中级工程师所需的技能_一个Java工程师的岗位职责及所需的知识技能!

    据调查显示,世界上有大约900万的Java开发人员,作为即将成为这900万大军中的一员,你知道去企业后你的工作职责是什么吗?作为一名Java开发人员需要掌握哪些知识技能呢?这些可都关系到你的成长和利益 ...

最新文章

  1. .NET连接ORACLE数据库的方法
  2. evc4工程移植vs.net2005所碰到的问题积累
  3. uva 10127——ones
  4. 基于c++的音乐播放器(1)
  5. ktm390蓝牙连接安卓_车机蓝牙连接常见问题说明
  6. ios传感器应用开发最佳实践_同构 javascript 应用开发的最佳实践(Four)
  7. spring 事物的级别_Spring 事务中的隔离级别有哪几种?
  8. Vue2.0进阶组件篇2 解析饿了么(spinner组件)
  9. Python是个什么鬼?为什么这么多人都在学Python?
  10. 主梁弹性模量计算_混凝土松弛系数的实用计算
  11. Vscode 快速打开setting.json
  12. 2019年软件QA与测试八大关键词
  13. DZ插件制作简易入门教程(自学手记)第一篇
  14. 河北职高计算机专业高考分数线,河北职高对口本科大学录取分数线
  15. Begin...end
  16. Linux安全篇-iptables
  17. 基于java的项目总结
  18. 诈骗防范案例提醒:【韵⁢⁢达】您好, 因您用韵⁢⁢达收过12次,现复⁢制囗⁢令
  19. win7旗舰版 Internet协议版本4的设置方法 --转载
  20. 区块链技术 英文(BlockChain Terminal)简称BCT ——区块链终端

热门文章

  1. 2021最新 腾讯云从零搭建PHP运行环境
  2. 字典排序什么意思_字典序排序
  3. linux安装pycharm报错:Unable to detect graphics environment
  4. Mac快速安装HomeBrew和HomeBrew-Cask方法
  5. kafka踩坑、实践篇
  6. 关于STM32中SPI硬件的NSS配置
  7. OC--Foundation框架
  8. 脚本---perl与python的比较
  9. Probabilistic Embeddings with Laplacian Graph Priors
  10. 小 200 行 Python 代码做了一个换脸程序