如果我们把整个大数据平台看做是一间厨房,那么大数据的相关岗位都是厨房里的什么职位呢?

看起来蛮有趣的一个比喻:数据科学家是行政总厨,全面负责食品的制作和品控;数据架构师是厨师长,负责厨房的规划和运营;数据分析师像是一位炤头主管,负责烹饪出可口的菜肴,保证出品质量;那么数据工程师更像是一位砧板主管,负责切配各式菜肴及刻花保证菜品基础原料的标准供应。

这篇我们重点说说数据工程师和数据分析师两个岗位的职能。

首先说数据工程师。如果我们把大数据平台看做一间厨房,作为“砧板主管”的数据工程师的工作职能更偏重于数据消费前的开发工作,目的是服务好数据分析师。数据工程师的具体工作职能如下:

1,偏重于数据架构、计算、数据存储、数据流、数据清洗等工作,为数据分析师(或数据科学家)准备可供使用的数据(食材);
2,负责设计、创建储存数据的数据库(冷冻柜),确保供应数据的优质和新鲜,要求熟悉现有的数据库技术和数据管理系统。
3,将数据整理成标准格式(封装),达到降低存储成本、优化查询效率及备份方案等目标;
4,必备技能包括开发能力(食材创新)和大规模的数据处理能力(批量食材处理)。
5,未来发展方向,可以考虑数据架构师(厨师长)、数据挖掘工程师等方向发展。

接着说数据分析师。如果我们大数据平台看做一间厨房,作为“炤头主管”的数据分析师直接决定了食品口味、品相及营养等,这份工作职能就是消费好数据,让客户或领导对数据分析的结果满意。数据工程师的具体工作职能如下:

1,偏重于解决业务问题,使用各种分析方法(烹饪方法)处理已经清洗过的数据(食材)做成高质量的数据报告(美味菜品),得到对实际应用场景(食客)有意义(味道)和有价值(营养)的数据结论(口碑)。
2,负责从数据(食材)中找出能解决业务问题(食客口味)的关键点,最后用可视化软件将结论展现给客户或高层领导。
4,必备技能包括了解业务(食客习惯),懂得常用的分析方法,能够跨部门沟通。
5,未来发展方向,可以考虑数据产品经理、数据挖掘工程师、业务经理等方向发展。

数据科学家,是数据工程师和数据分析师的共同发展方向。因为,数据科学家需要同时具备数据工程师和数据分析师两种职业技能。

数据工程师数据分析师这两个岗位有什么区别?有没有发展前景?相关推荐

  1. 数据架构师、数据分析师、数据工程师哪个工资更高?

    01 数据架构师 数据架构师在业务环境中进行监督,他们将业务需求转化为技术需求,并为业务提供适当的原则和标准.他负责设计和可视化企业数据框架和管理.因此,该框架解释了计划中的流程,指定.允许.开发.获 ...

  2. 数据工程师VS数据分析师VS数据科学家

    参考链接: (1)什么是数据工程师,数据工程师主要是做什么的? https://blog.csdn.net/zhinengxuexi/article/details/89072028 (2)如何快速成 ...

  3. 数据分析师,BI开发人员,数据科学家和数据工程师的角色

    数据分析师,BI开发人员,数据科学家和数据工程师的角色 本文由Saeed Aghabozorgi和Polong Lin共同撰写后,本人翻译而来,原文在此: https://cognitiveclass ...

  4. 大数据工程师需要哪些基础知识?

    大数据是眼下非常时髦的技术名词,与此同时自然也催生出了一些与大数据处理相关的职业,通过对数据的挖掘分析来影响企业的商业决策. 这群人在国外被叫做数据科学家(Data Scientist),这个头衔最早 ...

  5. 大数据工程师职业发展以及薪酬一览

    大数据是眼下非常时髦的技术名词,与此同时自然也催生出了一些与大数据处理相关的职业,通过对数据的挖掘分析来影响企业的商业决策. 这群人在国外被叫做数据科学家(Data Scientist),这个头衔最早 ...

  6. 【专访英特尔高级首席工程师戴金权】普通数据工程师,如何玩转深度学习?

    记者 | 白羽 几乎每周,人工智能深度学习,总会在某个领域有新的技术突破,新的亮眼成果出来. 不过,这些最新的突破和成果,更多还是在深度学习的各大社区流动,更多是被顶尖教授.学者所掌握和应用,对于普通 ...

  7. 独家 | 一份数据工程师必备的学习资源,干货满满(附链接)

    作者:PRANAV DAR 翻译:张玲 校对:车前子 本文约6500字,建议阅读15分钟. 本文首先详细介绍了数据工程的职责.与数据科学家之间的差别以及其不同的工作角色,然后重点列出了很多与核心技能相 ...

  8. 当我说要做大数据工程师时他们都笑我,直到三个月后……转

    GitChat 作者:Fickr孫啟誠  原文: 三个月大数据研发学习计划实战解析  关注微信公众号:「GitChat 技术杂谈」 一本正经的讲技术 [不要错过文末彩蛋] 申明: 本文旨在为普通程序员 ...

  9. 深度解析数据分析、大数据工程师和数据科学家的区别

    数据越来越多的影响并塑造着那些我们每天都要交互的系统.不管是你使用Siri,google搜索,还是浏览facebook的好友动态,你都在消费者数据分析的结果.我们赋予了数据如此大的转变的能力,也难怪近 ...

最新文章

  1. 对比丨深度学习库大排名:TensorFlow、Keras名列一二,Sonnet增长最快
  2. 3星|《财经》年刊:各行业专家学者的现状分析与短期预测
  3. qt vs 不出来dos窗口_VS嵌入QT后,建立QT工程后printf和cout无效,无法产生控制台应用程序窗口,需设置工程属性...
  4. 转!!java中File的delete()方法删除文件失败的原因
  5. emmc linux.格式化参数,SD卡, EMMC固化 ,关于bootloader linux
  6. 点击左边tab右侧跟着变化_通过代码判断阿里巴巴国际站右侧P4P产品的位置
  7. Filter_快速入门
  8. HTML+CSS+JS实现 ❤️制作loading动画效果❤️
  9. 详细分析如何利用python批量爬取百度图片
  10. 如何修改SQL Server 2000身份验证模式和系统管理员
  11. Jsp之我遇到过的中文乱码问题和解决方法
  12. 5_1 大理石在哪儿(UVa10474)排序与查找
  13. 美团饿了么接连宕机 只因天气太热
  14. java24小时运行一次_使用crontab每分钟执行一次脚本,每24小时执行一次脚本[关闭]...
  15. 栈的应用c语言计算器思路,请问,用c语言做一个计算器 包括+-*/()的运算 用栈 该怎么做...
  16. 《运算放大器权威指南》读书笔记(二)
  17. Redis集群搭建(单设备,多设备)
  18. 使用aws跑深度学习_11. 附录 - 11.4. 使用AWS运行代码 - 《动手学深度学习》 - 书栈网 · BookStack...
  19. windows打印机 学习
  20. centos7的LAMP多机LAP+MYSQL

热门文章

  1. “5G 太耗电,关掉它!”
  2. 史上最简单的composer使用教程
  3. 初次办流量卡,怎么才能区分是不是物联卡?
  4. 社群营销运营分类包括哪些内容
  5. 写毕业论文常用网站(本人常用)
  6. 如何制作nc文件(小插曲)
  7. ISO27001-2013学习笔记
  8. iscsi实现网络磁盘共享以及LVM方式共享拓展
  9. Java获取IP地址的多种方法
  10. pyqt5 安装pyqt ERROR: Could not install packages due to an OSError: [Errno 13] Permission denied:解决方案