本文转自https://blog.csdn.net/weixin_34318956/article/details/87302823

首先,工作本身没有好坏之分,只有门槛高低之别。大数据开发、大数据分析、大数据运维都围绕着大数据展开。如果我们把大数据去掉,就只剩下,开发,分析,运维。当然还有其它的工作,例如运营,产品,讲师,测试等。 加上了大数据,只是我们的工作内容,或者说是工作方式发生了变化。

大数据是传统行业,传统技术逐步发展的产物。但是并没有打破我们在传统行业的工作模式,和我们的一些基础知识的储备。革新的只有处理技术,工作手段。在这里我们更详细的说说大数据开发、大数据分析、大数据运维 的工作内容,已经门槛,不做好坏评价。

非大数据 开发,分析,运维干什么呢?

开发日常工作是干什么了 ? 围绕着产品经理,进行产品开发,升级,迭代。加班熬夜,赶进度。每日的工作就是编码,和产品沟通或者撕X,和测试沟通或者斯X,最终确保产品上线,保证产品正常使用,以及后续迭代升级。

分析日常工作是什么了?数据整理,制作报表,最后就是报告,会议,阐述结论,最后就是说服对方接受观点,的确很多时候,分析出来的结论,对方无法接受。

运维日常工作是什么了?最核心的就是监控,机器是否正常运转,资源是否够用,产品应用是否都正常,开发相关的工具,保证异常能够及时发现。

在介绍大数据相关的工作前我们先了解下大数据的处理流程

处理流程
我们在看看hadoop的大数据生态圈。当然大数据生态圈不是在只有hadoop。

生态圈
大数据开发的主要工作
开发数据收集工具,数据清洗和整理,开发数据应用;当然这些不是一个人去完成,都会落在各个团队中去完成。

完整这些工作需要哪些技能?从这些技能我们也能看出来大数据开发的主要工作,就是这些工具打交道。一门开发语言(java/python/c#/scala 等),大数据下的一些框架:MapReduce,Spark,Hdfs,Storm,Hbase,Zookeeper 等,只会其中的2到三项基本找份工作没有问题,如何进阶在这不详细讨论。我们来看图吧。

必备技能
大数据分析的主要工作
有大表哥,专门做各种报表。取数机器人,提取各种数据。当然也有做数据分类,特征提取等数据挖掘,机器学习等高等玩家。

这里一并概括了,大数据分析的主要工作是:基于现有的数据进行数据分析得出一个结论,最后进行商业决策。当然现实不是这样的。大多数人成了大表哥,取数机器人,高端玩家也不列外,挖出来的东西,在没有找到落地场景前,都是一坨一坨的。这里都只是调侃。

大数据分析需要哪些技能呢?我们不管具体的工作内容,看看我们每天要面对那些工具,工具是我们每天要接触的东西。 Excel,SPSS,SQL,数据库,R,Python 等。当然我们不用都会。

我们还是看图吧,看看数据分析师的能力体系:

分析师能力体系
在看看每个阶段需要的技能,分析师和开发的区别在于,核心在于处理数据和清洗数据,达到自己可用的状态。开发是收集数据和整理数据,让数据变得统一。

阶段能力对应图
大数据运维的工作
对大数据集群进行监控和维护升级,保障集群正常运行,从而保证 数据收集服务能正常运行,保证集群资源够用,监控集群资源消耗情况。

他们是职业背锅侠,也是一群默默无闻的伙伴。无论开发,还是分析,还是其它的岗位,都有在人前显摆的时候,我们的运维永远只能在人后做好保障。

我们来看看运维的能力体系吧:

运维能力体系
以上是我对这个问题的理解,有些调侃,但都想表达和传递一种正能量,每个行业,每个岗位都有其特定的属性和特点,既然选择了,就只顾风雨兼程,管它花开花落,最终中能到达理想的彼岸。

大数据开发、大数据分析、大数据运维主要工作各是什么?哪个好?相关推荐

  1. 大数据开发、大数据分析、大数据运维主要工作各是什么?哪个好?谢谢?

    首先,工作本身没有好坏之分,只有门槛高低之别.大数据开发.大数据分析.大数据运维都围绕着大数据展开.如果我们把大数据去掉,就只剩下,开发,分析,运维.当然还有其它的工作,例如运营,产品,讲师,测试等. ...

  2. 大数据数据收集数据困难_大数据架构、大数据开发与数据分析的区别

    是新朋友吗?记得先点蓝字关注我哦- 今日课程菜单 Java全栈开发 | Web前端+H5 大数据开发 | 数据分析  人工智能+Python | 人工智能+物联网 来源:小职(z_zhizuobiao ...

  3. 大数据开发和数据分析的区别

    大数据行业能细分为大数据开发.大数据分析.大数据架构师等等领域,每个领域都有自己不同的工作目的,今天小千就来给大家介绍一下大数据开发和大数据分析岗位的相同不同点,介绍完之后你再考虑哪一个适合你就去培训 ...

  4. 大数据架构、大数据开发与数据分析的区别

    大数据架构.大数据开发与数据分析的区别 大数据产业 顾名思义大数据是一个以数据为核心的产业.大数据产业生成流程从数据的生命周期的传导和演变上可分为这几个部分:数据收集.数据储存.数据建模.数据分析.数 ...

  5. 大数据开发就业:大数据开发有哪些岗位

    在大数据的发展当中,对相关专业人才的需求是在持续增长的,包括大数据开发.数据分析挖掘等不同的数据处理环节,都形成了相应的岗位体系,大家各自负责不同的环节,共同完成大数据处理任务.今天我们主要来讲讲大数 ...

  6. 大数据开发好还是大数据分析好?哪个薪资高?

    做大数据开发好还是大数据分析比较好一些?哪个薪资高? 零基础学习大数据开发,还是大数据分析?哪方面比较好? 今天我们来从技术角度和薪资角度全面进行分析,方便你的选择. 技术区别 在做选择之前,需要了解 ...

  7. 大数据开发及和大数据相关的技术

    在现如今,随着互联网技术飞速的发展,目前有不少朋友询问关于大数据方面的问题,比如什么是大数据开发啊,和大数据相关的技术是什么呢等问题,我们今天就浅谈一下大数据开发及和大数据相关的技术的问题. 首先,大 ...

  8. 2017年终总结(数据开发,数据分析)-忙乱

    2017年终总结(数据开发,数据分析)-忙乱 每次都会感慨时间过得真快,这一次尤其明显.不时有网友问到这一年都干嘛了,怎么一篇Blog都没有?的确很汗颜,一呢2017年的确忙碌了很多,精力偏少,深入思 ...

  9. linux云自动化运维,Liunx运维一线大神亲授 全新Linux云计算运维基础与Linux Shell自动化运维实战课程...

    Liunx运维一线大神亲授 全新Linux云计算运维基础与Linux Shell自动化运维实战课程 全新Linux云计算运维基础与Linux Shell自动化运维实战课程,由于国内一线大神亲自授课与教 ...

最新文章

  1. 星巴克和阿里“结婚”,这后面真的不简单
  2. Python学习之While语句小游戏
  3. [转载](热议)“我不伟大”,但可以让善良“春暖花开”
  4. 漫步微积分三十一——定积分的直观含义
  5. 火爆全网络!这个GitHub项目开源了!搞定目标检测、图像识别
  6. sublime开发php插件下载,SublimeText3 配置PHP开发插件
  7. 新鲜出炉--Struct2、Hibernate3、Spring3框架搭建实战
  8. Android 实现静默安装
  9. python是什么意思怎么读-python怎么读,python是什么意思
  10. 两台服务器ubuntu20.x 直接文件共享,文件挂载 nfs
  11. 清除SQLServer2008缓存
  12. 表格中文字如何设置上下居中
  13. 什么是BLOB URL,为什么要使用它?
  14. 卸载奇安信天擎,流氓软件
  15. 微信小程序模板消息测试- formId 的获取
  16. python分段函数编写程序_python分段函数如何编写?
  17. ETCD 一 什么是ETCD
  18. selenium之浏览器弹出新窗口并在新窗口操作
  19. node.js 组件_使用Node.js和TransloadIt构建用户头像组件
  20. 电池的寿命(c语言)

热门文章

  1. 微信投票html,飞速微信投票微信朋友圈投票程序
  2. delphi updown控件的使用
  3. 戴尔G2422HS 和 G2722HS 评测
  4. magical_spider远程采集方案
  5. iOS马甲包过审技巧汇总
  6. XH与PH排线的区别
  7. Robotic TMS(二):机器人辅助TMS治疗系统
  8. 计算机视觉三大顶会(CVPR、ICCV、ECCV)网址
  9. 理性的北方大学与物质的南方高校十大对抗(转载)
  10. 基于java校园排课系统设计与实现