大数据职业发展规划和技能

我自己做大数据已经很多年了，想整理一个文章为以后想踏入大数据行业的新人指明一个方向。

大数据的岗位可以分为三大类：大数据系统研发、大数据应用开发和大数据分析。大数据薪资的多少，一是取决于自己的技术实力，还有就是自己的机遇。

我个人是从传统行业dba转型到大数据分析的，首先有一点，就是你要有基础的数据查询管理知识，先把关系型数据库弄清楚，再自己动手搭建大数据平台，比如：搭建一个cdh6.3，不要怕费力，一旦你搭建成功了，这门技术就是你的了，永远也忘不了。以后我会写一个文章专门写如何搭建cdh6.3大数据集群。

接下来就是大数据分析，hive SQL的使用，语法、海量数据下如何提高hive SQL的效率，这不是简单几句话能写清楚的。

然后就是非关系型数据库比如hbase等的操作和熟悉程度。

kafka消息缓存的处理和优化。

实时消息处理，离线数仓和实时数仓也是必备的技能，你得有这个工作经历。

大数据系统开发和应用，scala、spark等是必备的技能了，一定要熟悉这些。

我本人是在新能源汽车行业做大数据分析，主要是解决车云平台和电池安全分析和预测。有相同经历的同学可以私信我与我沟通交流。

由于大数据知识结构和体系太过繁杂，我未来会逐一由浅入深专门写文章来描述。

大数据职业发展规划和技能相关推荐

大数据工程师干不过35岁？大数据职业发展前景如何？
大数据工程师干不过35吗?事实上,大数据工程师现在十分吃香,而且工作经验越高越抢手,不存在"干不过35岁"的说法.如果大家真的掌握了大数据技术,其职业发展前景是完全不用担心的. 大 ...
重磅！“十四五”大数据产业发展规划发布！
工信部日前发布<"十四五"大数据产业发展规划>,提出到2025年,我国大数据产业测算规模突破3万亿元,年均复合增长率保持25%左右, 十四五一般指中华人民共和国国民经济 ...
一图读懂｜《“十四五”大数据产业发展规划》
来源:工业和信息化部官方网站本文多图,建议阅读5分钟工业和信息化部发布了<"十四五"大数据产业发展规划>. 近日,工业和信息化部发布了<"十四五&q ...
【图解+全文】工信部关于印发“十四五”大数据产业发展规划的通知
省时查报告-专业.及时.全面的行研报告库省时查方案-专业.及时.全面的营销策划方案库大家好,我是文文(微信号:sscbg2020),今天给大家分享微播易和中国美妆网工业和信息化部近日发布的< ...
你的旧船票能否搭上这艘巨轮？——解读近5年大数据产业发展规划
文|水手本文出自:知乎专栏<帆软数据应用研究院>--数据干货&资讯集中地! 文章导读一.大数据产业现状和挑战二.2020年发展目标三.实现目标的关键举措四.<规划& ...
2021年广东省大数据技术与应用技能大赛真题测试数据
2021年广东省大数据技术与应用技能大赛真题测试数据前面两章讲过关于2021年广东省专业技能大赛--大数据技术与应用真题题目及解析: 2021年广东省专业技能大赛--大数据技术与应用真题题目及 ...
敲黑板！《大数据产业发展规划（2016-2020年）》要点解读
近年来,随着互联网.云计算.大数据.物联网等新兴技术的飞速发展,全球数据总量出现爆炸式增长,数据正在成为政府和企业越来越重要的基础性战略资源,可谓21世纪的"钻石矿".面对大数据时 ...
python大数据工程师薪资待遇_大数据岗位就业薪资具体多少？大数据职业发展的2大方向和5个职位...
大数据发展非常火热的时候,很多想加入大数据行业的小伙伴,犹豫和困惑最大的问题就是大数据岗位薪资情况,下面就给大家分析分析. 数据开发在互联网岗位薪酬中,排名第二 1.职位量大增,投递量增长更快从 2 ...
大数据职业理解_【职业大数据】3大数据职业职位描述及其职业要求
原标题:[职业大数据]3大数据职业职位描述及其职业要求 1. 数据工程师职位描述:处理大量数据的公司,并管理数据通道.这意味着,当需要时,你要能确保有效地从数据源收集和检索数据,并进行清理和预处理. ...

大数据职业发展规划和技能

大数据职业发展规划和技能相关推荐

最新文章

热门文章