众所周知，大数据技术正被广泛应用于电商、交通、工业、医疗等行业，大数据工程师已成为互联网行业炙手可热的岗位。另一方面，像月薪 20k 以上的大数据工程师，技能要求就很高，除了要熟练各种大数据框架，还要会搭建系统架构，解决实际业务问题等。今天给大家推荐一个福利——廖雪峰最新研磨的实战宝典《如何将大数据开发做到优秀》首次开放了！

内容出自开课吧 vip 课程“大数据高级开发实战班”，为帮助大家特殊时期职场走得更加顺畅，现决定将这套价值 788元 的体系化学习宝典免费送给粉丝朋友。

如果你是刚转行大数据不久的Java、PHP等程序员或入行新人，这套学习宝典能帮你迅速摆脱工作困扰，巩固掌握优秀工程师的必会技能：

• 缺乏工作经验，想短时期内接触学习大数据开发项目；

• 接触不到核心技术，不懂底层源码，不会搭建系统架构，提升太难；

• 业务逻辑欠缺，想丰富实战经验，进大厂冲击高薪。

一、高薪大数据工程师必备——实战项目经验

本部分选取当下应用最广的企业项目，基于大厂脱敏数据，以 Spark 为主要核心框架，覆盖 Kafka、Hbase 及 Hadoop 等大数据生态技术，帮你 360 度探索大数据在出行领域的技术落地，了解大数据架构的设计奥秘，增加简历含金量。

01

大数据背景下的智慧出行

通过学习，可帮你了解大数据背景下的出行业务，熟知大数据技术点的使用以及出行方面的业务逻辑。

（项目可视化展示）

1、智慧出行项目概况及车辆轨迹数据处理

技术关键词：

Flume、Kafka、SparkStreaming、Hbase、Redis、SpringBoot 等

主要内容：

• 智慧出行大数据项目概述；

• 项目需求及架构选型；

• 开发项目模块构建；

• 数据回放功能的实现；

• 轨迹监控模块的开发。

斩获技能：

掌握 SparkStreaming 消费 Kafka 自主维护 Offset 的方式。

2、看大数据如何帮你抉择最合适的上车地点

技术关键词：

SparkCore 、SparkSQL、Hbase 、Phoenix 、SpringBoot

主要内容：

• 虚拟车站的概念详情；

• 虚拟车站的计算方式；

• 使用代码实现虚拟车站的计算统计。

斩获技能：

• 熟知常见的地图属性；

• 掌握虚拟车站的计算方式；

• 掌握API的使用等。

3、智慧出行项目展示及应用 + 大数据技术答疑

技术关键词：

Maxwell、Mysql、SparkStreaming、 Kafka、SparkSQL等

主要内容：

• 智慧出行的其他功能模块开发；

• Spark任务的监控以及任务的调优；

• 业务数据库实时同步功能实现。

斩获技能：

• 有一定的架构认知能力；

• 掌握常见的大数据技术架构；

• 能熟练驾驭使用其他大数据框架等。

01

二、优秀大数据工程师必会——扎实技能储备

本部分对 Spark、Hadoop 等主流框架做了专项讲解，可帮大家查漏补缺，巩固各技术点，这些都是高薪工程师必知必会技能，对你日后进阶提升或是进大厂都会有不少帮助。

02

1、基于 Spark 源码自定义数据源开发

• 如何解决 HBase 热点问题

• 如何基于源码自定义开发 HBase 的数据源

• 如何在数据源处进行列剪枝和谓词下推

2、Hadoop 分布式文件系统之 HDFS 架构

• HDFS 是如何实现有状态的高可用架构

• HDFS 是如何从架构上解决内存受限问题

• 深入理解 HDFS 的架构演变

• 揭秘 HDFS 如何能支撑亿级流量

3、实时计算技术之 SparkStreaming

• Spark Streaming 应用场景、原理分析

• Spark Streaming 集成 Kafka 讲解

• Spark Streaming 如何实现 Exactly-Once 语义

02

适合谁学？

1. 拥有 0～1 年的工作经验，想转行大数据方向；

2. 有 1 年以上工作经验，从事搜索引擎、推荐系统、大数据开发、云计算等相关工作；

3. 在 Spark、Flume、Hbase、Kafka 等框架底层源码理解欠缺，想要在实际项目开发中提高系统性能的开发人员。

限时福利

1. 训练营原价 ￥788，本公众号粉丝限时 5 天免费 （仅限前200名）。

2. 本次报名的学员免费赠送一份配套源码教程。

如果你想真正提高大数据开发专业技能，跟上大数据时代发展，并想在大数据领域长久深耕，这套理论结合实战的价值788元的不可多得的实用宝典，都会是你很好的学习提升机会，本公号粉丝仅限前200名 免费~

廖雪峰价值 788元 的大数据进阶宝典

限时5天 0元领取

本公众号仅限前200名

PS : 点击阅读原文，可以快速预约，预约成功后别忘记添加助理，方便领取干货内容!莫做收藏党！

最后，对于想要系统提升的Java、PHP、Python、嵌入式等1-5年编程开发经验的人，开课吧还邀请廖雪峰老师团队打造了《大数据高级开发实战班》付费课程，感兴趣的小伙伴也可扫码咨询哦~