炼数成金-Spark大数据平台

1：Spark生态和安装部署
什么是Spark
Spark有什么
安装部署
Spark安装简介
Spark的源码编译
Spark Standalone安装
Spark Standalone HA安装
Spark工具
Spark交互式工具spark-shell
Spark应用程序部署工具spark-submit

2：Spark编程模型和解析
Spark的编程模型
RDD的特点、操作、依赖关系
缓存策略
广播变量和累加器
Spark编程环境搭建
Spark编程实例

3：Spark运行架构和解析
Spark的运行架构
基本术语
运行架构（DAGScheduler、TaskSeduler、Task、容错性、推测机制、数据本地性）
Spark on Standalone运行过程
Spark on YARN 运行过程
Spark实例演示
Spark on Standalone实例演示
Spark on YARN实例演示

4：不得不说的hive
hive的运行架构
hive的安装
hive的实例演示
shark的简介

5：SparkSQL原理和实践
Spark的运行架构
Catalyst
sqlontext
hiveContext
ThriftServer和CLI
ThriftServer
CLI
SparkSQL的实例演示和编程
spark-shell实例演示
spark-sql实例演示
SparkSQL的编程

6：SparkStreaming原理和实践
SparkStreaming原理
SparkStreaming的原理
SparkStreaming的运行方式
DStream的特点和操作
SparkStreaming实例演示
网络数据演示
文本实例演示
Window操作演示

7：MLlib入门
什么是机器学习
MLlib的架构
Mllib实例演示
聚类算法演示
推荐系统演示

8：GraphX入门
图论基础
GraphX的架构
GraphX实例演示
图的基本操作
PageRank演示

9：Spark运维（上）
Spark On YARN
Spark On Docker

10：Spark运维（下）
Spark配置
history server
job server
Spark的监控
Spark UI监控
Ganglia 监控

11：Spark调优
序化
压缩
数据倾斜等等
实例演示

12：scala on Spark
spark常用的scala基础
如何阅读spark源代码
如何构建spark项目

13：Spark编程
RDD的编程
Spark综合实例（SparkSQL+sparkMlib+redis+R）

14：Spark源码研读
Spark源码总体介绍
SparkCore源码细解
Spark Examples介绍

15：杂谈
Spark相关项目
BlinkDB简介
SparkR的安装和实例
Techyon

Spark的优秀网站、博客、牛人介绍

resource:https://www.iteblog.com/archives/1295

炼数成金-Spark大数据平台相关推荐

python数据内容_炼数成金：Python数据分析内容分享
相信看这篇文章的每一位朋友,都有过努力学习炼数成金:Python数据分析这个课程.提升自我的想法, 可是学习是一件非常反人性的事情,大多数人都是晚上想想千条路,早上醒来走原路. 也相信很 ...
炼数成金优惠码 C183
最近想学点大数据的分析,找到了炼数成金这个网站,感觉很不错,报名了一个课程,最近炼数成金正在搞活动,使用优惠码立即减一半学费,分享出我的优惠码所有课程都可以使用!!!!!!!!!! 优惠码:C183
炼数成金R七种武器之金融数据分析quantmod
更多资源进群: 377215114 炼数成金<数据分析,展现与R语言>课程上线已经有18个月,至今已经培训了近千名学员,对在中国推动开源数据分析软件起到了重要作用.应广大受众的要求,我们在 ...
炼数成金数据分析课程---8、数据清洗
炼数成金数据分析课程---8.数据清洗一.总结一句话总结: 数据分析课程的实质是:介绍库中的函数:介绍py的3个常用的数据分析库(numpy,pandas,scipy)的函数的操作实例:其实找几 ...
炼数成金数据分析课程---7、数据分析简介
炼数成金数据分析课程---7.数据分析简介一.总结一句话总结: 我终于知道他们是要做一些什么样的工作了 1.我们导入了数据,是否可以立即进行数据分析? 需要对数据做预处理:比如去除脏数据这些 2. ...
【备忘】2017年最新炼数成金机器读心术之神经网络与深度学习视频教程
课程大纲: 第1课跌宕起伏70年:神经网络发展概述:最简单的神经元仿生:单层感知器. 第2课线性神经网络,BP神经网络,基于梯度下降的各种学习算法:BP神经网络应用:信用识别:为什么BP网络丌能支 ...
炼数成金数据分析课程---16、机器学习中的分类算法（交叉内容，后面要重点看）...
炼数成金数据分析课程---16.机器学习中的分类算法(交叉内容,后面要重点看) 一.总结一句话总结: 大纲+实例快速学习法主要讲解常用分类算法(如Knn.决策树.贝叶斯分类器等)的原理及pytho ...
炼数成金数据分析课程---17、机器学习聚类算法（后面要重点看）
炼数成金数据分析课程---17.机器学习聚类算法(后面要重点看) 一.总结一句话总结: 大纲+实例快速学习法主要讲解常用聚类算法(比如K-means等)的原理及python代码实现:后面学习聚类的 ...
炼数成金数据分析课程---13、回归分析
炼数成金数据分析课程---13.回归分析一.总结一句话总结: 大纲+实例快速学习法主要内容是回归分析的原理及编程实现 1.回归分析是什么? 通过建立模型来研究变量之间相互关系的密切程度.结构状态 ...
炼数成金邀请码：YY96
dataguru 炼数成金邀请码 YY96 学费减免 dataguru 炼数成精邀请码 YY96 学费减免炼数成金邀请码,使用邀请码报名课程可以减免50%固定学费哦! http://edu.d ...

炼数成金-Spark大数据平台

炼数成金-Spark大数据平台相关推荐

最新文章

热门文章