原标题:黄美灵的Spark ML机器学习实战

本课程主要讲解基于Spark 2.x的ML,ML是相比MLlib更高级的机器学习库,相比MLlib更加高效、快捷;ML实现了常用的机器学习,如:聚类、分类、回归等算法。本课拒绝枯燥的讲述,将循序渐进从Spark2.x的基础知识开始,然后再透彻讲解各个算法的理论、详细展示Spark实现,最后均会通过实例进行解析实战,帮助大家真正从理论到实践全面掌握Spark ML分布式机器学习。

通过该课程的学习,同学们可以全面掌握Spark ML机器学习,进而能够在实际工作中进行ML的应用开发和定制开发。且该课程优异毕业生均可获得老师内推机会,职位:数据挖掘工程师,就职企业:久邦数码、唯品会、腾讯等。掌握技术,高薪就业,课程等待你的加入!

第一课 Spark ML基础入门

1、Spark介绍

2、Spark ML介绍

3、课程的基础环境

4、Spark SparkSession

5、Spark Datasets操作

6、Datasets操作的代码实操

第二课 Spark ML Pipelines(ML管道)

1、Pipelines的主要概念

2、Pipelines实例讲解

3、ML操作的代码实操

4、使用 ML Pipeline 构建机器学习工作流案例展示

5、实例的代码实操

第三课 Spark ML数学基础

1、ML矩阵向量计算

2、分类效果评估指标及ML实现详解

3、交叉-验证方法及ML实现详解

4、实例的代码实操

第四课 Spark ML特征的提取、转换和选择

1、特征的提取及ML实现详解

2、特征的转换及ML实现详解

3、特征的选择及ML实现详解

4、实例的代码实操

第五课 Spark ML线性回归/逻辑回归算法

1、线性回归算法

2、逻辑回归算法

3、ML回归算法参数详解

4、ML实例

5、实例的代码实操

第六课 Spark ML决策树/随机森林/GBDT算法

1、决策树算法

2、随机森林算法

3、GDBT算法

4、ML树模型参数详解

5、ML实例

6、实例的代码实操

第七课 Spark ML KMeans聚类算法

1、KMeans聚类算法

2、ML KMeans模型参数详解

3、ML实例

4、实例的代码实操

第八课 Spark ML LDA主题聚类算法

1、LDA主题聚类算法

2、ML LDA主题聚类模型参数详解

3、ML实例

4、实例的代码实操

第九课 Spark ML协同过滤推荐算法

1、协同过滤推荐算法

2、ML协同过滤分布式实现逻辑

3、ML协同过滤源码开发

4、实现实例

5、实例的代码实操

第十课 大型案例:基于Spark的推荐模型开发

1、案例背景

2、架构设计

3、数据准备

4、模型训练

5、模型预测

6、脚本封装

开课时间:本期课程将于3月25日开始。课程持续时间大约为12周。

课程基础:学习者需要有一些Spark/Scala/线性代数基础知识。

授课对象:对spark有兴趣,有志从事数据分析,数据挖掘工作方向的朋友

课程环境:Spark2.0, Spark2.1, Spark2.2

预期收获:

通过该课程的学习,同学们可以全面掌握Spark2.0 ML机器学习,进而能够在实际工作中进行ML的应用开发和定制开发。该课程优异毕业生均可获得老师内推机会,职位:数据挖掘工程师,就职企业:久邦数码、唯品会、腾讯等。

讲师简介:

黄美灵,Spark爱好者,现从事移动互联网的计算广告和数据变现工作,专注Spark机器学习在计算广告中的研究和实践。现著有:《Spark MLlib机器学习:算法、源码及实战详解》

CSDN博客专家:http://blog.csdn.net/sunbow0返回搜狐,查看更多

责任编辑:

spark 逻辑回归算法案例_黄美灵的Spark ML机器学习实战相关推荐

  1. 逻辑回归原理梳理_以python为工具 【Python机器学习系列(九)】

    逻辑回归原理梳理_以python为工具 [Python机器学习系列(九)] 文章目录 1.传统线性回归 2.引入sigmoid函数并复合 3. 代价函数 4.似然函数也可以 5. python梯度下降 ...

  2. sklearn分类器算法:逻辑回归及案例分析

    分类算法之逻辑回归 逻辑回归(Logistic Regression),简称LR.它的特点是能够是我们的特征输入集合转化为0和1这两类的概率.一般来说,回归不用在分类问题上,因为回归是连续型模型,而且 ...

  3. 逻辑回归算法c语言_逻辑回归算法背后的数学

    逻辑回归算法背后的数学 看完深蓝学院的机器学习公开课后,对于逻辑回归部分,打算写篇学习笔记记录总结一下,也和大家共同分享. 1 基本思能 逻辑回归(Logistic Regression)和线性回归( ...

  4. 线性回归和逻辑回归的区别_Spark实现线性回归与逻辑回归算法

    一.线性回归算法简介 线性回归(Linear Regression)是利用线性回归方程的最小平方函数对一个或多个自变量和因变量之间关系进行建模的一种回归分析.这种函数是一个或多个称为回归系数的模型参数 ...

  5. 机器学习笔记(10)——逻辑回归算法优化之随机梯度下降法

    在上一篇文章<机器学习笔记(9)--深入理解逻辑回归算法及其Python实现>中,详细学习了逻辑回归算法的分类原理和使用梯度下降法来最小化损失函数的数学推导过程,从而拟合出分类函数的参数θ ...

  6. Spark MLlib回归算法------线性回归、逻辑回归、SVM和ALS

    Spark MLlib回归算法------线性回归.逻辑回归.SVM和ALS 1.线性回归: (1)模型的建立: 回归正则化方法(Lasso,Ridge和ElasticNet)在高维和数据集变量之间多 ...

  7. 机器学习 逻辑回归算法应用案例

    机器学习 逻辑回归算法应用案例 时间:2020.09.12 出处:https://www.kesci.com/home/project/5bfe39b3954d6e0010681cd1 注明:初学逻辑 ...

  8. spark java 逻辑回归_逻辑回归分类技术分享,使用Java和Spark区分垃圾邮件

    原标题:逻辑回归分类技术分享,使用Java和Spark区分垃圾邮件 由于最近的工作原因,小鸟很久没给大家分享技术了.今天小鸟就给大家介绍一种比较火的机器学习算法,逻辑回归分类算法. 回归是一种监督式学 ...

  9. python实现逻辑回归算法_逻辑回归算法的实现

    前言 在之前的学习中,我们已经学习了逻辑回归算法的具体数学原理及其简单的推导过程,现在,我们可以用python实现逻辑回归的算法了. 环境 python3.6 jupyter-notebook 绘制数 ...

最新文章

  1. 【学无止境】ajax长循环,反向ajax初体会,不用ws实现即时聊天
  2. java文件读写操作大全
  3. es6生成器_ES6生成器
  4. 985毕业,3年大数据经验,面试阿里腾讯失败,只因做不好报表
  5. Pytorch——回归问题
  6. Python实现温度转换
  7. 技术的好文章和烂文章
  8. 【WPF扁平化界面设计】
  9. 【目标检测】|数据增强 Copy-Paste
  10. 明尼苏达大学双城分校计算机科学,UMN的Computer Science Engineering「明尼苏达大学双城分校计算机科学与工程系」...
  11. 支付宝APP支付-Android+springboot搭建后端
  12. SEO: 使用 rel=canonical 为类似网页或重复网页指定权威网页
  13. win10使用administrator登录却仍然没权限
  14. csr8670--sink工程的大致工作流程分析(以speaker为例)一
  15. iOS开发之Crash分析,以及收集
  16. Python——第五天Beer
  17. [转]自定义Drawable实现灵动的红鲤鱼动画(上篇)
  18. java服务器如何群发消息,java TCP编程简单实现一个消息群发功能
  19. Scrapy糗事百科爬虫实战代码分析
  20. 几种边缘检测算子的比较Roberts,Sobel,Prewitt,LOG,Canny

热门文章

  1. MPB:上海巴斯德所崔杰组-RNA病毒组与生物信息学分析
  2. react的路由切换动画
  3. Android 增量编译总结
  4. ArcGIS API 3.29之加载高德地图、百度地图、天地图和谷歌地图
  5. java中response.setHeader()
  6. DIV+CSS建设网页简单的6个步骤
  7. 你的年货买齐了吗?2023最全年货清单列表
  8. 防火墙策略梳理思路及前沿想法
  9. 五十步笑百步翻译软件测试,“禹、稷当平世”“五十步笑百步”阅读答案及翻译...
  10. Dell服务器通电自启动