【大数据入门核心技术-Spark】（二）Spark核心模块

一、Spark核心模块

1、SparkCore

2、Spark SQL

3、Spark Streaming

4、Spark MLlib

5、资源调度器(Cluster Manager)

【大数据入门核心技术-Spark】（二）Spark核心模块相关推荐

【大数据入门核心技术-Tez】（三）Tez与Hive整合
一.准备工作 1.Hadoop和Hive安装 [大数据入门核心技术-Hadoop](五)Hadoop3.2.1非高可用集群搭建 [大数据入门核心技术-Hadoop](六)Hadoop3.2.1高可用集 ...
【大数据入门核心技术-Flume】（四）使用Flume采集数据到Hive
[大数据入门核心技术-Kafka](七)Ka 录一.准备工作 1.Hadoop环境安装 2.Flume安装部署二.采集数据到HDFS 1.配置任务文件 2.启动传输 3.查看是否同步成功三.常见 ...
大数据入门：Flink和Spark简单对比
在大数据实时处理框架上,Spark和Flink都有着强大的数据处理能力,因此也就常常被人拿来做对比.Spark和Flink在处理数据上都能实现流式计算.实时分析,那么两者之间有何异同呢?下面我们来做一 ...
大数据入门之分布式计算框架Spark(3) -- Spark Streaming
1.概述 Spark Streaming将不同的数据源,经过处理之后,结果输出到外部文件系统. 特点:低延时:能从错误中高效地恢复过来:能够运行在成百上千的节点上:能够将批处理.机器学习.图计算等子框 ...
大数据入门之分布式计算框架Spark(2) -- Spark SQL
1.Spark SQL概述一个运行在Spark上执行sql的处理框架,可以用来处理结构化的数据[外部数据源(访问hive.json.parquet等文件的数据)]. Spark SQL提供了SQL的 ...
【大数据入门核心技术-基本概念】（一）大数据相关基本概念
目录 1.大数据的4v特征 2.大数据的影响 3.大数据的两大核心技术
【大数据入门核心技术-Ambari】（一）Ambari介绍
一.什么是Ambari Apache Ambari是一种基于Web的工具,支持Apache Hadoop集群的供应.管理和监控.Ambari已支持大多数Hadoop组件,包括HDFS.MapReduc ...
【大数据入门核心技术-Tez】（二）Tez安装
目录一.准备工作 1.Hadoop和Hive安装 2.Tez包下载二.安装 1.解压
【大数据入门核心技术-Hbase】（二）HBase数据模型
目录一.NameSpace 二.Region 三.Row 四.Column 五.Cell 六.RowKey 七.Store 八.TimeStamp <

【大数据入门核心技术-Spark】（二）Spark核心模块

【大数据入门核心技术-Spark】（二）Spark核心模块相关推荐

最新文章

热门文章