大数据系统开发综合实践(淘宝双11大数据批处理分析系统、NBA 、淘宝购物大数据实时展示、Spark GraphX)
cqupt || xmu——大数据系统开发综合实践
代码放在了GitHub上 链接
task01 大数据批处理系统
淘宝双11大数据批处理分析系统
task02 大数据查询分析计算系统
NBA 统计大数据查询分析计算系统
task03 大数据流计算系统
淘宝购物大数据实时展示系统
task04 大数据图计算系统
Spark GraphX 分析伴生网络
大数据系统开发综合实践(淘宝双11大数据批处理分析系统、NBA 、淘宝购物大数据实时展示、Spark GraphX)相关推荐
- 大数据系统开发综合实践（一）
又来了新的任务,需要学习一些大数据开发的相关操作,其实之前学过一些内容,但是当初没有好好学,现在还得重新学习起来. 大数据系统中各种模块的作用 HDFS:分布式文件系统,用来存储数据 YARN:用于资 ...
- Spark大数据-基于Hive和Spark的淘宝双11数据分析与预测
基于Hive和Spark的淘宝双11数据分析与预测 1.系统和环境要求(版本仅供参考): Linux: centos7 MySQL: 5.7.16 Hadoop: 2.7.1 Hive: 1.2.1 ...
- 大数据-11-案例演习-淘宝双11数据分析与预测
主要摘自 http://dblab.xmu.edu.cn/post/8116/ 案例简介 Spark课程实验案例:淘宝双11数据分析与预测课程案例,由厦门大学数据库实验室团队开发,旨在满足全国高校大数 ...
- 淘宝双11大数据分析（数据准备篇）
文章目录 前言 数据内容分析 `user_log.csv`文件内容含义 `train.csv` 和 `test.csv` 文件内容含义 数据上传到Linux系统并解压 数据集的预处理 文件信息截取 导 ...
- 淘宝双11大数据分析（Hive 分析篇-上）
文章目录 前言 当前环境 用聚合函数 count() 计算出表内有多少条数据 查出 user_id 不重复的数据的条数 查询不重复的数据有多少条(为了排除客户刷单的情况) 关键字条件查询分析 查询双1 ...
- 淘宝双11数据分析与预测
淘宝双11数据分析与预测 一. 案例简介 Spark课程实验案例:淘宝双11数据分析与预测课程案例,由厦门大学数据库实验室团队开发,旨在满足全国高校大数据教学对实验案例的迫切需求.本案例涉及数据预处理 ...
- 淘宝双11数据分析与预测汇总
国庆假期留在学校做了一下林子雨博士的大数据实验--淘宝双11数据分析与预测,虽然教程写得很详细,但自己还是踩了很多坑,现在记录下来,希望给别人一点帮助. 淘宝双11数据分析与预测实验链接:http:/ ...
- 淘宝双11数据分析与预测--“坑点”汇总
国庆假期留在学校做了一下林子雨博士的大数据实验--淘宝双11数据分析与预测,虽然教程写得很详细,但自己还是踩了很多坑,现在记录下来,希望给别人一点帮助. 淘宝双11数据分析与预测实验连接:点击这里 问 ...
- 《大数据系统基础》实践项目期末答辩顺利举行 校企联手打造精品实践项目见真章
近期,由清华大学研究生院和数据科学研究院(以下简称:数据院)共同开设的清华大学大数据能力提升项目<大数据系统基础>实践项目期末答辩在清华大学六号教学楼顺利举行.20位企业导师作为评审参与答 ...
最新文章
- 软件测试：黑盒白盒与动态静态之间有必然联系吗
- CUDA简易安装教程
- Focal Loss 的Pytorch
- keras从入门到放弃(二）多项回归
- html怎么一段时间把网页背景更换_复盛螺杆压缩机故障怎么维修？
- 夺命雷公狗---微信开发39----微信语言识别接口1
- java 常见bug_java常见bug
- 【ArcGIS Pro微课1000例】0003：ArcGIS pro 2.5加载OSGB点云模型案例教程
- “预习-上课-复习”：达摩院类人学习新范式探索
- Linux的chattr与lsattr命令详解（重点-i参数，锁定文件，禁止修改文件）
- css div 绝对定位到底部不居中问题
- Wordvec_句子相似度
- 如何让WPS像word一样使用快捷键打开MathType
- sqlserver 无法远程连接到服务器,解决SQLServer远程连接失败的问题
- C语言中函数的基本知识
- WARNING: AllowZoneDrifting is enabled.
- OpenCV求解数独
- 计算机视觉之目标检测(object detection)《1》
- 将单元格中的内容拆分成多列/行
- centos7配置端口转发