电商用户行为分析大数据平台相关系列1-环境介绍

最近在自学Spark，看了一些书籍和视频，总是感觉无从下手。拿着一个想法总是无从下手。追其原因，主要是没有系统的学习和使用。对于IT，一切新技术都需要不断实践、不断动手。本着动手的原则，本人通过各种渠道找到一个电商用户行为分析平台，准备从头开始，跟着视频及文档从头完做起，直到完成该项目。
该系列博客主要记录自己的学习过程，顺带着当作笔记以供后续参考。如果有朋友看到该博客，觉得可以借鉴一些东西，也算是本人额外的收获。
本文主要介绍自己使用的软硬件情况。本人电脑16G内存，但是CPU是节能CPU，性能略差。具体环境如下：

测试环境，由3台虚机（Vmware），每台内存3G
操作系统：Centos7
软件：
a、jdk1.7
b、hadoop-2.5.0-cdh5.3.6
c、hive-0.13.1-cdh5.3.6.tar
d、scala-2.11.4
e、zookeeper-3.4.5-cdh5.3.6
f、kafka_2.9.2-0.8.1
g、flume-ng-1.5.0-cdh5.3.6
h、spark-1.5.1-bin-hadoop2.4

后续将陆续更新自己学习笔记，搭建部分只是按照先后顺序做了简单记录，如果大家有什么疑问，可以留言沟通或者直接百度。
再次申明，该系列只是本人学习过程记录，如果给大家造成什么困扰，请大家多多担待。

电商用户行为分析大数据平台相关系列1-环境介绍
电商用户行为分析大数据平台相关系列2-HADOOP环境搭建
电商用户行为分析大数据平台相关系列3-HIVE安装
电商用户行为分析大数据平台相关系列4-ZOOKEEPER安装
电商用户行为分析大数据平台相关系列5-KAFKA安装
电商用户行为分析大数据平台相关系列6-flume安装
电商用户行为分析大数据平台相关系列7-spark安装
电商用户行为分析大数据平台相关系列8-数据分析流程
电商用户行为分析大数据平台相关系列9-用户访问session的模块介绍
电商用户行为分析大数据平台相关系列10-基础数据结构分析

电商用户行为分析大数据平台相关系列1-环境介绍相关推荐

电商用户行为分析大数据平台
简介对电商用户行为: 访问行为购物行为广告点击进行复杂的分析结果辅助PM 数据分析师管理分析现有状况改进产品设计调整公司战略业务提升业绩营业额以及市场占有率提升技术简介业务模 ...
Spark项目之电商用户行为分析大数据平台之（三）大数据集群的搭建
Zookeeper集群搭建 http://www.cnblogs.com/qingyunzong/p/8619184.html Hadoop集群搭建 http://www.cnblogs.com/qi ...
Flink_大数据技术之电商用户行为分析
大数据技术之电商用户行为分析第1章项目整体介绍 1.1 电商的用户行为电商平台中的用户行为频繁且较复杂,系统上线运行一段时间后,可以收集到大量的用户行为数据,进而利用大数据技术进行深入挖掘和分析 ...
Spark项目实战—电商用户行为分析
文章目录一.[SparkCore篇]项目实战-电商用户行为分析前言:数据准备 1.数据规则如下: 2.详细字段说明: 3.样例类 (一)需求1:TOP10热门品类 1.需求说明 2.代码实现方案1 ...
数据分析实战(六)：英国电商用户行为分析
案例:英国电商用户行为数据分析 Part 1. 数据获取 1.1 数据集简介 https://archive.ics.uci.edu/ml/datasets/online+retail# 该数据集为英 ...
某电商用户行为分析-提升GMV
目录 1. 明确项目背景和需求项目目的: 分析思路: 2 数据探索(EDA) 2.1 数据集信息 2.2数据预览 2.2.1 new_user 2.2.2 age 2.2.3 sex 2.2.4 m ...
案例分析:大数据平台技术方案及案例(ppt)
大数据平台是为了计算,现今社会所产生的越来越大的数据量,以存储.运算.展现作为目的的平台.大数据技术是指从各种各样类型的数据中,快速获得有价值信息的能力.适用于大数据的技术,包括大规模并行处理(MPP ...
北京大数据培训 | 电商用户行为分析之实时流量统计
模块创建和数据准备在 UserBehaviorAnalysis 下新建一个 maven module 作为子项目 , 命名为NetworkFlowAnalysis.在这个子模块中 ...
大数据培训 | 电商用户行为分析之订单支付实时监控
在电商网站中,订单的支付作为直接与营销收入挂钩的一环,在业务流程中非常重要.对于订单而言,为了正确控制业务流程,也为了增加用户的支付意愿,网站一般会设置一个支付失效时间,超过一段时间不支付的订单就会被 ...

电商用户行为分析大数据平台相关系列1-环境介绍

电商用户行为分析大数据平台相关系列1-环境介绍相关推荐

最新文章

热门文章