笔记来自哔哩哔哩up主戴师兄数分视频~

1、什么是数据分析

观测：对事物形成客观量化的认知（获取数据并制作报表、图表、仪表盘）

实验：通过不断的提出假设、实践假设，并且基于观测的数据去验证这些假设，目的是准确得知哪些方法可以有效地朝着人为设定的方向去发展

应用：在实际的生产环境下，使用实验已经得到的技术和方法，并且基于数据去不断的迭代和反馈。目的是用实验得到的新方法有效地去提升生产力，真正应用到生产中去创造价值。

2、实现三大步骤的各种方法

观测：
1）采集数据：
解析系统日志、埋点获取新数据、通过传感器采集（天气、手环）、爬虫（解析网站、抓取数据）、API（API平台文档—>用API获取数据）
2）存储数据：各种类型的数据库：hive、MySQL、PostgreSQL、SQLServer、Presto、Impala……（数据工程师）
3）展示数据：可视化高效传达信息
分析数据的目的：及时发现异常、找到数据之间的因果关系
因为数据是客观统一的，有统一的认知才能有共同的目标
4）设定标准+发现异常：要知道怎样数据是正常的，才能发现异常
5）研究关系：可视化查看相关性、建模推导相关性

实验：
提出假设，然后验证假设，将未知变为已知，找到客观规律和解决问题的最好方法
所有未经事实数据验证的想法都是假设
设计A/B测试获取数据：明确实验目标、确定核心指标、合理提出假设、预估样本数量、预估实验时长、设计开发实验、检查实验数据，设定结束标准、确定优化策略等。
如何在业务只有少量数据时设计数据实验？
如何在无法同时测试两个版本时比较数据？

应用：
如何应用数据创造价值：
①基于数据反馈不断迭代产品和业务策略、②基于数据训练算法让机器自动化完成工作
拆解目标方法：流程拆解法、二分法、象限拆解法、杜邦分析法、AARRR、PEST、RFM、SWOT、5W1H（拆解只要符合MECE法则即可）

小结：

为什么要分析数据：及时发现异常、找到数据之间的因果关系

有哪些分析框架和方法：杜邦分析法、AARRR、PEST、RFM等

数据分析如何实现：观测、实验、应用

如何进行A/B测试：明确实验目标、确定核心指标、合理提出假设、预估样本数量、预估实验时长、设计开发实验、检查实验数据，设定结束标准、确定优化策略等

如何基于数据创造价值：基于数据不断迭代产品和业务策略，基于数据训练算法让机器自动化完成工作

如何基于数据训练算法：明确的业务目标—>数据—>判断算法是否真的创造了实际价值—>帮助业务更好的使用算法

1、系统认识数据分析相关推荐

如何系统学习数据分析？
2019独角兽企业重金招聘Python工程师标准>>> 很多学习数据分析的同学也都有这样一种困惑"为什么学了那么多工具,还是不会数据分析?",原因无外乎两个,一是 ...
如何通过舆情监测系统加强数据分析和舆情管控?
舆情监测系统是一种可以帮助企业.政府等机构了解并掌握公众对其关注的程度,以及对其言论和行动的态度和反应的工具.随着社交媒体的兴起,舆情监测系统也越来越重要,越来越受到各个领域的关注和应用.本文将通过分 ...
分析如何使用CRM系统做数据分析？
点击输入图片描述(最多30字) 我们知道数据分析是CRM核心功能之一,CRM系统中大量的数据涉及销售.客户.人员.产品非常多板块.通过CRM可以全面的分析客户.市场.销售等数据.如何使用CRM系统做数 ...
靠一平台构建核心指标系统，数据分析让业务运营效率提升90%
今天帆软君继续给大家分享企业数据化转型的优秀案例,面临大量的数据难以处理,提取有效信息的难题,西安怡康医药引进帆软的FineReport产品,建立起了完善的指标系统,有效的管理平台. 一.项目背景随 ...
python数据分析系统_Python数据分析，系统步骤介绍！
原标题:Python数据分析,系统步骤介绍! 摘要在用Python做数据分析的过程中,有一些操作步骤和逻辑框架是很固定的,只需要记住其用法即可.本节内容介绍Pandas模块在数据分析中的常用方法. ...
基于python的数据分析系统,python数据分析经典案例
大家好,本文将围绕利用python进行数据分析案例展开说明,基于python的数据分析系统是一个很多人都想弄明白的事情,想搞清楚基于python的数据分析题目需要先了解以下几个事情. 1.如何利用py ...
分享思路：Python+Spark招聘爬虫可视化系统招聘数据分析 Hadoop职位可视化大数据毕业设计 51job数据分析(可选加推荐算法)
开发技术 Hadoop.HDFS.Spark.SpringBoot.echarts.PySpark.Python.MySQL 创新点大数据架构.爬虫.数据可视化啰里啰嗦适合大数据毕业设计.数据分 ...
python数据分析学生成绩查询系统_python数据分析-学生成绩分析
python数据分析-学生成绩分析 python数据分析-学生成绩分析目标:分析学生成绩的影响因素 1.导入原始数据,以及需要用到的库 import pandas as pd import nump ...
【数据分析自学】一、系统认识数据分析
一.什么是数据分析观测.实验.应用二.重新认识数据分析观测:对事物形成客观量化的认知(报表.图表.仪表盘) 实验:发现规律.验证假设(科学研究.A/B测试) 应用:不断基于数据反馈迭代产品三. ...
大数据毕业设计基于时间序列的股票预测与分析系统 - 大数据分析
文章目录 1 简介 2 时间序列的由来 2.1 四种模型的名称: 3 数据预览 4 理论公式 4.1 协方差 4.2 相关系数 4.3 scikit-learn计算相关性 5 金融数据的时序分析 5. ...

1、系统认识数据分析

1、什么是数据分析

2、实现三大步骤的各种方法

1、系统认识数据分析相关推荐

最新文章

热门文章