数据分析只是在已定的假设,先验约束上处理原有计算方法,统计方法,将数据分析转化为信息,而这些信息需要进一步的获得认知,转化为有效的预测和决策,这时就需要 数据挖掘,也就是我们数据分析师系统成长之路的 “更上一楼”。
数据挖掘与数据分析两者紧密相连,具有 循环递归的关系,数据分析结果需要进一步进行数据挖掘才能指导决策,而数据挖掘进行价值评估的过程也需要调整先验约束而再次进行数据分析。
而两者的具体 区别在于:
(其实数据分析的范围广,包含了数据挖掘,在这里区别主要是指统计分析)

  • 数据量上:数据分析的数据量可能并不大,而数据挖掘的数据量极大。
  • 约束上:数据分析是从一个假设出发,需要自行建立方程或模型来与假设吻合,而数据挖掘不需要假设,可以自动建立方程。
  • 对象上:数据分析往往是针对数字化的数据,而数据挖掘能够采用不同类型的数据,比如声音,文本等。
  • 结果上:数据分析对结果进行解释,呈现出有效信息,数据挖掘的结果不容易解释,对信息进行价值评估,着眼于预测未来,并提出决策性建议。

数据分析是把数据变成信息的工具,数据挖掘是把信息变成认知的工具,如果我们想要从数据中提取一定的规律(即认知)往往需要数据分析和数据挖掘结合使用。

举个例子说明:你揣着50元去菜市场买菜,对于琳琅满目的鸡鸭鱼猪肉以及各类蔬菜,想荤素搭配,你逐一询问价格,不断进行统计分析,能各自买到多少肉,多少菜,大概能吃多久,心里得出一组信息,这就是数据分析。而关系到你做出选择的时候就需要对这些信息进行价值评估,根据自己的偏好,营养价值,科学的搭配,用餐时间计划,最有性价比的组合等等,对这些信息进行价值化分析,最终确定一个购买方案,这就是数据挖掘。
数据分析与数据挖掘的结合最终才能落地,将数据的有用性发挥到极致。

关于数据挖掘,涉及的主要方法主要有:数据分析的方法、可视技术、关联法则、神经网络、决策树、遗传算法等。

主要使用的工具有:R语言,SAS,weka,SPSS Modeler(Clementine)等,可参考几款开源的软件:http://www.iteye.com/news/4693

人大经济论坛数据分析师系统培训第四部分课程是:R软件及数据挖掘技术应用。由中央财经大学统计学院副院长马景义教授主讲,喜欢的同学可以过来一起学习。

使用的具体案例有:

  • 电信客户分类,船只损坏率分析

  • 电信客户流失预测,房价预测

  • 信用卡逾期客户预测

  • 手机用户市场细分,购物篮分析

数据挖掘与数据分析的主要区别是什么?相关推荐

  1. 数据挖掘与数据分析的主要区别

    本文来自网易云社区. 百科是这样定义数据挖掘和数据分析的. 数据分析:是指用适当的统计分析方法对收集来的大量数据进行分析,提取有用信息和形成结论而对数据加以详细研究和概括总结的过程.这一过程也是质量管 ...

  2. 数据挖掘与数据分析的区别是什么

    数据挖掘与数据分析两者紧密相连,具有循环递归的关系,数据分析结果需要进一步进行数据挖掘才能指导决策,而数据挖掘进行价值评估的过程也需要调整先验约束而再次进行数据分析. 从分析的目的来看,数据分析一般是 ...

  3. 机器学习、数据挖掘、数据分析岗面试总结

    算法面试注意细节 算法工程师岗位(机器学习.数据挖掘.数据分析等)面试主要包含两大块:首先是基本的 Coding 能力:其次就是机器学习算法的理论与应用能力. 基本的 Coding 能力考察,主要是让 ...

  4. 数据挖掘 —— 探索性数据分析

    数据挖掘 -- 探索性数据分析 1. 统计检验 1.1 正态性检验 1.2 卡方检验 1.3 独立分布t检验 1.4 方差检验 1.5 Q-Q图 1.6 相关系数 2 单因素分析 2.1 线性回归 2 ...

  5. 数据挖掘与数据分析项目链家租房数据(一)数据爬虫

    数据挖掘与数据分析项目链家租房数据(一)数据爬虫 今日无聊将一个过去做的链家数据分析项目弄上来,当时是某面试,三天时间完成,主要是供大家抄代码和分享一下思考点,这一章是爬虫部分. 网站原图 结果截图 ...

  6. 数据挖掘与数据分析(快速入门)

    什么是数据挖掘与数据分析: 所谓数据分析,即对数据进行分析,然后提取出一些有价值的信息,比如统计出平均数,标准差等信息,数据分析的数据量有时可能不会太大,而数据挖掘,是指对大量数据进行分析与挖掘,得到 ...

  7. 数据挖掘进行数据分析常用的方法

    利用数据挖掘进行数据分析常用的方法主要有分类.回归分析.聚类.关联规则.特征.变化和偏差分析.Web页挖掘等, 它们分别从不同的角度对数据进行挖掘. ① 分类.分类是找出数据库中一组数据对象的共同特点 ...

  8. 2021 年“泰迪杯”数据分析技能赛 B 题 肥料登记数据分析 (视频讲解+解题源码)、数据挖掘、数据分析实战

    2021 年"泰迪杯"数据分析技能赛 B 题 肥料登记数据分析 (视频讲解+解题源码).数据挖掘.数据分析实战 前言: 整理了2021 年"泰迪杯"数据分析技能 ...

  9. 大数据应该这样学:数据挖掘与数据分析知识流程梳理

    编辑文章 数据挖掘和数据分析的不同之处: 在应用工具上,数据挖掘一般要通过自己的编程来实现需要掌握编程语言:而数据分析更多的是借助现有的分析工具进行. 在行业知识方面,数据分析要求对所从事的行业有比较 ...

最新文章

  1. Linux堆内存管理深入分析(上)
  2. Linux用户配置密码,linux用户配置文件passwd和密码配置文件shadow,用户管理,组管理...
  3. 《图解CSS3:核心技术与案例实战》——1.1节什么是CSS3
  4. 多个类的DLL封装及调用
  5. java 静态分派_Java中的静态分派与动态分派
  6. 02.iOS开发网络篇—HTTP协议
  7. django连接redis(文章看着不错)
  8. 怎么写CORTEX在windows用arm-none-eabi-gcc编译时的makefile
  9. 信息学奥赛一本通(1312:【例3.4】昆虫繁殖)
  10. Java线程更新ui_android使用多线程更新ui示例分享
  11. Java String 对象,你真的了解了吗?| CSDN 博文精选
  12. selenium-webdriver层级定位元素
  13. angular4 跨域携带cookie的设置
  14. python读取pdf翻译生成word
  15. control命令详解
  16. 瑞吉外卖_短信验证bug
  17. Web IDE优势在哪?详解Web版数据库管理工具SQL Studio
  18. mac 设置优先连接的wifi
  19. java中pack什么意思_java – .pack()做什么?
  20. 36 选 7 彩票机选程序

热门文章

  1. C语言中的字符常量与变量
  2. 完数什么意思_完美数是什么?
  3. 切比雪夫不等式的证明
  4. 11. 集合set类型详解
  5. Freeswitch 默认配置
  6. ABOV A96R725 seting Music调谐器设置应用
  7. BLE 蓝牙抓包分析
  8. 作文指导百法·9.从阅读中积累素材
  9. 一起在手机上安装Linux
  10. Get Out of My Lab: Large-scale, Real-Time Visual-Inertial Localization文章理解