在数据处理中,有这样一种情况:现在已经有若干样本被正确地分类了,但不清楚分类的依据是什么。同时,未来还会有大量的未被分类的样本,需要按照上述规则判定这些样本的所属类别。为此,需要根据已被正确分类的样本及其属性,进行数据分析,找出影响样本归类的关键因素,甚至获得一个判定系数;然后依据判定系数,对未来样本进行判别。判别分析是为了解决未来个案归属问题而提出的一种数据分类技术,它基于已有的分类个案寻求有效的判别规则,并借助判别规则对未来个案的归属进行判定。

判别分析基于已有的个案及其分类情况(已有类别号),寻求能够决定个案类别归属的判定函数式,然后借助判定函数来对未归类个案实施判定。在针对个案的判别分析中,判别函数的质量直接影响到判定的正确率,因此寻求优质的判定函数对于判别分析的正确与否至关重要。

判别分析的价值主要体现在两个方面:

让未来个案自动归类或预测其可能的类别;

修正当前已归类个案中的不严谨结论;

基于已分类的部分个案开展分析并最终获得判别函数式,然后再依据判别函数式重新对已经分类个案进行判断,可以检查判别函数式的质量。如果判定值与原始类别号的吻合度较高,达到85%以上,则表示判别函数式有效,那么可以借助这个判别函数式对未来个案进行分类。与此同时,还可进一步检查在已有个案中,判定值与原始类别号不能吻合的那些个案,看看它们的归类是否存在问题。

两种判别方式

在SPSS中,判别分析的实现共有两种思路,分别是费舍尔(Fisher)判别法和贝叶斯(Bayes)判别法。

Fisher判别法

Fisher判别法是一种基于多维坐标系的判定方式。如果待研究个案被分为K类,那么系统可创建一个K-1维的坐标系,每个类别的中心都是坐标系中的一个点,被称之为质心点。每一个个案都可以表示为K-1个数值构成的坐标点,这个坐标点距离那个质心点更近,就归类到那个类别之中。

例如,将一个个案集分为三类,如果采用Fisher判别法就需要构成一个二维的平面直角坐标系,在这个坐标系中有3个质心点。执行Fisher判别分析后,系统会创建两个函数式,分别可以计算出每个个案对应的X坐标和Y坐标,然后通过计算这个点与每个质心点的距离,找到与当前点距离最小的质心点,从而确定当前个案的归属。

Bayes判别法

Bayes判别法的基本思路是:直接为每个类别产生一个判别函数式。如果原始个案被分为K类,则直接产生K个函数式。对于待判定类别的个案,直接把该个案各属性的取值代入到每个判别函数式中,那个函数式的值最大,该个案就被划归到那个类别中。

例如,某原始个案集被分为4类,则分别产生了Y1~Y4四个函数式。对于待分类的个案H,可以把H的各个属性值分别代入到函数式Y1~Y4中,然后比较4个数值的大小。假设最终结果是Y3最大,那么这个个案就属于第3类。

自变量筛选

与多元线性回归分析相似,判别函数式也是一组包含多个自变量的多元线性方程。因此在设计判别函数式时,同样存在着对多个自变量的进入判定与筛选问题。有下面几种自变量筛选的方式:

1、使用全部自变量法;把用户提供的所有自变量都直接纳入到判定函数式中,无论这些自变量对函数式的作用力到底有多大。这个方法是系统默认的方法。

2、使用步进方法;让自变量逐个尝试进入函数式,如果进入到函数式中的自变量符合条件,则保留在函数式中,否则,将从函数式中剔除。使用步进方法,对自变量的筛选方式。使用步进方法,对自变量的筛选方式,又包括以下几种:

威尔克斯lambda值法:它是组内平方和与总平方和之比,用于描述各组的均值是否存在显著差别,当所有观测组的均值都相等时,Wilks’lambda值为1,;当组内变异与总变异相比很小时,表示组件变异较大,表示组间变异较大,系数接近于0。

未解释方差法:它指把计算残余最小的自变量优先纳入到判别函数式中。

马氏距离法:它把马氏距离最大的自变量优先纳入到判别函数式中。

最小F比率法:它把方差差异最大的自变量优先纳入到判别函数中。

劳氏增值法:它把劳氏统计量V产生最大增值的自变量优先纳入到判别函数中。

范例分析

现在有三种不同种类的花生,记录它们的质量、宽度和长度,制成统计表。每种类型都有20个样本,共60个样本。根据不同种的花生特征,建立鉴别不同种花生的判别方程。

分析步骤

1、选择菜单【分析】-【分类】-【判别】。将类型变量选为分组变量,将质量、宽度和长度选为自变量。自变量进入方法选择步进法。

2、选择【保存】项,将预测组成员和判别分数选中。点击继续,然后点击确定。

结果分析

1、输出判别结果,如下图所示,Dis_1表示判定类别,Dis1_1和Dis2_1分别表示将个案值代入到自动生成的两个判定函数中得到的结果。

2、步进方式筛选自变量的情况;

从上图可知,质量、宽度和长度都被纳入到函数式中,且显著性都为0.000,表示三个自变量的影响力是显著的。

上图是对三个变量步进式进入方程的结果:产生三个模型,序号为1~3。三种模型的Lambda值都远小于1,而且第三个模型的lambda值仅为0.001,显著性为0.000。因此,从总体上说,这三个模型都是有效的,以第三个模型为最终结果。

3、典型判别式函数摘要;

在特征值表格中,本次判别分析共生成两个判别函数式,函数式1和函数式2的特征值都大于1;下表的lambda值都远小于1,显著性都为0.000,说明两个函数式的作用都非常强。

4、函数系数及组质心坐标表格

左边的表格式生成的两个函数式的系数。右边的表格表示三个组质心的坐标。对于标准化的判别函数式,其自变量的系数可以直观地反映该自变量对最终判定的影响力水平。但需要注意的是,在具体的应用当中,不能直接把个案的各个属性的原始值代入到标准化函数式中使用。只有已经标准化的自变量属性值才可应用于标准化的判别函数式。数据分析师培训

贝叶斯判别python_SPSS分析技术:判别分析相关推荐

  1. 贝叶斯反垃圾邮件技术

    一. 贝叶斯反垃圾邮件技术介绍 贝叶斯是基于概率的一种算法,是Thomas Bayes:一位伟大的数学大师所创建的,目前此种算法用于过滤垃圾邮件得到了广泛地好评.贝叶斯过滤器是基于"自我学习 ...

  2. matlab最小错误率决策,利用MATLAB实现最小错误率贝叶斯判别

    利用MATLAB实现最小错误率贝叶斯判别 摘要:matlab软件平台为用户提供了强大的科学计算与可视化功能,具有简单.易用的用户环境,尤其适合矩阵数据的计算处理.根据matlab的特点,将其与模式识别 ...

  3. 浅谈贝叶斯判别(Bayes)

    在现实世界中,由许多客观现象的发生,就每一次观察和测量来说,即使在基本条件保持不变的情况下也具有不确定性.只有在大量重复的观察下,其结果才能呈现出某种规律性,即对它们观察到的特征具有统计特性.特征值不 ...

  4. 贝叶斯软件genle教程_手把手教你用R的gemtc包对生存数据进行贝叶斯网状Meta分析...

    大家好,本教程将介绍如何使用R的gemtc包对生存数据(HR为效应量)进行贝叶斯网状Meta分析. 前提条件: 需要下载R软件(推荐使用的R版本为3.5.3),以及RStudio(一个R的友好交互界面 ...

  5. 基于snownlp及朴素贝叶斯的情感分析——以大众点评网评论为例

    「情感分析」是对带有感情色彩的主观性文本进行分析.处理.归纳和推理的过程.按照处理文本的类别不同,可分为基于新闻评论的情感分析和基于产品评论的情感分析.其中,前者多用于舆情监控和信息预测,后者可帮助用 ...

  6. r语言和metawin_手把手教你用R的gemtc包对连续变量进行贝叶斯网状Meta分析

    来源:微信公众号小侃数据 大家好,本教程将介绍如何使用R的gemtc包对连续变量进行贝叶斯网状Meta分析. 前提条件: 准备工作完成后,打开RStudio后,在console里输入install.p ...

  7. 贝叶斯判别matlab,Bayes判别matlab源程序

    Bayes判别matlab源程序 在分类判别中,bayes判别的确具有明显的统计优势,在我所做的应用中,与模糊,灰色,物元可拓相比,判别准确率一般都会高些,而BP神经网络由于调试麻烦,在调试过程中需要 ...

  8. 从贝叶斯公式到贝叶斯判别准则

    原来线性判别分析.平方判别分析.朴素贝叶斯这么简单直白. 前方将出现大量数学公式推导证明,为防止烦躁不适,先复习一下几个重要概念. 1.1一维高斯变量X~N(μ,),则概率密度函数 1.2多维高斯变量 ...

  9. 详解基于朴素贝叶斯的情感分析及 Python 实现

    相对于「 基于词典的分析 」,「 基于机器学习 」的就不需要大量标注的词典,但是需要大量标记的数据,比如: 还是下面这句话,如果它的标签是: 服务质量 - 中 (共有三个级别,好.中.差) ╮(╯-╰ ...

最新文章

  1. 检查型异常(Checked Exception)与非检查型异常(Unchecked Exception)
  2. mic系统装java开发软件_Windows下安装MicMac
  3. Linux CenOS7下安装RabbitMQ
  4. 不可能的工作:在FBX模型导入脚本中生成模型的预置体
  5. 华为怎么升级Android11,华为EMUI 11/安卓11升级名单曝光 快来看看你的手机是否支持...
  6. 【Java数据结构与算法】第十三章 二叉排序树和平衡二叉树
  7. IOS开发--网络篇--GET请求和POST请求
  8. VUE中友盟统计的使用方法
  9. 人民币对美元汇率中间价报6.7542元 上调18个基点
  10. SMP、NUMA、MPP模型介绍
  11. 特斯拉降维打击 国产电动车怎么“盘”?
  12. 图解 Google V8 # 22 :关于内存泄漏、内存膨胀、频繁垃圾回收的解决策略(完结篇)
  13. zen cart产品分类及产品管理
  14. IDS入侵检测IPS入侵防御
  15. AYITOJ ROUND #1题解
  16. 自考《管理经济学》之宏观理解
  17. 目前智能手机 微型计算机,微型计算机基础知识1(新).ppt.ppt
  18. 门户通专访朱则荣老师:中国网站培训第一人
  19. 当初这么学进程和线程就好了
  20. 我对Android的认识

热门文章

  1. html view 居中,HTML--元素居中各种处理方法
  2. 七星炒股主线科技反复走强
  3. 百度云远程连接自己的云服务器,
  4. 【JavaScript 教程】浏览器—CORS 通信
  5. gost文件修改计算机电脑名字工具,Ghost后自动修改IP及计算机名方法大全.pdf
  6. android vold 挂载读写,【转】 android vold浅析(1)
  7. 页面JS获取不到控件ID
  8. springboot异步和切面_spring中的切面和异步执行
  9. 关于CM3内核的PSP和msp
  10. java-FileReader和FileWriter的介绍