matlab pca 测试样本,matlab_PCA，训练集与测试集分开，原理和用法

该楼层疑似违规已被系统折叠隐藏此楼查看此楼

PCA基本流程：

1、训练集矩阵算协方差矩阵A;

2、算协方差矩阵特征值与特征向量;

3、按特征值的大小排列特征矩阵，得B，对应的特征值(按从大到小排列)组成向量a;

4、A*B得到去关联的新矩阵C，A与C的对应位置物理意义相同(指样本维度和样本数)，但是去掉了关联，并且按特征贡献度大小排列;

5、选贡献度百分比或降维后的维度。例如百分之90，则是取满足sum(a(1:n))/sum(a)>90%的最小的n；如果直接定降维后的维度，则直接设置个n。

6、任一样本的降维公式相同，对于样本x：x*B(1:n,:)。

原理说明：步骤3,4本质上是基变换原理。4可以去关联的原理与马氏距离相仿。贡献度的原理与协方差矩阵的数学意义相关。转换矩阵相关的计算必须在训练集上完成是因为协方差矩阵的计算需要一个样本集，如将测试集样本加入这个样本集，则训练集中已经包含了测试集信息(例如某一维特征的均值)。

matlab函数说明：

[COEFF, SCORE, LATENT] = pca(X)；

COEFF：步骤3算出来的矩阵B，本质上是一个基变换矩阵。数学意义是协方差矩阵按特征值的大小排列的特征矩阵。

SCORE：步骤4算出来的矩阵C，与A同维同物理意义。

LATENT：步骤3算出来的向量a，存储了贡献度，数学意义是协方差矩阵特征值从大到小排列。

用途：根据LATENT计算满足某贡献度所需的样本维度，或直接定一个样本维度，然后

x*COEFF(1:n,:)降维。

把训练集中所有样本计算x*COEFF就是SCORE，当然，x*COEFF(1:n,:)这个式子更大的用途是计算测试集中的样本。

以上全是废话，这里是关键的：

pca内建函数在算协方差的时候先减了个样本均值，所以这里x*COEFF不是SCORE

需要先算

x0 = bsxfun(@minus,train_data,mean(train_data,1));

x0 = bsxfun(@minus,test_data,mean(test_data,1));

然后x0*x*COEFF才是SCORE

matlab pca 测试样本,matlab_PCA，训练集与测试集分开，原理和用法相关推荐

Pytorch 分布式训练中DP和DDP的原理和用法
一.聊聊DP和DDP pytorch中的有两种分布式训练方式一种是常用的DataParallel(DP) 另外一种是DistributedDataParallel(DDP) 两者都可以用来实现数据并 ...
matlab pca和逆pca函数,PCA的原理及MATLAB实现
关于PCA原理可以直接参考下面的文章深入理解PCA PCA是经常用来减少数据集的维数,同时保留数据集中对方差贡献最大的特征来达到简化数据集的目的. PCA的原理就是将原来的样本数据投影到一个新的空间 ...
matlab pca和逆pca函数,matlab_PCA，训练集与测试集分开，原理和用法
该楼层疑似违规已被系统折叠隐藏此楼查看此楼 PCA基本流程: 1.训练集矩阵算协方差矩阵A; 2.算协方差矩阵特征值与特征向量; 3.按特征值的大小排列特征矩阵,得B,对应的特征值(按从大到小排列) ...
matlab pca coeff,matlab_PCA，训练集与测试集分开，原理和用法
该楼层疑似违规已被系统折叠隐藏此楼查看此楼 PCA基本流程: 1.训练集矩阵算协方差矩阵A; 2.算协方差矩阵特征值与特征向量; 3.按特征值的大小排列特征矩阵,得B,对应的特征值(按从大到小排列) ...
使用matlab中PCA包进行训练集与测试集处理
使用matlab中PCA包进行训练集与测试集处理 1. matlab中PCA包的使用与分析 2. 训练集与测试集降维处理 1. matlab中PCA包的使用与分析 [coeff, score, lat ...
Python计算训练数据集（测试集）中某个分类变量阴性(阳性)标签样本的不同水平（level）或者分类值的统计个数以及比例
Python计算训练数据集(测试集)中某个分类变量阴性(阳性)标签样本的不同水平(level)或者分类值的统计个数以及比例目录
机器学习-样本集（包括训练集及测试集）的选取
转自:http://www.xuebuyuan.com/1409669.html https://blog.csdn.net/bbbeoy/article/details/72967794 针对经验风 ...
ML基础 : 训练集，验证集，测试集关系及划分 Relation and Devision among training set, validation set and testing set...
首先三个概念存在于有监督学习的范畴 Training set: A set of examples used for learning, which is to fit the parameters ...
一文看懂 AI 训练集、验证集、测试集（附：分割方法+交叉验证）
2019-12-20 20:01:00 数据在人工智能技术里是非常重要的!本篇文章将详细给大家介绍3种数据集:训练集.验证集.测试集. 同时还会介绍如何更合理的讲数据划分为3种数据集.最后给大家介绍一 ...

matlab pca 测试样本,matlab_PCA，训练集与测试集分开，原理和用法

matlab pca 测试样本,matlab_PCA，训练集与测试集分开，原理和用法相关推荐

最新文章

热门文章