深度学习auc_test auc 和测试集auc 差距非常大

因为以前的工作经历大部分是在做深度学习，大部分看test auc，顺带看一下train auc，只要测试集和训练集auc差距不是特别特别大，不是特别关注，最近我同事问了我，他的测试集和训练集auc 差距了千分之四个点，第一个反应我是觉得用户群体会不会测试集和训练集有变化，叫他看psi，后面反思了一下，其实测试auc和train 的auc 差距比较大，也是有问题的，是他的模型还是更好的拟合，欠拟合也是一种可能。

模型auc出问题，无非就是两个问题，要给是欠拟合，一个是过拟合

如果train auc 和test auc 差距比较大，有可能是欠拟合了，不是说模型那种特别欠拟合，只是没有拟合那么完美，可以让模型更好的拟合，

可以通过画学习曲线能看出一点

解决方案：

一：看看是不是特征有问题，特征过少,增加特征，或者做特征多项式特征

二：调模型参数让模型更好的拟合

三：减少正则化参数(因为正则化是解决过拟合的)

，

深度学习auc_test auc 和测试集auc 差距非常大相关推荐

Pytorch深度学习记录：对CIFAR-10的深度学习模型搭建与测试
前言 CIFAR-10介绍下载.分类与读入数据集数据集下载解压与分类数据集读入数据搭建神经网络卷积层(Convolutional layer) 池化层(Pooling lay) 残差网络( ...
深度学习之经验和训练集（训练中英文样本）
深度学习之经验和训练集(训练中英文样本) 学习深度学习和在深度学习两年多,积累了很多的学习资料,以及一些经验吧. 学习目标是什么?这个是一切深度学习需要明确的目标 *目前在这个方面,前人研究到什么程度 ...
【深度学习】如何分配训练集、验证集、测试集比例
一.小规模数据集对于传统机器学习阶段(数据集在万这个数量级),一般分配比例为训练集和测试集的比例为7:3或是8:2.为了进一步降低信息泄露同时更准确的反应模型的效能,更为常见的划分比例是训练集.验证 ...
深度学习目标检测模型测试评价指标的选取及介绍
文章目录测试指标的选取一. 精度评价指标 1. MAP(平均准确度均值) 1.1 mAP定义及相关概念 1.2 mAP的具体计算 2. 准确率 (Accuracy) 3. 混淆矩阵 (Confus ...
2020年深度学习调参技巧合集
文 | 山竹小果源 | NewBeeNLP 编 | 夕小瑶的卖萌屋重点说明:本文主要为整理总结,大部分参考文末资料,感谢分享. 寻找合适的学习率学习率是一个非常非常重要的超参数,这个参数呢,面对 ...
《PyTorch深度学习实践》完结合集--B站刘二大人学习总结
本篇主要是各类模型的基本介绍及应用,不涉及深层技术. 学习视频指路→B站指路代码实践指路→代码指路课件获取:通过百度网盘分享的文件:PyTorch深- 链接:https://pan.baidu.c ...
PNAS “深度学习的科学”论文合集导读
来源:混沌巡洋舰今天的科学家对于机器可以学习做什么的想法与我们10年前完全不同. 在图像处理.语音和视频处理.机器视觉.自然语言处理和经典的双人游戏中,特别是在过去的十年中,随着在一系列公共组织的挑 ...
今日学习内容--机器学习的测试集选择方法
机器学习测试集选择方法目录机器学习测试集选择方法留出法多次留出法选择交叉验证法留一法交叉验证自助法总结目前来说总共有三种测试集选择方法: 留出法交叉验证法自助法以下分别对三种方 ...
《深度学习案例精粹：基于TensorFlow与Keras》深度学习常用训练案例合集
#好书推荐##好书奇遇季#<深度学习案例精粹:基于TensorFlow与Keras>,京东当当天猫都有发售.本书配套示例源码.PPT课件.思维导图.数据集.开发环境与答疑服务. <深 ...

深度学习auc_test auc 和测试集auc 差距非常大

深度学习auc_test auc 和测试集auc 差距非常大相关推荐

最新文章

热门文章