【采用】风控模型评估方法以及大数据风控模型概念
更新一下有效性指标中的区分能力指标:
KS(Kolmogorov-Smirnov):KS用于模型风险区分能力进行评估,指标衡量的是好坏样本累计分部之间的差值。好坏样本累计差异越大,KS指标越大,那么模型的风险区分能力越强。
KS的计算步骤如下:
1. 计算每个评分区间的好坏账户数。
2. 计算每个评分区间的累计好账户数占总好账户数比率(good%)和累计坏账户数占总坏账户数比率(bad%)。
3. 计算每个评分区间累计坏账户占比与累计好账户占比差的绝对值(累计good%-累计bad%),然后对这些绝对值取最大值即得此评分卡的K-S值。
<img src="https://pic3.zhimg.com/50/v2-9ecc262b573c05e4e68dbc00596da79e_hd.png" data-rawwidth="457" data-rawheight="328" class="origin_image zh-lightbox-thumb" width="457" data-original="https://pic3.zhimg.com/v2-9ecc262b573c05e4e68dbc00596da79e_r.png"/</noscript alt="">
·GINI系数:也是用于模型风险区分能力进行评估。GINI统计值衡量坏账户数在好账户数上的的累积分布与随机分布曲线之间的面积,好账户与坏账户分布之间的差异越大,GINI指标越高,表明模型的风险区分能力越强。
GINI系数的计算步骤如下:
1. 计算每个评分区间的好坏账户数。
2. 计算每个评分区间的累计好账户数占总好账户数比率(累计good%)和累计坏账户数占总坏账户数比率(累计bad%)。
3. 按照累计好账户占比和累计坏账户占比得出下图所示曲线ADC。
4. 计算出图中阴影部分面积,阴影面积占直角三角形ABC面积的百分比,即为GINI系数。
以下是原文
----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
楼主范围太广。不同的行业有不同的风控目标,不同的风控过程和程度,也有不同的风控结果。其次同一行业风险也分多种风险,对不同的风险(信用风险,操作风险,市场风险)也有不同的应对办法以及模型建设。
只讲一讲中国金融行业中的银行的信用风控与大数据的渊源。
1,风控意义与大数据建模分析优点:中国的金融行业必定在金融全球化的洗礼下一步步找到更大市场,相比中国制造业有成长更快的趋势。而此刻,风控就显得尤为重要。都知道收益越大风险越大,当然而我们更想的如果是在中间找到一个平衡点让收益大的情况下拥有尽可能小的风险。而大数据建模就可以尽可能实现这点:提高审批效率,降低人工成本,减少因非客观判断原因造成的失误的风险。
2,大数据建模目标。第一点目标做信贷工厂的量化建设:清洗银行历史数据用于数据建模形成评分卡,再与规则结合对贷款生命周期三个阶段(申请贷后催收)的好坏客户提供决策建议的预测框架(自动通过,人工审核,审慎审核,还是建议拒绝)。第二点目标内评合规:背景是巴塞尔协议:衡量银行的资本充足率和资本准备是符合巴塞尔协议的规定,如果不符合应该采取什么样的措施。
3,关于建模:前:建模的变量以及数据都是通过层层原始分析,挖掘分析,变量分组,变量降维,过度拟合VIF检测,以及业务逻辑选择出来的。中:而模型的建设本来有方差分析,相关性分析,逻辑回归,决策树,神经网络分析这几种。但是由于Y变量都一般为非线性所以基本都用LOGISTIC逻辑回归。后:模型建好后还需要用PSI检验模型客群的稳定性,用KS或者GINI函数检验模型的区分能力。(公式我就不给啦~感兴趣的孩子肯定有自己学习的方式)如果不太理想就再改进,这是一个做循环的闭环式过程直到选到最佳的。(PS:建模工具:SAS,由于可以处理相当庞大的数据且在美国极其权威的认证而著称的。别的我就不评价了嘿)
4,好的信用风控的评估效果一主要从准确性,稳定性,可解释性三个方面来评估模型。其中准确性指标包括感受性曲线下面积(ROC_AUC)和区分度指标(Kolmogorov-Smirnov,KS),稳定性指标主要参考群体稳定指数(Population Shift Index,PSI)。可解释性可通过指标重要度来进行评估,其中指标重要度用于衡量各个解释变量对算法预测结果影响的程度。注意:一定要将大数据建模与业务逻辑紧密联系!
分割线----------------------------------------------------------当然,个人觉得知道模型背后的理论也是非常有必要的。让我们顺着逻辑回归来讲。一首先是假设检验中假设建立。什么是假设检验呢,假设检验背后的原理是什么呢,我们模型中具体的假设是什么呢。
假设检验分为原假设H和备择假设H0,我们后面会推翻H来证明我们的H0是正确的。
假设检验的原理也就是我们要推翻的这个H的理由是:小概率事件不可能发生。(在此我举一个经典的例子)
在模型中我们的假设便是我们逻辑回归的因变量和自变量之间没有线性关系。
也就是这里面的beta们都是0。
二,never say yes.在原假设正确的前提下,确定检验统计数并计算出统计数的估计值(即构造统计量并计算统计量的估计值)
一般我们会把统计量构造成符合正态分布、卡方分布、F分布的情况,由构造的统计量不同可分为u检验、卡方检验、F检验等。
这里我们以卡方分布统计量为例子:
在各种假设情形下,实际频数与理论频数偏离的总和即为卡方值,它近似服从卡方为V的卡方分布,因此可以用卡方分布的理论来进行假设检验。
三、计算P值,或确定临界值,并比较临界值与统计数值的大小,根据”小概率事件在一次实验中几乎是不可能发生的原理“得出结论统计结果分析
显著性水平:这里的显著是一个统计学的概念,是指原假设发生是一个小概率事件,统计学上用来确定或否定原假设为小概率事件的概率标准叫做显著性水平。原假设发生的概率如果小于或等于5%,一般认为认为是小概率事件,这也是统计学上达到了”显著“,这时的显著性水平为5%。
拒绝域:当由样本计算的统计量落入该区域内则拒绝原假设,接受备择假设,拒绝域的边界称为临界值。当原假设正确时,它被拒绝的概率不得超过给定的显著性水平a(阿尔法),阿尔法通常取值为0.05,0.01,因此落在拒绝域内是一个小概率事件。
还是以卡方检验为例
以下是卡方分布的密度函数,X轴是卡方值,Y轴是发生的P概率。
换句简单易懂的话就是,我们计算实际频数与理论频数的偏离程度即卡方值非常大的情况下概率是非常小的是不会发生的,当X2卡方值远远大于3.84,相应的我们X轴远方对应的就是越来越小的P概率。那么也就是说我们的假设是不成立的,也就是说因变量和自变量之间他们是相关的。并且在原假设情况下卡方值越大也就代表越不可能不相关,也就是越可能相关。
当然在确定检验我们单个系数的时候会用来卡方检验,整个模型的检验的时候就会用到我们F检验,T检验,他们都和我们的卡方有一定的联系。
Logistic制作评分卡模型的衡量标准是K-S值的大小,依据数据质量和建模能力在0-0.5之间,一般在0.3以上才可用,好的模型可以达到0.35。
芝麻分模型的K-S值在0.32左右。
【采用】风控模型评估方法以及大数据风控模型概念相关推荐
- 风控模型评估方法以及大数据风控模型概念
更新一下有效性指标中的区分能力指标: KS(Kolmogorov-Smirnov):KS用于模型风险区分能力进行评估,指标衡量的是好坏样本累计分部之间的差值.好坏样本累计差异越大,KS指标越大,那么模 ...
- 【大数据风控体系】理想大数据风控体系
对数据分析.机器学习.数据科学.金融风控等感兴趣的小伙伴,需要数据集.代码.行业报告等各类学习资料,可关注微信公众号:风控圏子(别打错字,是圏子,不是圈子,算了直接复制吧!) 关注公众号后,可 ...
- 大数据风控模型是什么?有哪些?
摘要:在互联网金融行业,不少人可能这样觉得:认为只要数据够"大",就能有最牛逼的风控体系和行业最低的坏账率. 在互联网金融行业,不少人可能这样觉得:认为只要数据够"大&q ...
- 个人金融借贷场景下,大数据风控的行业分析及应用分析
一.大数据风控是什么? 大数据风控按照通俗的概念解析:通过运用大数据构建模型的方法对借款人进行风险控制和风险提示. 这句话涵盖大数据风控必要的4个要素: 1. 原材料:大数据 2. 实现方式:技术模型 ...
- 外卖刷单用户与商户要注意了!大数据风控来了!
[数据猿导读] 近年来,企业在拥抱互联网.拥抱云的过程中,普遍面临着愈演愈烈的欺诈威胁.据了解,目前中国网络欺诈损失占GDP比例多达0.63%,约4000多亿人民币.而大数据的兴起与应用,为企业反欺诈 ...
- 有头有脸的大数据风控服务商,终究逃不过搞贷款这条路
作者 | 小慧吖 来源 | 新流财经 一家在北京的风控服务商,成立两年,仅个位数客户.这事听起来实在令人唏嘘,但这只是风控服务市场竞争惨烈,从沸腾到冷静的一个小小缩影. 近三年来,依靠互金公司成长起来 ...
- 浅谈大数据风控平台的功能需求
导读:大数据风控业务的开展依赖智能风控平台,智能风控平台的技术基础是大数据技术,智能风控系统技术架构也是以大数据系统技术架构为基础演进而来的. 智能风控系统技术架构主要分为访问层.展现层.系统层.大数 ...
- 传统风控、大数据风控和智能风控的区别
传统风控.大数据风控.智能风控的三者的区别: 传统风控 对客户的征信数据具有较大的依赖性,一旦征信数据丢失,那么将无法进行进一步风险定量和定性风险. 大数据风险 可以利用客户的个人基础数据.行为数据. ...
- 【采用】大数据风控---风险量化和风险定价
前言 金融的本质从宏观上讲,第一:为有钱人理财,为缺钱人融资:第二:信用,杠杆.风险:第三:为实体经济服务,不然就是泡沫,微观上讲就是经营风险.在经营风险的过程中,风险定价是核心,指对风险资产价格的确 ...
最新文章
- python规则网格插值_Python中规则网格上的插值
- 什么是好的图神经网络?
- win7 32位下实现远程线程注入
- pytorch的梯度计算以及backward方法
- 董明珠炮轰国产车的创始人不开自己生产的车,事实果真如此吗?
- 增加 jQueryValidate的手机号验证功能
- 信息学奥赛一本通(1156:求π的值)
- 设计一个处理两种类型地址的地址簿程序_短信平台的API接口都有哪些类型?
- 数据结构之树的定义及操作
- java 数组以逗号分隔_在java中使用逗号分隔符拆分字符串数组
- x=min(x, y)
- [转载] Python3 如何检查字符串是否是以指定子字符串开头或结尾
- saltstsck执行sls配置
- 惠普无线打印机服务器进不去,连接您的HP无线打印机 | 无线打印中心 | 惠普中国...
- 基于can总线的A2L文件解析(2)
- Vivado使用系列:使用自定义BD
- 【辅助驾驶】激光数据与图像数据的融合[3]——激光及相机位置投影关系
- iOS ”打仙人掌“游戏一---游戏玩法实现
- 编辑距离及编辑距离算法 | Levenshtein距离 |DP
- Java基础重温_06:Debug模式(打断点、下一步),基础练习案例(减肥计划if,switch版本、逢七跳过、不死神兔、百钱白鸡、数组元素(求和,索引位置,反转)、判断数组是否相同、评委打分)
热门文章
- linux c++ 程序运行时间,总结UNIX/LINUX下C++程序计时的方法
- mysql utf8mb4 java_mysql中utf8和utf8mb4区别
- php allowoverride,Apache之AllowOverride参数详解
- C、C++中接续符的使用
- java代码编译时修改行为_GitHub - niuzhihua/AST_demo: 利用JavaParser框架在编译时修改语法树(源码)的 demo...
- c 批量导入mysql数据库_C#.NET中如何批量插入大量数据到数据库中
- WSL安装Oracle,WSL安装JDK8 - terwergreen的个人空间 - OSCHINA - 中文开源技术交流社区...
- php 接口数组排序,php 数组排序
- 解决解码H264视频黑屏问题
- 各数据结构算法时间复杂度图【笔记自用】