今天带来一篇人脸识别中的颜值打分技术,所谓“颜值”,基于什么标准来评判高低呢?既然是个“数值”,那到底能不能“测量”一下?

概述
近年来随着人脸识别技术的发展,颜值打分也受到了广泛的关注与研究。可即使人来打分,大家也口味各异,御姐萝莉各有所爱。计算机又岂能判断人的美丑呢?实际上科学家研究过人脸的”颜值”,并一直在开发相对应的”颜值算法”。【1】“平均脸” 的思想是通过算法检测特征点,然后将人脸图像划分成不同区域再做分段放射变换与加权平均,综合考虑人脸的形状特征和纹理特征,合成的图如下:

五官匀称,轮廓对称,肤色美观的脸更容易受到大众的喜欢,这一点在颜值中可算达到脸共识,也就是“丑人多作怪,美人一个胚”。正因如此,颜值算法才有了可行性,国内各大公司开发了颜值打分应用,我们看看。

同一张图在不同应用中的测定

不同的人脸在同一应用中测定(百度AI为例)

不同年龄不同肤色在颜值打分系统中评分测试(例旷视科技,列出部分测试):

颜值测定是一项娱乐的应用,我们从下面的数据集中随机拿了几张图做测试,结果如下
1. 不同肤色给出分数无明显差异
2. 评分多在60分左右

总的来说表现都差不多,娱乐为主吧。

人脸颜值数据集与标价指标
2.1 数据集

地址在https://github.com/HCIILAB/SCUT-FBP5500-Database-Release。

数据集共5500个正面人脸,年龄分布为15-60,全部都是自然表情。包含不同的性别分布和种族分布(2000亚洲女性,2000亚洲男性,750高加索男性,750高加索女性),数据分别来自于数据堂,US Adult database等。每一张图由60个人进行评分,共评为5个等级,这60个人的年龄分布为18~27岁,均为年轻人。适用于基于apperance/shape等的模型研究。同时,每一个图都提供了86个关键点的标注。
各类人群的颜值分布如下:

颜值分数都使用包含两个主成分的混合高斯模型去拟合,红色和绿色分别是低颜值和高颜值的分布曲线,可见对于这4类人群,平均高颜值在4,低颜值在2.5左右。

另外文【2】中还列出了一些数据集,大家可以自行了解。

2.2 评价准则

2.2.1 Pearson correlation coefficient
用来度量数据间是否存在线性关系,也表征了变量间线性关系的强弱。它通过计算两个数据集合之间的距离用来衡量两个数据集合的线性相关度。设 N 幅人脸图像的人工评分值为{ x1,x2,…,xi,…,xN} ,计算得到的分值为{ y1,y2,…,yi,…,yN } ,其中 xi 表示第i幅图像的真值,yi 表示第i幅图像的人脸颜值预测结果。相关系数 r 计算公式如式如下:

r 值越高,表示人工分类结果与本文方法预测结果越接近,该方法的性能就越好,反之,则越差,如下图所示。

2.2.2 Maxumum absolute error和root mean square error
Maxumum absolute error就是真值和预测值的绝对差值,root mean square error就是误差平方和的根,比较简单就不列出公式了。

传统方法研究思路
传统方法研究思路,自然就是手动提取特征,我们基于参考文献【3】来做说明。

分为几何特征与表观特征,几何特征包括人脸关键特征点位置、关键位置距离信息以及人脸各器官面积比例;表观特征包括LBP纹理特征。将这两种特征进行串联得到融合特征。

下面是具体的步骤。
3.1图像预处理

人脸图像收集时质量不同且伴有噪声,明暗灰度也差异较大,对图像进行预处理有助于后续对人脸特征的提取与计算。图像预处理包括灰度化处理、位置检测以及倾斜校正处理
1. 将图像转化为灰度图
2. 利用Haar分类器截取人脸的大致区域
3. 计算倾斜角并矫正
3.2 几何特征提取

3.2.1 全局特征
根据ASM算法将68个人脸特征点的横纵坐标连接起来构成表征人脸几何特征关键点的特征向量,这就是全局特征。但是由于原始图像角度问题会导致向量在计算过程中会出现误差,所以要对向量进行归一化处理,具体包括(1)平移不变处理(2)尺度不变处理(3)旋转不变处理

3.2.2 人脸距离特征
人到一定年龄以后,面部的器官位置信息将不再随着年龄的增长而变化( 手术或意外情况除外) ,基于ASM-68向量定义18个距离特征如下:

3.2.3 面积特征
根据 ASM定位的关键点找到表征各器官面积的三角形,如眼睛、鼻子、下巴、嘴等, 将得到的54个三角形面积特征归一化后就可以得到三角形面积特征。

3.2 表观特征提取

表观特征表征的是人脸的整体外貌和人脸的皮肤状况等信息。可以反映出如纹理信息、人脸皮肤的状态、颜色深浅面部信息等。表观特征选择比较成熟的LBP特征。

LBP特征,就是在图像的某个区域内,将中心像素点的像素值作为阈值,相邻像素点与其进行对比,大于阈值标记为1,小于或等于则标记为0,产生8位二进制数,该值作为中心像素点的LBP值。当然,Gabor特征也是经常使用的。

3.3 特征融合与分类
3.3.1人脸特征融合
前面提取的几何特征显示了人脸关键特征点信息、人脸各器官间的距离比例信息以及面积特征等,表观特征表征了人脸的全局纹理特性。由于都已经进行了归一化处理,因此可以直接采用串联的方式进行特征融合。

3.3.2 分类
融合了特征之后就可以进入分类器了,常用的是SVM。
在文【2】中分别采用了18维的距离特征和Gabor滤波特征,使用了linear regression,gaussian regression和support vector regression方法进行比较。效果如下:

从结果看来,对于几何特征,gaussian regression和support vector regression表现更好均优于linear regression方法,而对于纹理特征,求取关键点的方法的不同,使得gaussian regression和support vector regression各有优劣。

深度学习方法研究思路
基于深度学习的方法,由于已经没有了手设特征的一步,所以就只剩下优化目标的选择和网络的选择。更强大的网络,通常都有更好的性能,我们看看文【2】训练的结果。

实验结果表明符合我们的预测,网络最强大的ResNext-50取得最优性能,同时,所有的网络都优于最好的传统方法。基于深度学习的方法没有太多可以说的地方,怼数据就是正确答案。

总结
最后我们做一个总结。人脸颜值打分算法,虽然是一个比较主观的问题,但是也可以取得比较统一的结果。它可以是一个分类问题,也可以是一个回归问题。基于深度学习的方法+更大更高质量的数据集的整理,可以非常完美地解决这个问题。在各大软件当中目前用于娱乐,但颜值算法同样在美容等行业有一定价值,还有待应用。

更多人工智能专技术干货,加V: fengkou-IT
感谢您的阅读,更多精彩请持续关注蜂口微信小程序!

测量人脸颜值的标准有哪些,人脸图像算法研究(2)相关推荐

  1. 【蜂口 | AI人工智能】人脸颜值——龙鹏 深度学习与人脸图像应用连载(五)

    这次继续给大家带来人脸图像相关的分享.本次的分享主题是人脸的颜值.这次的分享将从三个方面: 首先,我们对人脸的颜值,包括对它的定义和量化标准做一个简单的介绍. 其次,我们对颜值相关的特征,主要是面部的 ...

  2. 【蜂口 | AI人工智能】人脸颜值——龙鹏 深度学习与人脸图像应用连载(五)...

    这次继续给大家带来人脸图像相关的分享. 本次的分享主题是 人脸 的颜值. 这次的分享将从三个方面: 首先,我们对 人脸 的颜值,包括 对它的定义和量化标准做一个简单的介绍. 其次,我们对 颜值 相关的 ...

  3. 【技术综述】人脸颜值研究综述

    文章首发于微信公众号<有三学AI> [技术综述]人脸颜值研究综述 今天带来一篇人脸识别中的颜值打分技术,所谓"颜值",基于什么标准来评判高低呢?既然是个"数值 ...

  4. 人脸颜值预测(facial beauty prediction)综述

    文章目录 一.什么是人脸颜值预测 研究意义 二.主要方法 2.1 传统方法 2007年 A humanlike predictor of facial attractiveness 2.2 深度的方法 ...

  5. 【人工智能】人脸颜值研究综述

    杨皓博 大二学生,计算机视觉方向 言有三 毕业于中国科学院,计算机视觉方向从业者,有三工作室等创始人 作者 | 杨皓博/言有三(微信号Midlurker2017) 编辑 | 言有三 今天带来一篇人脸识 ...

  6. 人脸检测颜值软件_百度AI人脸识别颜值-百度AI人脸识别测颜值源码下载-西西软件下载...

    百度AI人脸识别测颜值由百度AI官方推出,目前已将人脸识别氛围V2和V3两个接口,使用前需要参考相应的文档权限来选择接口类型.本次为大家带来百度AI人脸识别测颜值平台源码资源下载,相关的测量源码数据都 ...

  7. 既要便捷、安全+智能,也要颜值,萤石发布北斗星人脸锁DL30F和极光人脸视频锁Y3000FV

    1. 视频.视觉+人脸识别技术 助推智能锁进入主动安全时代 智能锁经历了从电子密码.指纹.指静脉到人脸识别阶段,随着人脸识别技术的成熟,越来越多的主流厂商开始主推人脸识别智能门锁,与其他技术相比,人脸 ...

  8. 【机器学习】百度飞桨AI Studio平台项目:基于卷积神经网络分类方法的人脸颜值打分

    基于卷积神经网络分类方法的人脸颜值打分 说在前面 实验数据 解决过程 1.Precondition 2.Dataset Preparation 3.Network Configuration 4.Mo ...

  9. 人脸颜值打分相关文章总结

    方法概览 经过对颜值.美丽值或者是魅力值打分相关的资料整理.方法大致有三类,非监督方法.监督方法和深度学习相关的方法. 在这些方法中,使用的判别标准或者说是参考特征主要有:人脸五官大小和相对位置特征, ...

最新文章

  1. 工厂方法(Factory Method)模式
  2. mysql 常用命令集_mysql 常用命令集锦[绝对精华]
  3. HOWTO:如何修改InstallShield的运行环境
  4. 游标式屏幕菜单c语言,【C语言】控制台窗口图形界面编程(六):光标设置
  5. c语言中,为什么%o、%d、%x输出的总是32位,如char占一个字节,但输出却是32位
  6. TortoiseSVN Launch Failed Error:系统找不到指定路径
  7. C# 答群友:把窗体应用改成类库输出然后去引用
  8. strlen函数实现
  9. IEEP-网络实施-项目交付流程
  10. vue实现上移下移_Vue实现table上下移动功能示例
  11. QEMU/KVM PCI Passthrough(82599ES) DPDK 网络性能测试
  12. 评估基于功能磁共振成像的脑图谱
  13. 前端框架(混合开发框架)
  14. DELL win10插入耳机后声音仍然外放(亲测有效)
  15. 平安保险IT员工收入揭秘
  16. 台式计算机如何自动开关机,联想电脑怎么设置定时开机|联想台式机自动开机设置方法...
  17. Alien Skin Exposure X4 Bundle 4.5.3.66 特别版 Mac 模拟胶片效果调色滤镜
  18. Taro 3.x 开发 APP 记录 (持续记录中。。。)
  19. 中秋节到了,为什么你不回家?
  20. php发送邮件功能(以QQ邮件为例)

热门文章

  1. 用html制作一个音乐排行榜,使用原生JavaScript制作一个漂亮的音乐播放器
  2. 什么是BGP线路,跟普通线路有什么不同
  3. 【转载】浅谈 flash 中的设计模式:模版
  4. OOP 三大特征之多态(Polymorphism)
  5. C语言 变量的指针和指向变量的指针变量
  6. 深度学习之GPU显存与利用率 浅析小结
  7. Linux启动一个服务后,服务的某个文件所在的目录下出现类似:systemd-private.xxxxxx的目录...
  8. shell的一些一句话东西
  9. python进阶-MongoDB
  10. 开源阅读书源_超强小说阅读软件