Web3D虚拟人捏脸
1. 淘宝人生里的虚拟人像渲染技术
- 换装：动态加载道具模型的思路解决，并做了隐藏与显示的优化。
- 美颜：动态合并贴图，充分利用了管线灵活性的能力。
- 捏脸技术实现：骨骼蒙皮和顶点变形
a. 骨骼蒙皮：
ⅰ. 设置好哪些顶点会受到“关节”（也称为“骨骼”）的影响，从而让“关节”带动对应的顶点运动（施加某种“变换”：位移，旋转，缩放三种影响的一组数学公式，从而获得新位置），这个技术我们称为“蒙皮”。
ⅱ. 优点：简单高效，便于理解和控制。
ⅲ. 缺点：不够灵活，骨骼只能表达位移、旋转、缩放的一种或组合，无法进行逐顶点变化操作。例如，让嘴角上扬，就需要每个顶点有不同程度的变化。
b. 顶点变形：
ⅰ. 也就是直接修改顶点。一般来说我们会给顶点准备一个基准位置，再提供一个“极端变化”后的最大位置，那么乘以一定的权重比例，就能让这个顶点在基准位置和极端位置中的任一位置。这种技术称为“Morph Target”或“Blend Shape”，都是指顶点变形的意思。
ⅱ. 优点：弥补“骨骼蒙皮”方法的不足，能更容易做出灵活，活泼的顶点动画。
ⅲ. 缺点：不便控制，很吃资源，成本高，对实时计算压力不小。
在实际开发中，哪些用骨骼，哪些用顶点变形，这是一个权衡“效果”和“效率”的工作，需要具体去看，反复拿捏。这些调整与上游的美术制作成果结合的非常紧密，需要程序员与艺术家一起去看。
2. 想做Web 3D捏脸？看了这篇文章你就会！
- 通过修改骨骼点来进行捏脸，美术同学会在3DS Max设置骨骼点并标注对应的名称。当这些模型文件通过Three.js加载动网页中，这些骨骼点会通过对象的形式返回，通过traverse方法遍历模型的所有对象元素，并筛选类型为骨骼，可以找出所有的骨骼对象，通过对position,rotation,scale等这些属性的修改，就可以调节面部细节了。
- 面部元素的皮肤合成：
a. 根据用户所选加载不同形状的部件图片，如“眉毛样式.png”,“胡须样式.png”等
b. 根据用户所选颜色，利用Canvas对部件图片进行像素着色。
c. 将所有部件通过Canvas拼合到一起并附加到3D模型上。
3. 楚留香的捏脸系统如何实现的？
- 基于骨骼：骨骼蒙皮
- 基于Mesh差值：顶点变形
- 基于材质：在网格不修改的情况下，都可以通过材质中的贴图或者参数更改来改变肤色、瞳孔颜色、唇色、纹身图案等等。
- 新的Mesh：对于程序来说最为简单，对美术来说工作量最大的部分，用于发型、时装、多余的饰品挂件等等。
二：参考工具和源码 - Kalidokit
Kalidokit 是用于 Mediapipe/Tensorflow.js 面部、眼睛、姿势和手部跟踪模型的 blendshape 和运动学求解器，与Facemesh、Blazepose、Handpose和Holistic兼容。它采用预测的 3D 地标并计算简单的欧拉旋转和 blendshape 面值。专为装配 3D VRM 模型和 Live2D 头像而设计。 - *VRoid Studio*（VRM 3D 角色创作软件）
用来制作vrm格式的3D模型。 - three-vrm
一个用于读取人形 3D 模型格式“VRM”并将其显示在浏览器上的库。该库可用于促进 Web 上 3DCG 应用程序开发的库“Three.js”。这使开发人员可以更轻松地在 Web 上显示 3D 化身并控制姿势和面部表情。 - https://github.com/suchipi/arkit-face-blendshapes
- Headshot插件（3D头部生成器）
- 网易伏羲-有灵虚拟人
Web3D虚拟人捏脸相关推荐
- Zepeto正加速摆脱“捏脸”应用的传统印象，成为亚洲最大虚拟世界平台
最近,SoftBank在韩国知名元宇宙平台Zepeto上线了虚拟商店功能,又一次吸引了很多人的视线.Zepeto正不断完善着自己的玩法,成为一个越来越健全的元宇宙,并逐渐摆脱只是一个"捏脸& ...
- 《赛博朋克2077》是捏脸游戏？上科大学生社团开发了一款赛博“滤镜”
作者 | eEhyQx 出品 | AI科技大本营 现象级大作<赛博朋克2077>终于没有跳票顺利发布了!你通关了吗? 来自上海科技大学的学生社团GeekPie打造了一款全新的"滤 ...
- 骨骼捏脸功能的实现方法
这是第132篇UWA技术知识分享的推送.今天我们继续为大家精选了若干和开发.优化相关的问题,建议阅读时间10分钟,认真读完必有收获. UWA 问答社区:answer.uwa4d.com UWA QQ群 ...
- 爆火“捏脸”APP崽崽ZEPETO，如何开启虚拟世界的社交IP？
近日,爆火虚拟社交软件「崽崽ZEPETO」在融入国内市场.提升多元化社应用的需求下,与来自网易核心架构的通信与视频服务商「网易云信」达成重要合作. 崽崽ZEPETO是一款超级热门的虚拟社交APP,早在 ...
- 服务器不删档的设置_不删档预捏脸开启，快来体验次世代黑科技！
昨天,执行者们期待的不删档日期正式定档:今天,EVA又要为执行者们带来一个好消息! 首先请跟着EVA回顾一下我们的定档信息: 龙族幻想7月17日开启预下载!7月18日正式不删档开服! 7月17日当天E ...
- 虚幻4 捏脸和换装系统实现
http://blog.csdn.net/shangguanwaner/article/details/50392896 虚幻4 捏脸和换装系统实现 捏脸和换装系统基本上是一个游戏的标配了,这里记录下 ...
- 天涯明月刀怎么导入php捏脸数据,天涯明月刀捏脸数据怎么导入 天涯明月刀捏脸数据在哪...
天涯明月刀捏脸系统可谓是一大特色,很多新手表示自己捏的脸总是不合心意,好不容易捏出一个不错脸又不知道如何导出保存.网上下载的捏脸数据不知道怎么导入,捏脸数据的存档位置不知道在哪.别着急,小编为大家做了 ...
- rust能捏人不_吃鸡：捏脸系统上线后，玩家们都嗨了
最近手游吃鸡版本大更新,上线了捏脸系统,这对于吃鸡来说又多了一种趣味性的玩法,话不多说,下面瓜妹就给大家分享下玩家们的骚操作(最后还有数据包哦). 新增自定义脸型功能,玩家的想象力太丰富了 本来吃鸡上 ...
- 逆水寒捏脸服务器维护,《逆水寒》优化热门服务器排队体验 捏脸颜值评分机制优化...
2) 整容时,新增了一个[还原修改]按钮,点击可以将本次在捏脸界面的操作都清除,还原为整容前的容颜. 3) 颜值评分机制优化,发型.妆容等部分也加入评判范围 3. "倚竹袖长寒卷翠,凌波袜小 ...
最新文章
- python 将字符串转换成字典dict
- deepin v20.1折腾美化之Plank dock任务栏安装
- 自学编程的八大误区！克服它！
- SAP Gateway currency conversion utility
- centos7.4下安装配置PHP服务(源码安装)并配置nginx支持php
- jenkins发送邮件
- python分析政策实施前后_用Python分析春节前后的中国A股市场行情(附源代码)
- 2021水电消纳交易电量增长超150% 价格已提高16%
- linux mysql5.5.50_linux下安装mysql5.5
- 等到小牛电动车出N2再买的原因
- 在endnote中制作GB/T7714《文后参考文献著录规则》的输出格式 及 编辑Output Styles中特殊符号说明
- 小波包分解、重构、去噪与matlab函数使用
- 【ARTS】01_07_左耳听风-20181224~1230
- ADS1256的使用
- 超融合服务器系统,超融合服务器|超融合架构|超融合一体机|业务系统一体机
- 使PC端网页宽度自适应手机屏幕大小
- 电脑上照片如何压缩大小？怎么把照片在线压缩？
- Wish官方推荐收款渠道 哪家比较好?
- 警惕安全档案的陷阱 | 确认偏见
- java 最大递减数_算法--求先递增后递减数组最大值的下标