目标

利用 Live Link Face + unrealEngine + quixel bridge 方案,实现虚拟形象的建模和控制。为后面的直播等应用搭建基础流程。

安装和配置

unrealEngine (虚幻引擎)

需要从下面的链接先下载 Epic Games launcher 安装好后,再下载并安装 unrealEngine

https://www.unrealengine.com/en-US/download

我下载的是 Unreal Engine 5.0.3 的版本


quixel bridge

如果是 5 之前的版本,可以到官网下载 : https://quixel.com/bridge

5 的话会自己带这个插件不用单独下载了。

metahuman

https://www.unrealengine.com/en-US/metahuman

要申请 “参加抢先体验”


提交申请以后会到这个界面 :


看到下图就 OK 了


从这里往后等待的时间会比较长,首先点击 Launch latest MetaHuman Creator

然后不到一分钟左右到这里,这里要等待好几分钟,视你的网络情况而定


你看到这个界面后就进来了:


你是可以自己创建角色的,当然也可以用预置好的这些,我用一个预置的角色演示:

启动虚幻引擎

因为网络问题等了好久才启动成功


然后创建一个项目,选游戏和空白模版就可以了

软件第一次启动后,你想用 bridge 导入时会发现有错误提示,需要再安装一个 web browser 插件才能用 bridge ,具体是这里的第二个:


接着登录 bridge,找到你之前创建的角色,把它导入到 虚幻引擎的工程中

这里找到我们刚才编辑的角色

经过慢长的等待,终于可以导入角色了


会提示要启用插件,点击启用后重启软件。

重启过程中漫长的等待,然后软件 终于打开了。

在漫长的等待中你会经过 N 次这个:


导入角色


选 BP 开头的文件

Live Link Face

iphone x 以上手机安装 live link face 应用 ,手机用线连接到电脑。

然后左上角设置→Live Link→ 点击添加目标,输入 PC 的 IP ,端口用默认的。


遗憾的是虚幻5 各种尝试后都无法显示出 iphone 我的型号是 iphoneXR ,试了 iphoneXS也不行,也折腾了网络,还是不行,于是还是改用低版本 4.27 也还是没连上,实在太费时间就放弃了。所以 4 和 5 我都没连通,哎。

好处是 4.27 有一直官方的免费 demo 可以下载使用,叫 “faceAR” ,从虚幻商城下载,直接拿来用,比较快,也不用自己通过 metahuman 建模型了


效果

虽然我由于各种原因没有连通,但思路就是这样的,最终的效果就是你对着手机做动作,它就可以实时同步到虚拟人那端了,来看看成功的效果:



如果是直播的话,可以把虚拟显示结果直接利用 OBS 推流到直播平台。

注意

  • 安装过程中如遇到网络问题,请使用科学上网。
  • 建议使用性能较好的电脑,否则等待时间过长,CPU 在安装和使用过程中经常会 100% ,也没法用。
  • 如遇到 “正在编辑着色器” 、“正在准备着色器” 一类的提示,没什么更好的办法加速,请耐心等待。
  • 虚幻 5 是不错,但非常卡,我的设备是 macbook Pro i7 6 核 32G 内存,CPU 直接 100%了。所以我觉得 5 还是得 m1 芯片才顶得住。

应用

  • 直播
  • 游戏
  • AR
  • 元宇宙

想像空间很大,直播应该已经有人做了,youtube 有个叫 CodeMiko 可以看下。



CodeMiko 背后其实是一个真实的人,她通过动作捕捉技术,实现与虚拟人的语言和动作同步。


国内也已经有人在做了,可能将来从各大短视频平台能陆续看到这类虚拟主播了

有没有人买账?

不用担心,买账的比你想像的多。

所以,一直说炒概念的元宇宙离我们真的很远吗?

参考

  • https://www.bilibili.com/video/BV1GB4y1M7iH?spm_id_from=333.337.search-card.all.click&vd_source=6fb7f58b736bb5913c33073b42979450
  • https://www.youtube.com/watch?v=OH4lXi0HAKo
  • https://www.bilibili.com/read/cv15994528/
  • https://www.bilibili.com/video/BV1LV411r7Sk/?spm_id_from=333.788.recommend_more_video.1&vd_source=6fb7f58b736bb5913c33073b42979450

本文由 mdnice 多平台发布

虚拟人直播-元宇宙离我们有多远?相关推荐

  1. 电商直播+元宇宙,虚拟人结合虚拟场景直播打开双十一营销新局面

    近年来,元宇宙是互联网最热的概念之一,对于企业与品牌来说,元宇宙多元化的营销方式带来了新的机遇.如何利用元宇宙概念来进行品牌新营销,已经成为了当下无数品牌和企业的共识追求.在这样的市场背景下,今年的双 ...

  2. 进击的虚拟人:元宇宙中的虚拟化身与花样“NPC”

    元宇宙的世界到底是一个什么样的世界?我们在元宇宙中与世界到底会变成什么样的关系? 从目前市场上升温最快的虚拟人中,我们或许能找到一些答案. 如果物理世界的人类以国家.种族.皮肤颜色来划分,那元宇宙中的 ...

  3. 忆享聚焦|全球云计算市场份额、数字虚拟人、“元宇宙”实体店……近期行业热点速览

    "忆享聚焦"栏目第四期来啦! 本栏目汇集近期互联网最新资讯,聚焦前沿科技,关注行业发展动态,筛选高质量讯息,拓宽用户视野,让您以最低的时间成本获取最有价值的行业资讯. 1.工信部: ...

  4. 从技术实现到安全运行,工程师版“元宇宙”离我们还有多远?

    来源 |智能相对论 作者|隐东 "元宇宙"被坐拥35.8亿月活用户的Meta(原Facebook)带火之后,微软.英伟达.腾讯.字节跳动等中外科技巨头们也接连入局. 大佬们对元宇宙 ...

  5. 元宇宙系列之AI虚拟人:“人”潮汹涌 探路未来

    尽管元宇宙尚处不断扩充定义的进程中,但市场对于虚拟人在其中扮演关键要素已达成一定共识.我们认为,从中短期视角看,虚拟人相关技术逐步落地,应用场景持续拓宽,或为元宇宙概念下技术.内容及产业融合升级的初步 ...

  6. 元宇宙直播,不再是概念

    自Facebook更名Meta以来,元宇宙浪潮可谓是一波高过一波,不同行业都在与元宇宙结合.2022年元宇宙直播成为新热点.不过,关于什么是"元宇宙直播",行业还存在分歧.最新我在 ...

  7. 讲好元宇宙故事 保利威开启MR直播新时代

    关注云报 洞察深一度 一位女士,眼中充满好奇,身体却稍显犹豫,最终还是坐在了绿幕为背景的双人沙发上,不知道接下来会发生什么? 另一边,一个工作人员好像在机器前调试着什么,瞬间一块显示屏上"神 ...

  8. 【无标题】MR直播爆发 在元宇宙的前夜

     从本质上来说,面对面的交流是最有效的,因为被沟通对象的声音.神态以及细微的情绪变化,都会被沟通者敏捷捕捉并反聩给大脑,从而做出准确判断,但由于时间和空间上的差异,人们往往无法做到面对面交流,因此,1 ...

  9. 元宇宙大潮来袭?业内首个虚拟形象实时互动融合 SDK 来了!

    元宇宙,火得猝不及防. 短短几个月时间,Minecraft.Roblox 进入了更多人的视野,GREE.英伟达.微软等陆续发布相关产品解决方案,韩国.日本还从国家层面宣布大力布局元宇宙赛道.<头 ...

最新文章

  1. spring boot 邮件端口_1 分钟教会你用 Spring Boot 发邮件
  2. mysql主从同步_utf8_MySQL主从同步
  3. 数组内容转qstring_用Qstring给char[]数组赋值(转)
  4. Flutter学习记录(二、Flutter项目学习Widget)
  5. 网络相关知识点:nginx相关概念
  6. if...else..的错误用法
  7. yii mysql gii_Yii Gii使用
  8. java包名和类名可以一样吗_Java入门第三课:Java基本语法
  9. 遍历ArrayList易犯错误
  10. sjtu 1077 加分二叉树
  11. SAP B1 9.1 跟踪某个查询的执行
  12. 外网接口(浏览器接口)调取设备数据,放到数据库里
  13. Android:使用keytool修改数字证书中字段(应用签名信息)
  14. 超宽屏幕比例_显示器屏幕比例与分辨率对照表
  15. Back Channel笔记
  16. 新概念英语一 : 语法整理 unit1 1-18
  17. eNews 第二十六期/2007.07
  18. Dynamics CRM2013 Server2012R2下部署ADFS和IFD遇到的问题
  19. 微博推广方案和网站推广方案总结
  20. 专利申请成功后已超过4年,如何延长专利保护期?

热门文章

  1. python中的换行符是哪个键_python的换行符是什么?
  2. 互联网晚报 | 乐华娱乐回应被列入经营异常;美团否认广州骑手满员停止招聘;苹果iPhone 15 Pro设计图曝光...
  3. Word控件Spire.Doc 【打印】教程(3):如何在自定义纸张尺寸上打印 Word—C#/VB.NET
  4. Elasticsearch(十三) ElasticSearch搜索附近的人
  5. java实现批量插入
  6. 一款炫酷的相册动画合集【源码分享】
  7. [EOS源码分析]5.EOS编写HelloWorld智能合约及各种坑
  8. 阿里云dns做负载均衡
  9. poi创建excel工作表表名为中文
  10. 安装pip3(mac)