扎克伯格也来挑战「光剑变装」了。

这是小扎在元宇宙中虚拟化身(Avatar),这一亮剑视频让许多人纷纷转发。

自从Facebook更名为Meta,正式进军元宇宙之后,「元宇宙」这个词的热度就一直未减。

而与元宇宙一起被频繁提及的,就是化身(Avatar)这个词。

「化身」,通俗意义上讲,就是人们在虚拟世界里的形象。

12月10号,「元宇宙」先锋Meta开放了自家的虚拟世界平台Horizon Worlds。

当用户进入Horizon Worlds后,就需要创建一个3D虚拟化身。

有了化身,用户就可以在这个自定义的世界中畅快玩耍。

不过,略显尴尬的是,这些avatar的表情都非常僵硬。

所以,虽然目前的3D虚拟化身也勉强能用,但离着科幻电影,比如「头部玩家」里那种逼真的化身形象,还有十万八千里。

而Codec Avatars项目便代表了Meta在虚拟化身领域所做的努力。

元宇宙不是PPT,Meta真在做

小扎改名Facebook的决心也不是闹着玩儿的。

若想在元宇宙中实现真正的交互,虚拟化身可是打开元宇宙这道门的任督二脉。

Codec Avatars这一项目旨在实现一个能够捕获和表示用于XR的逼真头像的系统。

基于3D捕捉和AI技术,Codec Avatars可以让人们快速能够轻松地构建属于自己的虚拟化身,并使虚拟空间中的交互像在现实世界一样自然。

最初这个项目是以高质量的头像演示开始,后来逐渐实现构建全身的虚拟化身。

除了简单地扫描一个人的身体之外,一个主要的挑战是让它以现实的方式移动——更不用说让整个系统能够实时运行,以便化身可以在交互式环境中使用。

在Connect 2021大会上,研究人员Yaser Sheikh展示了该团队最新的成果——全身视频编解码器(Full-body Codec Avatars)。

他表示现在Codec Avatars支持更复杂的眼部运动、面部表情、手部和身体姿势。

此外,Meta还展示了虚拟化身在对不同的光照条件和环境下实现头发和皮肤的真实渲染。

那么,衣服也可以在元宇宙中实现真实模拟。

扯一扯弹性不错,抖动一下也会有褶皱。

身体细节、衣服都能做到现实还原,还有高保真的虚拟空间。

Meta就建造了一个虚拟公寓,公寓中所有物品都是现实世界的映射。

这样用户在虚拟空间中移动物体或者交互都能与物理空间实现同步。

目前,这似乎是为公司构建一个映射的真实世界环境的最佳案例场景来进行实验。

进入元宇宙后,手动跟踪也同样重要。如果在物理世界中大甩手臂实现交互,不仅累,而且也不雅观。

为此,Meta一直在研究一种更加微妙自然的方法,即通过EMG腕带进行XR输入。

前段时间,Meta还推出了一款触觉启动手套,都是为了实现在元宇宙中的新交互所做的努力。

如何构建Codex Avatars?

Meta开始制作Codex Avatars的契机要追溯到7年前。

2014年,卡内基梅隆大学机器人研究所旗下的一家3D捕捉实验室Panoptic Studio的负责人Yaser Sheikh遇到了Oculus首席科学家Michael Abrash,两人聊得非常投机。

2015年,Yaser Sheikh加入了Facebook(现Meta),从那以后便一直领导着Codex Avatars研究团队。

要想打造一个逼真的化身,基础在于测量,Codex Avatars研究科学家托马斯·西蒙说。

化身要以假乱真靠的是精确的数据,这需要良好的测量。因此,构建真实化身的关键是找到一种方法来测量人类表情中的物理细节,比如一个人眯起眼睛或皱起鼻子的方式。

在匹兹堡实验室的Codec Avatars团队,使用了两个主要的模块来测量人类的表情:编码器和解码器。

首先,编码器使用摄像头来捕捉受试者正在做什么,然后将捕获的信息组装成一个唯一的编码,用来表示一个人的身体和环境状态,这个编码可以随时发送到任何需要的地方。

然后,解码器再将该编码转换为视频信号。

普通的智能手机摄像头也能拍摄生动的视频。不过,Codec Avatars可是海量物理数据和复杂软件的结合,比想象中要复杂得多。

Codec Avatars项目在捕捉人脸细节时,使用了数百个高分辨率相机,而每个相机又会以每秒1 GB的速度捕获数据。

这是什么概念呢?

打个比方,这些相机三秒钟的记录的数据就足以装满一个512GB的磁盘。

而Codec Avatars团队持续记录大约15分钟,这已经到达了他们现有硬件条件的极限,但尽可能多的数据也为创建最逼真的虚拟头像打下了基础。

Codec Avatars团队正在使用这些数据来训练AI系统,从而让AI可以从视频中快速构建虚拟头像。

Sheikh说:我们目前已经可以还原发型夸张的人的3D头像,甚至还原戴着脑电采集帽的人的头像也不在话下。

这是世界上最先进的能够自动生成人类的真实数字肖像的方法之一。它提供了一种虚拟的面对面交流的新方式,将来可以广泛推广。

而随着Codec Avatars的出现,人们对元宇宙社交的接受度会不会越来越高呢?

元宇宙不是 PPT:已经发展到这个地步了相关推荐

  1. 浅谈图书情报在元宇宙中的定位和发展

    元宇宙是什么 元宇宙一词诞生于尼尔·斯蒂芬森在1992年的科幻小说<雪崩>1,小说描绘了一个庞大的虚拟现实世界,在这里,人们用数字化身来控制,并相互竞争以提高自己的地位. 关于" ...

  2. 中纪委网站|元宇宙:下一代互联网的发展目标 要点提炼

    正文摘自 中央纪委国家监委网站,发布时间:2021-12-23 14:30 https://www.ccdi.gov.cn/toutiaon/202112/t20211223_160087.html ...

  3. 元宇宙深度报告丨IPFSFilecoin重大发展契机

    线下场景数字化趋势过去十几年,虚拟内容不断创新,从3D虚拟世界如魔兽世界等网游,到虚拟与现实相结合如Pokémon Go AR游戏或者初音未来虚拟人线下演唱会等.20年疫情加速了整个虚拟内容端的发展, ...

  4. 微软:恭喜你,现在可以在元宇宙里做PPT了

    8 月,北半球还停留在炎热的夏天,Facebook 还没改名 Meta.一群科技媒体记者戴上 VR 头显,准备出席一场虚拟的新闻发布会,远程体验 Facebook 的办公应用 Horizon Work ...

  5. PPT报告 | 元宇宙:从架构到落地

    1.元宇宙概念详析与发展意义:概念:元宇宙是一个与现实世界平行且相互影响并且始终在线的虚拟世界,人们在基础设施完善的虚拟世界中,可以和现实物理世界一样,全方位实现身份认同.货币交易.社区归属感到职业发 ...

  6. 科技热点思考:元宇宙发展及其风险挑战

    来源:创新研究 2021年10月,坐拥30亿用户的全球社交巨头脸书(Facebook)更名"Meta"引爆元宇宙概念,2021年成为当之无愧的"元宇宙元年".企 ...

  7. 认识并理顺元宇宙与产业互联网之间的关系,可以打开产业互联网的发展新症结

    当元宇宙的发展开始变得深入,我们越来越多地感受到它与产业互联网之间存在着某种联系,甚至可以说,元宇宙是产业互联网的一个部分.认识并理顺元宇宙与产业互联网之间的关系,并且由此打开产业互联网的发展新症结, ...

  8. 道可云元宇宙每日资讯|济南发布促进元宇宙产业创新发展行动计划

    道可云元宇宙每日简报(2022年12月14日)讯,今日元宇宙新鲜事有: 济南发布促进元宇宙产业创新发展行动计划 济南市人民政府近日印发<济南市促进元宇宙产业创新发展行动计划(2022-2025年 ...

  9. 区块链可以当仁不让地成为元宇宙的「母体」,并不断为元宇宙的发展提供能量

    当元宇宙的发展开始逐渐变得深入与完善,区块链在其中所发挥的重要作用,正在逐步显现.对于很多人来讲,特别是对于那些仅仅只是将区块链看成是一个概念的人们来讲,这并不是他们愿意看到的.因为他们之所以会放弃区 ...

  10. 《元宇宙发展与治理》课题调研 齐心构建“元宇宙世界”蓝图

    近期,为深入开展中国移动通信联合会元宇宙产业委员会(下称"元宇宙产业委")与清华大学合作的<元宇宙治理与发展>课题研究,元宇宙产业委执行秘书长武艳芳和常务副秘书长张东华 ...

最新文章

  1. Zabbix-03-3 告警变量值
  2. 报告 | 2017年云商业智能市场分析:云计算比大数据更重要
  3. pku 3411 Paid Roads DFS+灵活技巧卡节点访问次数
  4. 使用MySQL自带工具mysqlhotcopy快速备份mysql数据库
  5. 30天敏捷生活(8): 生成你的20/80待做事项列表
  6. 修改hosts文件不需要重启的方法
  7. 配置ftp服务器亲测可用
  8. 关闭或开启memory_target
  9. 中科院自动化所目标跟踪论文整理!三篇综述、两篇ICCV 2019!
  10. java类与继承的执行顺序
  11. 某大型银行深化系统技术方案之十四:服务层之服务调度机制
  12. spring cloud微服务分布式云架构-Spring Cloud 分布式的五大重点
  13. python基础01day
  14. JS与Jquery学习笔记(二)
  15. 传说中的“猴年马月”就要来了,感觉很多愿望都要实现啦!
  16. 炫酷而不复杂,RDP报表实用又方便
  17. 解决Postman报错Could not send request
  18. 《林肯传》--[美]戴尔·卡耐基
  19. mac 剪切移动文件
  20. 迅雷链接转为普通链接(js实现)

热门文章

  1. XP安装QQ提示安装包可能被非法改动无法安装
  2. 利用Depends查看win系统下exe程序的依赖项
  3. logback 自定义PatternLayout
  4. 图的应用--最小生成树
  5. 如何提示系统所在的浏览器版本过低?
  6. Android异步通信:深入剖析Handler机制源码
  7. 新手CrossApp 之CollectionView小结
  8. 【开源】Java身份证号码识别系统
  9. 关于永洪BI Kerberos机制的详细介绍
  10. 基于91助手实现80/54坐标转换到2000大地坐标的七参数计算