作者丨拉燕 好困 如願

来源丨新智元

【导读】在元宇宙里,假如技术跟不上,别的都白扯。这不,小扎带着4款头显模型来了。

当小扎一口气掏出4台VR模型机的时候,我们就知道,他玩儿真的了。

如果说之前搞元宇宙是噱头的话,那当小扎把这些「硬通货」掏出来...

咱就只有膜拜的份儿了。

‍‍从小扎的笑容上看,应该是信心满满。

视觉图灵测试:四大挑战,一一攻破

距离Meta改名也快一年了,然而大家齐聚元宇宙的愿景还在地平线上。

很大一部分原因在于,VR头显的核心——显示器,实在是太过原始了。

在过去十年中,这个小东西几乎毫无进展:两个分辨率不咋高的屏幕连接在镜头后面,试图欺骗眼睛看到的是一个3D的世界。

显然,我们需要更加新型的显示器,能匹敌人类视觉的那种。

不过,在探究下一代VR头显之前,我们还需了解一个新词——「视觉图灵测试」。

虽然名字看起来很新鲜,但实际上和艾伦·图灵在1950年提出的图灵测试差不太多,只是换到视觉领域罢了。

也就是用来评估VR设备中显示的画面是不是「一眼丁真」(是否能与真实世界的内容区分开)。

具体来说,VR设备必须满足以下四个特征才能通过测试:

1. 达到与视网膜视觉相当的分辨率

2. 能够对虚拟物体进行自然的对焦

具体来说就是,用户可以自由切换画面中任意距离上的物体的焦点,并同时产生相应应的景深效果。

3. 能够补偿镜片造成的光学失真

4. 支持HDR,即覆盖更广的色彩和支持更高的对比度

Butterscotch:直逼人眼的清晰度,人人视力1.0

首先亮相的是Butterscotch的模型。

这款头显牛就牛在,它的成像质量接近视网膜(near-retina-quality)。像这种质量的高端头显一般只能在Varjo这种专注VR设备的公司做出来。

多提一句Varjo,这是一家芬兰的公司,由前诺基亚和微软高管在2016年成立。这家公司最大的特点,就是高清晰度——媲美人眼。

但是,Varjo行,Meta现在不行。甚至可以说,Meta离「行」还差得远,很远的那种远。

想要实现这种设计,相当于需要把Meta Quest 2的110度视野减半。但是也会将Quest 2头显每只眼睛1832×1920像素的清晰度放大2.5倍,让佩戴者的视力提升到1.0。

小扎表示,Butterscotch能在每一视场度(field-of-view degree)上提供大约55像素。比视网膜标准的60像素低一点,比Varjo的64像素也低一点。

Half Dome:别名「灵活变焦器」

接下来出场的Half Dome则是另一款长期在做的原型。

这款头显的亮点是可以根据用户的实现来移动焦平面。这些用来变焦的光学器件在2017年一开始是一个笨重的机械系统,后来改用了液晶透镜系列。

而根据Meta的内部研究,这项技术可以在虚拟世界中打造出更能以假乱真的深度错觉。

在Half Dome系列中,Meta首先探索了一种变焦设计,该设计使用机械移动的显示器来改变显示器和镜头之间的距离,从而改变图像的焦深。

而在之后,该团队又转向了固态的电子系统,从而使变焦光学系统变得更加紧凑和可靠。

Starburst:照亮黑夜,20000nit大杀器

Starburst这款VR头显的实现难度更大,甚至比上面提到的Butterscotch还大得多。但是,落地越难,性能越强。

这款头显的设计稍显笨重,甚至重到需要手柄来支撑它的重量。同时,它配备有一个功能强大的灯,能提供约20000nit亮度的HDR光照。

屏幕的亮度以nit为单位。现代HDR电视能达到数千尼特,但是Quest 2仅达到100尼特。

小扎表示,这款产品很难说得上实用,我们的第一代产品肯定不能造这个。我们把它当作实验床,可以用作之后的研究和学习。

我们做这个的目的,就是为了找到那条正确的路。看看哪些技术路径能帮我们真正帮助我们在虚拟现实领域取得有意义的进步。

Holocake 2:VR「轻薄」款头显

而Holocake2这款产品的努力方向则完全不同。

相比于Starburst的厚重,Holocake的目的是把VR头显做轻、做薄。

毕竟,都叫「cake」了,太厚重了多腻歪啊。

这款头显是2020年设计的一款基于全息光学技术的设备的下一代。全息光学技术可以使光弯曲,这样就能用一块平坦的板子来代替厚重的折射透镜。

最终做出来的成品可能跟普通的太阳镜差不多厚。然而Meta现在还在研究,怎么能开发一种独立的光源给镜片供电。几乎可以确定的是,得用激光,而不能用平常的OLED。

小扎表示,「我们将会做很多工程来实现切实可行的激光器,满足我们的规格。当然还得保证安全性、低成本、高效率、个头大小正好能装进VR头显里去。」

不过老实讲,现在激光也确实不好搞。

为了在现阶段做到足够轻便,Meta采用了Pancake镜头,如此便能够显著地缩短显示器和镜头之间的距离(下图中间)。

毕竟,相比于八字还没一撇的全息镜头,采用Pancake结构的Cambria VR头显都已经快上市了。

三种镜头的比较

Holocake 2是一款功能齐全的PC VR头戴设备,在视野、分辨率和眼框方面可与Meta Quest 2相媲美,而且外形更薄。

不同的是,Holocake 2需要有线连接,而且也没有集成计算单元和冷却装置。

这大概就是轻薄的代价吧。

Mirror Lake:Meta的终极杀手锏

说到底,刚才的这些原型只是针对单一的测试。

而Meta的最终目标,是实现将各种通过视觉图灵测试(Visual Turing test)所需的视觉元素,整合到一个轻量级、超薄和低功耗的VR头显中。

为此,团队设计了一款名为「Mirror Lake」的原型,基于先前提到「Holocake 2」的架构,并通过全息透镜去实现这种「类似滑雪镜的外形」。

与此同时,还将融入Meta在过去7年中所有的先进视觉技术,例如眼球追踪、可变焦点等等。此外,「Mirror Lake」还额外支持镜片附件。

据说「Mirror Lake」还提供了新的穿透技术和外部显示器,可以向外界展示用户的眼睛和脸。

「Mirror Lake」设计的关键在于,全息投影技术让各个组件变得又薄又平。不仅变焦技术相当扁平,用于「Holocake」的所有全息胶片、失真修正和眼球追踪技术也都是一样。这意味着最终产品可以容纳更多功能,同时拥有比任何现有头戴式装置都来得小巧的机身。

Meta现实实验室部门的首席科学家Michael Abrash表示:「Mirror Lake展示了完整的下一代显示系统的样子。」

敲黑板!

首席科学家Michael强调,「Mirror Lake」目前仍只是一个概念机,且Meta还未制作出功能齐全的头戴式装置,以证明这个架构确实可行。如果未来可成功制作出这种头戴式装置,将会为VR视觉体验带来革命性的变化。

在所有VR原型机中,「Mirror Lake」距离商业化仍是最远的,所以如果其他显示技术被证明更有前景,它可能会被放弃,转而支持其他显示技术。

整点实在的?

还记得前段时间小扎亲自试戴的那个「马赛克」设备么?

视频中,小扎「口吐芬芳」、「小手一挥」,真叫是吹了仙气、又施了魔法,咻的一下,一只幻彩的小精灵就跳进了我们的眼帘。

而小扎全程也是一脸傻笑。

近日,Lynch在他的Patreon页面上发布了8个似乎是Project Cambria示意图的CAD文件。

其中显示了一些有趣的功能,包括前面的表盘(可能用于调整镜头)侧面的夹子(可能用于 Oculus Link)和后面的可见电缆,可能将电池连接到前面的组件。

不过,很遗憾,这个「羞答答的美人」Project Cambria仍然没有产品名称、具体的发布窗口或确切的价格。

但扎克伯格曾表示,Project Cambria将在「今年晚些时候」推出。

虽然还需静候「美人」出场,但至少相比于那些遥遥无期的原型机来说,这款VR头显估计很快就能入手了(不考虑价格的话)。

参考资料:

https://mixed-news.com/en/next-gen-vr-meta-shows-its-latest-headset-protoypes/

本文仅做学术分享,如有侵权,请联系删文。

干货下载与学习

后台回复:巴塞罗自治大学课件,即可下载国外大学沉淀数年3D Vison精品课件

后台回复:计算机视觉书籍,即可下载3D视觉领域经典书籍pdf

后台回复:3D视觉课程,即可学习3D视觉领域精品课程

计算机视觉工坊精品课程官网:3dcver.com

1.面向自动驾驶领域的多传感器数据融合技术

2.面向自动驾驶领域的3D点云目标检测全栈学习路线!(单模态+多模态/数据+代码)
3.彻底搞透视觉三维重建:原理剖析、代码讲解、及优化改进
4.国内首个面向工业级实战的点云处理课程
5.激光-视觉-IMU-GPS融合SLAM算法梳理和代码讲解
6.彻底搞懂视觉-惯性SLAM:基于VINS-Fusion正式开课啦
7.彻底搞懂基于LOAM框架的3D激光SLAM: 源码剖析到算法优化
8.彻底剖析室内、室外激光SLAM关键算法原理、代码和实战(cartographer+LOAM +LIO-SAM)

9.从零搭建一套结构光3D重建系统[理论+源码+实践]

10.单目深度估计方法:算法梳理与代码实现

11.自动驾驶中的深度学习模型部署实战

12.相机模型与标定(单目+双目+鱼眼)

13.重磅!四旋翼飞行器:算法与实战

14.ROS2从入门到精通:理论与实战

15.国内首个3D缺陷检测教程:理论、源码与实战

重磅!计算机视觉工坊-学习交流群已成立

扫码添加小助手微信,可申请加入3D视觉工坊-学术论文写作与投稿 微信交流群,旨在交流顶会、顶刊、SCI、EI等写作与投稿事宜。

同时也可申请加入我们的细分方向交流群,目前主要有ORB-SLAM系列源码学习、3D视觉CV&深度学习SLAM三维重建点云后处理自动驾驶、CV入门、三维测量、VR/AR、3D人脸识别、医疗影像、缺陷检测、行人重识别、目标跟踪、视觉产品落地、视觉竞赛、车牌识别、硬件选型、深度估计、学术交流、求职交流等微信群,请扫描下面微信号加群,备注:”研究方向+学校/公司+昵称“,例如:”3D视觉 + 上海交大 + 静静“。请按照格式备注,否则不予通过。添加成功后会根据研究方向邀请进去相关微信群。原创投稿也请联系。

▲长按加微信群或投稿

▲长按关注公众号

3D视觉从入门到精通知识星球:针对3D视觉领域的视频课程(三维重建系列、三维点云系列、结构光系列、手眼标定、相机标定、激光/视觉SLAM自动驾驶等)、知识点汇总、入门进阶学习路线、最新paper分享、疑问解答五个方面进行深耕,更有各类大厂的算法工程人员进行技术指导。与此同时,星球将联合知名企业发布3D视觉相关算法开发岗位以及项目对接信息,打造成集技术与就业为一体的铁杆粉丝聚集区,近4000星球成员为创造更好的AI世界共同进步,知识星球入口:

学习3D视觉核心技术,扫描查看介绍,3天内无条件退款

圈里有高质量教程资料、答疑解惑、助你高效解决问题

觉得有用,麻烦给个赞和在看~  

元宇宙大杀器来了!小扎祭出4款VR头显,挑战视觉图灵测试相关推荐

  1. 字节首款VR头显来了:2992元起,光学清晰度提升86%,不拿手柄也能玩

    Alex 发自 凹非寺 量子位 | 公众号 QbitAI 字节跳动在耗资90亿元收购PICO一年多之后,终于推出了自家首款VR头显. 这一回,字节一口气推出了两款VR产品:PICO 4和PICO 4 ...

  2. 扎克伯格上手演示四款VR头显原型机,Meta透露元宇宙「家底」

    来源丨机器之心 通过 VR 设备,Meta 探索元宇宙的脚步始终没有停下. 今日,Meta CEO 扎克伯格和 AR/VR 部门 Reality Labs 首席科学家 Michael Abrash 在 ...

  3. 人类未来将毁于元宇宙?刘慈欣向往星辰大海,小扎却要深耕Meta

    转自:新智元 「三体」的预告片你看了吗? 简单来说,这个作品讲述的是人类文明与三体文明的信息交流,生死存亡,还有两个文明在宇宙中的兴衰历程. 关于人类未来的发展,刘慈欣曾在「不能共存的节日」中提到飞船 ...

  4. 元宇宙中的手势交互(四)第一款主流VR头显中的手势交互原理剖析(Meta Quest 2)

    简介 随着Facebook正式改名为Meta,元宇宙的概念也一夜之间在世界范围内被点燃.相应的,Quest2也正式改名为Meta Quest2.马克·扎克伯格在2020年底的时候说,一款VR头显成为主 ...

  5. 蚂蚁区块链大杀器首度亮相,速来围观!丨蚂蚁区块链创新大赛站

    进入2019年,区块链加速商用.经过两年多的深度打磨,蚂蚁区块链以大赛的形式向全球的企业.ISV和开发者伸出橄榄枝,探索区块链在更多实体经济中落地的可能性. 此前,性能.隐私保护.安全等成为制约区块链 ...

  6. 使用docker-compose 大杀器来部署服务 - 上

    我们都听过或者用过 docker,然而使用方式却是仅仅用手动的方式,这样去操作 docker 还是很原始. 好吧,可能在小白的眼中噼里啪啦的对着 term 一顿操作会很拉风,但是高手很不屑!在高手眼里 ...

  7. 使用docker-compose 大杀器来部署服务 上

    我们都听过或者用过 docker,然而使用方式却是仅仅用手动的方式,这样去操作 docker 还是很原始. 好吧,可能在小白的眼中噼里啪啦的对着 term 一顿操作会很拉风,但是高手很不屑!在高手眼里 ...

  8. 使用docker-compose 大杀器来部署服务

    我们都听过或者用过 docker,然而使用方式却是仅仅用手动的方式,这样去操作 docker 还是很原始. 好吧,可能在小白的眼中噼里啪啦的对着 term 一顿操作会很拉风,但是高手很不屑!在高手眼里 ...

  9. 使用docker-compose 大杀器来部署服务 上

    原文:https://www.cnblogs.com/neptunemoon/p/6512121.html 使用docker-compose 大杀器来部署服务 上 我们都听过或者用过 docker,然 ...

  10. 三维电子沙盘虚拟现实数字沙盘元宇宙大数据人工智能无人机倾斜摄影三维全景建模第15课

    三维电子沙盘虚拟现实MR数字沙盘元宇宙大数据人工智能无人机倾斜摄影三维全景建模第15课 现在不管什么GIS平台首先要解决的就是数据来源问题,因为没有数据的GIS就是一个空壳,下面我就目前一些主流的数据 ...

最新文章

  1. 模板 — 高精度计算
  2. R语言使用psych包进行探索性因子分析EFA、使用cov2cor函数将原始数据的协方差矩阵将其转换为相关性矩阵( covariance matrix into correlation matrix)
  3. linux中cc和S的区别,为什么在linux命令(iostat)中每秒读取(r/s)一直为零?
  4. mysql编写中文时变成问号解决方法
  5. Aliyun Java Initializr 和 Spring 官方的到底有什么区别?
  6. MySQL内核:InnoDB存储引擎 卷1
  7. AAAI 2022 | 可解释和鲁棒的联合文本分类及证据提取
  8. 布尔运算_利用布尔运算拆分汉字
  9. “睡服”面试官系列第十篇之module的语法(建议收藏学习)
  10. 红外测距模块 51单片机_[51单片机] HC-SR04超声波测距仪
  11. 分布式系统架构师必须要考虑的四个方面
  12. 郁闷,两个伤脑筋的power script 问题
  13. springboot 整合JWT token验证机制
  14. gogs: 如何恢复repository
  15. 从0开始的Java复健笔记
  16. python抠图教程视频_3行Python代码实现8秒抠图的AI神器,根本无需PS(附视频教程)...
  17. 黑盒测试方法用例设计详解
  18. java-for循环9的倍数(基础)
  19. macbook pro忘记开机密码怎么办
  20. 基于R语言的文本挖掘技术

热门文章

  1. 如何写好一篇技术型文档?
  2. 路由器设置DNS的作用
  3. 微前端 Micro-Frontnds - Single-SPA Application API
  4. 运营老鸟眼中,“用户分层”真的超级简单!
  5. 不定期备考小tips[常微][2] #20210528
  6. 数据分析项目实战——链家深圳二手房房源数据分析
  7. 一则 HTTP 405 Method Not Allowed 的解决办法
  8. radam+lookahead optimizer
  9. 计算机博士自白:毕业放弃学术去企业,从天之骄子坠落成天生白痴
  10. 照片的尺寸和内存大小调整