今天分享一篇在刚刚结束的CHI’2018上发表的full paper。该文章由来自澳洲University of South Australia的Piumsomboon等人和来自新西兰University of Canterbury的Robert Lindeman发表。这要介绍了“Mini-Me”,一个用于辅助混合现实(MR)远程双人协作系统的优化工具。MR远程双人协作系统指的是一个基于虚拟现实(VR)和增强现实(AR)的帮助两个用户远程交流协作的系统。这种系统中,两个远程用户分别处于AR和VR环境中,两人共享的是AR用户所在的环境(VR用户看到的是建模复原的环境),并且,两人在自己的环境中都可以看到对方的虚拟形象。

在本文中,系统的工作场景是这样的,远程的两个用户一个是AR用户(头戴MS Hololens),另一个是VR用户(头戴HTC Vive)。如下图中的a是AR用户看到的景象,AR用户可以看到自己所在的房间,以及远程伙伴的虚拟形象;如下图中b是VR用户所处的虚拟景象,VR用户可以看到一个虚拟出来的远程伙伴的房间,和虚拟的远程伙伴的形象。

图片摘自论文。a,b为AR、VR用户环境;c为微缩版VR用户虚拟形象的设计细节;d、g为用户使用系统的实际场景;e、f为VR用户在为AR用户指出书架上的某物体。

可以看到图中很多处都有一个微缩版的虚拟形象,这个就是Mini-Me。它的出现是为了解决这种远程协作系统当中的两个用户“失联”问题-由于AR用户视界(Field of View, FOV)有限,VR用户的虚拟形象时常不在其视线内,所以很多对方的非语言交流线索(non-verbal communication cue,如眼神和肢体语言)都无法接收。作者希望通过这个附加的微型虚拟形象来为用户提供对方的非语言交流线索。Mini-Me被设计成始终停留在AR用户的视线中,但是ta复制真实用户的视线(gaze)和姿势(body gesture)-也就是说,虽然这个小人始终会自动地移动到AR用户能看到的地方,可能不是VR用户站的地方,但是他们的视线和动作保持一致:VR用户在看什么,ta也就往哪看,VR用户在指什么,ta也往哪指。AR用户可以开启/关闭Mini-Me,把Mini-Me固定在某处,VR用户也可以进入Mini-Me的视角。

作者们进行了2*2 within-subject实验,将AR用户端带有Mini-Me的MR协作系统,对比没有Mini-Me(只有一比一大小的虚拟VR用户形象)的基准系统(baseline),在两个场景下进行了评估:1)“茶会(Tea Party)”,远程的VR用户要远程帮助在茶叶零售店的AR用户,该场景是一种不对称合作(Asymmetric Collaboration)场景,主要由一方提供指导;2)“城市规划者(Urban Planner)”,双方需要共同完成城市设计的任务,这个场景是一种对称合作(Symmetric Collaboration),双方要互相帮助,而不是单方面指导。

图片摘自论文。a-d:Tea Party场景Demo;e-h:Urban Planner场景Demo。

作者们从两方面评价了系统:社交现场感(Social Presence),可用性(usability)。总的来说,他们得到了喜人的实验结果。实验结果显示,和基准系统比较,有Mini-Me的系统在非对称合作场景下可以更好的传递非语言交流线索以提高合作表现,在两种场景下都能提高社交现场感,并且在两种场景下都是参与者更偏爱的方式。


Piumsomboon, T., Lee, G. A., Hart, J. D., Ens, B., Lindeman, R. W., Thomas, B. H., & Billinghurst, M. (2018, April). Mini-Me: An Adaptive Avatar for Mixed Reality Remote Collaboration. In Proceedings of the 2018 CHI Conference on Human Factors in Computing Systems (p. 46). ACM.

转载于:https://www.cnblogs.com/mysunnytime/p/9155169.html

前沿科技-混合现实(MR)远程协作辅助工具:微缩虚拟形象Mini-Me相关推荐

  1. Alex: 2018年对混合现实MR的展望

    原文作者:Alex Kipman, 微软操作系统工程院技术院士 Hello 大家好! 难以置信我们已经走过了2018年的头两个月了. 每年一月份我都会去巴西省亲,和我的家人欢聚一堂,度过一个美好的假日 ...

  2. 影创科技助力云南首例MR混合现实肝脏手术成功实施

    随着 MR 混合现实技术在医疗行业的不断应用,让医学信息从二维变成三维,丰富了医生的诊断技术,解决了医院的相关难题和痛点,更符合国家不断出台的智慧医院相关发展政策. <医院智慧服务分级评估标准体 ...

  3. Hololens连接mysql_学校hololens开发项目:汽车发动机检修混合现实(MR)教学

    我司与汽车职业学校合作hololens混合现实开发汽车发动机辅助检修项目. 概述 该软件旨在通过学校自身的师资力量和教学场地及现有教学装备,构建现代职业教育体系,加快学校发展现代职业教育,培养适合本市 ...

  4. 混合现实平台 Mesh、云服务能力翻倍扩容、福利 150 万人……Ignite China 精彩盘点...

    作者 | 伍杏玲 出品 | CSDN (ID:CSDNnews) "两年前微软曾提出一个目标:将中国云服务能力翻倍扩容:两周前,微软云服务能力已实现第二次翻倍扩容!" 微软全球资深 ...

  5. 吴坤华中科技大学同济学院计算机中,3D打印 混合现实 计算机辅助导航 全国首例!世界最前沿三大技术为你“撑腰”...

    6日,同济医院骨科李锋教授团队借助3D打印技术.混合现实技术及计算机辅助导航,世界上三大最新技术成功为一位腰椎肿瘤患者实施了"腰椎肿瘤切除+重建手术".据悉,此为全国首例联合此三大 ...

  6. 北京理工大学计算机学院王涌天,五分钟光学| 北京理工大学王涌天教授谈混合现实技术...

    原标题:五分钟光学| 北京理工大学王涌天教授谈混合现实技术 本文为中国激光第2001篇. 今后的头戴式增强现实(AR)眼镜显示将依靠在眼睛远处形成的透明显示屏,它不影响你观察真实场景,同时,在你需要的 ...

  7. 混合现实手术规划模拟系统——阿里云资源+MR技术在医疗行业的典型应用

    作者:阿里云MVP.北京科云互联科技有限公司副总裁阎雨农 "未来,更希望能够把微乐的这项技术再全省各医疗机构,特别是基层医疗机构的专家们,让他们更早地能够学习,应用这项技术,在日常工作中,让 ...

  8. 增强现实(AR)、虚拟现实(VR)、混合现实(MR)之间有什么区别?

    刚接触沉浸式技术场景的人问的第一个问题是,如何将增强现实(AR)与虚拟现实(VR)区分开来,还有混合现实(MR)和扩展现实(XR)等术语又是什么意思.下面让我们来看看,它们究竟是什么? 什么是虚拟现实 ...

  9. CES Asia:MR混合现实引发行业热议

    6月11日-13日,第五届亚洲消费电子展(CES Asia)在上海举办.作为科技行业的风向标,每年CES Asia都会展出行业尖端的消费类产品,揭示下一年的行业发展方向. 影创科技作为中国混合现实行业 ...

  10. 只要花3K 手把手教你制作炫酷的MR混合现实视频

    2019独角兽企业重金招聘Python工程师标准>>> 混合现实(下称MR:Mixed Rality)视频是介绍虚拟环境最酷的方式之一.外媒uploadvr发表了一篇详细的拍摄器材和 ...

最新文章

  1. R语言ggplot2可视化图例放置在图像底部(bottom)并分两行显示实战
  2. python从小到大的顺序输出-python从小到大的顺序输出
  3. 数据中台应用实战50篇(一)-企业级数据中台的建设方法架构和技术栈
  4. 寄存器在哪里_二、汇编之寄存器
  5. 机器学习怎么入门?一份速成指南拿好!
  6. string常用操作
  7. java集合set的使用_浅析Java中的set集合类型及其接口的用法
  8. 翻译:程序员数据结构基础:选择正确的数据结构
  9. mysql 如果存在修改_mysql如存在并发修改可能,一定要注意保证数据一致性
  10. c#winform演练 ktv项目 通过下标选中歌曲并且列表高亮
  11. JDK配置与防火墙设置
  12. 《Flutter 从0到1构建大前端应用》读后感—第7章【路由】
  13. 配置隐藏计算机磁盘,这2种隐藏硬盘的方法 你绝对想不到!
  14. 怎么利用pytorch训练好的模型测试单张图片
  15. My Sixth-First - 解数独 - By Nicolas
  16. 如何给屏幕设置一个充满全屏幕的背景图片
  17. crypto-js 加密解密 (TS版本)
  18. windows正版系统下载地址
  19. AlexNet网络结构详解与代码复现
  20. 7-13 愿天下有情人都是失散多年的兄妹 (25 分)

热门文章

  1. Android 界面一键变灰/黑白
  2. FPGA开发中常见报错或警告汇总
  3. mysql union 慢_mysql查询慢的原因和解决方案
  4. 初学者之eclipse常用快捷键总结
  5. Unity中扫描二维码将电脑照片保存在手机中
  6. 怎么使用计算机自带的摄像头拍视频,电脑怎么用摄像头录制视频
  7. 实现自动化测试,首先不是一个技术问题
  8. 第85节:Java中的JavaScript
  9. 可复用的显示隐藏按钮组件
  10. python选择结构练习(一)