Virtual Environments

Virtual Environment

  • definition

History

Continuum 连续体

  • real environment - augmented reality(AR) - augmented virtuality(AV) - virtual environment(VR)
  • mixed reality(MR)

networked virtual environments(NVE)

  • multiple user interact with each other

virtual characters

  • photo-realistic, human-like, cartoon-like, mascot, symbolic, abstract etc.

Augmented reality

  • definition, types:face AR, space AR
  • how AR works? image mixing and display, registration, consistency
  • image display: AR device, display techniques in use
  • registration: marker(rectangular logos, random dot markers, lenticular sheet identifiers)
  • consistency
    tracking
    geometric consistency: a correct occlusion effect
    lightning consistency: user s retina effect
    time consistency: synchronous change

virtual reality

  • definition
  • how VR works? track user s head
  • properties of HMD
    size, weight, comfort
    resolution
    field of view
  • content types
    synthetic, captured
  • simulation sickness + solutions

Audio for Virtual Reality

spatial hearing

  • lateral localization 横向定位
    major cues:
    interaural time difference声音到一边耳朵比另一边更快。
    interaural level difference一边耳朵比另一边有更高的电平,对耳间水平差 (ILD) 敏感的神经元受到一只耳朵的刺激而被刺激而被另一只耳朵的刺激所抑制,因此细胞的响应幅度取决于两个输入的相对强度,而后者又取决于 耳朵的声音强度。
    dynamic changes of ITD and ILD
  • elevation 海拔
    major cues:
    spectral cues
    dynamic changes of everthing

headphone-basd presentation

  • dummy heads 就是直接做个假的头耳朵处录音
  • binaural audio reproduction
    3d audio over headphones 3d立体声
  • HRTFs

loudspeaker-based presentation

  • stereophony: facing the speakers
  • crosstalk cancelation:without headphones, single user, not robust
  • ambisonics
  • sound field synthesis

capturing of sound scenes

MMI笔记 virtual environments, audio for virtual environments 知识点总结相关推荐

  1. 【学习笔记】C++ 中的 virtual 关键字与虚函数

    目录 先决条件 前言 演示示例 virtual 关键字的作用 虚函数的规则 参考与拓展 深入拓展 先决条件 了解 C++ 中的多态这个概念. 前言 virtual 关键字是面对对象中,用于修饰类中的成 ...

  2. c语言使用virtual类型,c语言virtual关键字

    只要是学过C++的人都知道在类Base中加了Virtual关键字的函数就是虚拟函数(例如函数print),于是在Base的派生类Derived中就可以通过重写虚拟函数来实现对基类虚拟函数的覆盖.当基类 ...

  3. non-virtual函数、virtual函数和pure virtual函数的区别

    在c++中,虚函数也是很重要的一部分.接下来对non-virtual函数.virtual函数和pure virtual函数进行区分.主要应用在class中,通知需要通过子类对父类继承时使用,通常有接口 ...

  4. 学习笔记(十五)——镜像的知识点与注意事项

    学习笔记(十五)--镜像的知识点与注意事项 一.基础知识 1.SQL Server镜像只有两种模式:高安全模式和高性能模式.两种模式的主要区别在于在事务提交后的操作. 在高性能模式下,主体服务器不需要 ...

  5. eSPI自学笔记(五):Virtual Wires Channel与Posted/Non-Posted

    前几期内容面向的读者为对eSPI毫无概念但是有兴趣了解的工程技术人员,这一期也是本自学笔记的最后一期,所面向的读者为基本已经通读过一遍eSPI Spec,但是对其中一些概念还存在疑虑的朋友们.这一期将 ...

  6. 【虚拟试衣论文笔记】M3D-VTON: A Monocular-to-3D Virtual Try-On Network

    论文地址: 项目地址:https://github.com/fyviezhao/M3D-VTON 本文提出了一种 Monocular-to-3D Virtual Try-On Network (M3D ...

  7. 3D audio 及 Virtual Surround 算法

    如需转载请注明出处! 目前,技术研究与工程实现方面,3D audio技术基本建立在HRTF ( Head-Releated Transform function )技术基础上. 国际公准认证与学术研究 ...

  8. 【虚拟试衣论文笔记】C-VTON: Context-Driven Image-Based Virtual Try-On Network

    论文地址:https://openaccess.thecvf.com/content/WACV2022/papers/Fele_C-VTON_Context-Driven_Image-Based_Vi ...

  9. 【虚拟试衣论文笔记】Towards Scalable Unpaired Virtual Try-On via Patch-Routed Spatially-Adaptive GAN

    论文地址:https://proceedings.neurips.cc/paper/2021/file/151de84cca69258b17375e2f44239191-Paper.pdf 项目地址: ...

最新文章

  1. 【PHPWord】图片
  2. Sklearn(v3)——SVM理论(1)
  3. import tensorflow 报错 ImportError: DLL load failed: 找不到指定的模块。
  4. JDK修改环境变量的作用
  5. 宁波Uber优步司机奖励政策(12月21日到12月27日)
  6. C语言 gcc 静态库
  7. 【Shell脚本】TDS离线备份还原
  8. C语言Windows程序设计-第三天-属于自己的窗口
  9. 什么样学生适合学计算机动漫,动画专业的学生,如何选购电脑?
  10. [中医经络学习一]足阳明胃经
  11. URL 编码 - 从 %00 到 %ff
  12. ManjaroArch 自动挂载NTFS分区
  13. S-SDLC(Secure Software Development Lifecycle) 安全编码规范
  14. Karabiner配置
  15. 摄像头录像时出现连接错误
  16. registry拉取dockerhub私有镜像
  17. 两款网页在线刷网站访客pv和ip的源码
  18. 『十年树木 百年树人』最好的机会AI最牛的你!
  19. arduino简易呼吸灯实验
  20. 扩展欧几里得算法求逆元c语言,关于扩展欧几里得算法和逆元

热门文章

  1. css原地颠倒 h5_H5案例分享:CSS3 reflect倒影
  2. ps抠图都有哪些方面,有哪些相关教程呢
  3. 何为数码相机EXIF信息的等效焦距
  4. Matter(CHIP) 目录和平台相关的文件
  5. 第十二届蓝桥杯大赛软件赛省赛 Java 大学 B 组(2021年4月18日)
  6. 用Excel制作条形码
  7. receptive field
  8. 毕业两年,只会Crud,侥幸通过面试定级 P6,没想到我也可以入职阿里!(面经分享)
  9. leetcode_868_二进制间距
  10. html字体名称有哪些,css有哪些字体系列?