VR/AR时代,自然交互变得很重要,人最基本的手势交互又开始被重视。LeapMotion的Orion已经可以比较好的追踪双手,Usens,微动等在做手势识别的公司最近也获得了不少的融资。微软的Hololens也使用了手势作为基本的交互。联想刚发布的基于Google Tango的手机,为移动端手势识别打下了基础。thisVR也在做手势识别,不过技术路线与Leap Motion等不同,更小更便宜。

ThisVR做手势识别,硬件用的是基于TOF的深度摄像头制作的传感器,其中的TOF模组与联想的Tango手机来自相同的供应商,正在研发的第三代硬件可以做到60Hz采样率、110°可视角,精度在1cm左右。软件上,则是根据深度摄像头发来的深度图,基于深度学习,训练深度图中的手势和人实际的手势进行匹配。thisVR创始人房文新表示,目前几家手势识别公司中,只有ThisVR采用的是基于TOF和模型匹配进行手势识别,好处是未来可以小型化,嵌入手机中。

之所以选择TOF传感器,主要是可以小型化。房文新介绍,目前能够生产深度图的主要有三种方案,双目摄像头、结构光和TOF。Leap Motion等基于双目摄像头,精度高,但是主要问题是体积较大,难以应用到移动端,如手机和VR头显上。结构光的方案则抗光性差,而且不能在近距离使用。TOF虽然目前精度在厘米级,比Leap Motion等毫米级要低,但目前的设备已经比Leap Motion等更小也更便宜,未来可以做到更小,能够植入移动端。

算法方面主要考虑到硬件运算能力。目前主流的识别手的关节点进行追踪是不同的思路,TOF的深度图分辨率只有220*172,比其它两种低不少,处理起来对硬件需求偏低。ThisVR的设备目前还只能链接PC运行,最低的显卡要求是GTX 950M水平,房文新表示下一代希望达到高通骁龙820的水平。

(图片由thisVR提供)

ThisVR目前设备的第二代产品工程样机已经制作出来,第三代还在开发中,算法方面第三代算法已经研发完成,目前跑在第二代设备上,在30HZ的采样率下,追踪和识别的准确率和精度都不高,离实用还有距离。房文新表示到第三代硬件60HZ采样率下,会好很多。

ThisVR创始人房文新之前在360牵头智能相机项目,团队其它成员来自中国电力研究院,StepVR等。团队目前有近10人,此前曾获得一轮天使投资,目前在进行Pre-A轮融资。

tof摄像头手势识别_TOF(Time Of Flight)+模型匹配,ThisVR想让手势识别低成本小型化...相关推荐

  1. tof摄像头手势识别_Time of Flight(飞行时间技术)——三维手势识别

    原标题:Time of Flight(飞行时间技术)--三维手势识别 三维手势识别需要的输入是包含有深度的信息,可以识别各种手型.手势和动作.相比于前两种二维手势识别技术,三维手势识别不能再只使用单个 ...

  2. tof摄像头手势识别_揭秘国内独家TOF深度摄像头,助力机器人避障与室内导航

    揭秘国内独家TOF深度摄像头,助力机器人避障与室内导航 2018-09-11 TOF深度摄像头利用光的飞行时间测量距离,能够实时快速的计算深度信息,进行准确的三维探测,是实现机器人避障和室内定位与导航 ...

  3. tof摄像头手势识别_手势控制背后的三种感应技术玄机

    触摸控制方式正在逐渐取代汽车中控屏上的物理按键.但是,我们也都知道,触控并非是唯一被选择的交互方式.语音.手势甚至包括眼球.意念控制都曾出现在各式各样的概念车上.今儿的主角就是手势控制技术. 比如说今 ...

  4. 从iPad Pro的ToF摄像头说起,ToF前途未卜还是一片光明?

    本文尝试从ToF技术本身的原理,及其在手机市场的应用出发,来探讨这些年有关ToF技术的传言是否可靠,尤其是在今年新版苹果iPad Pro面世以后,后置新增的那个LiDAR模块是否有机会带动ToF技术发 ...

  5. 智能化汽车3D ToF摄像头

    理想L9(理想ONE之后的第二款车)将搭载3D-ToF传感器,除了驾驶员眼睛注视和头部跟踪监控,还将作为理想自研的深度学习+多模态三维空间交互技术的主要硬件载体. 而此前,大部分用于检测驾驶员疲劳的驾 ...

  6. 小米 12 Ultra 搭载 3D ToF 摄像头和 Surge C2 ISP

    小米在 MIUI 代码中发现了小米 12 Ultra 相机布局的提示.传闻是中国独家智能手机,小米 12 Ultra 预计将与高通即将推出的Snapdragon 8 Gen 1 Plus芯片组一起推出 ...

  7. Android单目手势识别,手势交互点亮智博会 微动手势识别技术瞩目C位

    首届中国国际智能产业博览会(简称智博会)在重庆完美落下帷幕,500 余家科技前沿厂商贡献了「黑科技」的精彩展示,多家整车厂商在现场进行了展示体验,同时吸引与会者目光的,还有各式智能解决方案.值得一提的 ...

  8. 专家解惑 | 关于华为云盘古大模型,你想问的都在这里~

    本文分享自华为云社区<专家解惑 | 关于华为云盘古大模型,你想问的都在这里~>,原文作者:HWCloudAI. 4月25日,华为云发布盘古系列超大规模预训练模型,包括30亿参数的全球最大视 ...

  9. 什么是LoRA模型,如何使用和训练LoRA模型?你想要的都在这!

    什么是LoRA模型 LoRA的全称是LoRA: Low-Rank Adaptation of Large Language Models,可以理解为stable diffusion(SD)模型的一种插 ...

最新文章

  1. CSDN-屏蔽广告详细方法 仅对谷歌浏览器有效!
  2. 谷歌花4亿英镑下注AI开始有回报 DeepMind创收了
  3. get post乱码解决
  4. 数据结构栈队列链表数组
  5. 攻防世界web新手区解题 /cookie / disabled_button / weak_auth
  6. 网站统计:第一方Cookie和第三方Cookie
  7. C# 解析Excel中的那些事儿
  8. 成立了汽车与智能出行事业部的阿里云,如何建立云上行业生态?
  9. vue+node多条件查询 分页_SpringBoot+JPA框架分页、带条件查询等操作
  10. 互联网创业原则与创业模式attilax大总结
  11. Insyde uefi 隐藏设置_利用rufus制作Linux/Windows安装启动盘(支持UEFI+GPT)
  12. matlab转子动力学视频分析,基于ANSYS经典界面的光盘轴的转子动力学分析(谐响应分析)...
  13. c语言 测试有哪种天赋,c语言是指什么
  14. 万物互联时代到来,锐捷发布场景化无线零漫游方案
  15. 计算机教研评课记录,信息技术2.0 | 评课磨课共成长 信息技术促进步 ——东光县第二实验小学信息技术2.0数学组 课例研讨...
  16. Qt开源作品33-图片开关控件
  17. ADI Blackfin DSP处理器-BF533的开发详解61:DSP控制ADXL345三轴加速度传感器-LCD(含源码)
  18. C语言实现统计整数出现次数
  19. 哈尔滨市平房区云计算助力 为创城插上智慧的翅膀
  20. 2020云盘点:信创云蓬勃发展,带动中国云计算市场快速增长

热门文章

  1. python对象复制_Python 拷贝对象(深拷贝deepcopy与浅拷贝copy)
  2. 合并两个无序数组java_Java实现十大排序算法(上)
  3. 重庆理工大学计算机学院学概率论,重庆理工大学概率论试卷及答案.doc
  4. 一起学nRF51xx 11 -  ficr
  5. SPI配置8通道ADC128S022
  6. uclibc和glibc的差别
  7. 电机PID实验--一文让你看透PID​
  8. andy the android ppt,新概念同步测试1.ppt
  9. ARM内核及其设备树编译
  10. 【机器学习基础】GBDT--梯度提升树实例分析完全解读