突破帧率天花板，超速全时视觉感知芯片重塑机器视觉技术体系

“

允许失败，鼓励探索——北京是一个对颠覆性技术有很大宽容度的城市。作为全国科技创新中心，这里诞生出一系列领先世界的原创性科技成果。以超速全时视觉感知芯片为例，该芯片由智源研究院院长、北京大学教授黄铁军团队，在北京市科委的支持下历时五年研发完成，超速人眼千倍，能够“看清”高速旋转叶片的文字，重塑了机器视觉技术体系。

”

近日，由北京市科委和北京广播电视台联合推出的系列报道《创新成果》第二季，对超速全时视觉感知芯片这一项目进行了报道。

采用视频表示视觉信息的处理方法，从源头上就限制了机器视觉的发展。

视频存在“帧率天花板”。在机器视觉系统采用视频表示视觉信息的情况下，时间灵敏度受限于帧率，机器视觉无法看到比帧率更快的物理现象。而生物视觉系统则不会受此困扰，因为生物视觉过程中本就没有“视频”这一人造概念，生物用脉冲流保留了更为精细的时间信息。

因此，要实现真正的机器视觉，需要借鉴生物视觉系统的神经网络结构和信息加工机理，建立起一套新的视觉信息处理理论、技术、标准、芯片和应用系统——类脑视觉。实现类脑视觉，首先要有类似眼睛的新型视觉传感器和摄像装置，为此，黄铁军团队研制了超速全时视觉感知芯片SpikeOne（思湃客壹号），它能够像灵长类生物一样感知光线变化并编码为高速脉冲序列。

相较于传统视频芯片，超速全时视觉感知芯片的颠覆性主要体现在“超速”和“全时”：

“全时”：从芯片采集的脉冲序列中重构出任意时刻的画面，从而实现连续视觉感知。这颗芯片模仿的就是灵长类视网膜中央凹，具有全时视觉感知能力。
“超速”：由于生理限制，灵长类视网膜神经节细胞每秒发放的神经脉冲数往往只有几个，少有达到几十个。这颗芯片采用光电器件，脉冲发放频率达4万赫兹，“超速”人眼千倍，能够“看清”高速旋转叶片的文字。

超速全时视觉感知芯片外，项目团队还开发了功能类似人眼、性能超越人眼的新型成像系统，能够看清人类视觉看不到的高速运动过程，有望重塑包括表示、编码、检测、跟踪、识别在内的整个视觉信息处理体系，为无人驾驶、机器人、视频监控等领域带来重大变革。

关于我们

北京智源人工智能研究院（Beijing Academy of Artificial Intelligence，简称BAAI）成立于2018年11月，是在科技部和北京市委市政府的指导和支持下，由北京市科委和海淀区政府推动成立的新型研发机构。

//智源研究院简介

///

学术思想 | 基础理论 | 顶尖人才 | 企业创新 | 发展政策

突破帧率天花板，超速全时视觉感知芯片重塑机器视觉技术体系相关推荐

超速电眼：全时成像芯片重塑机器视觉
计算机视觉是从一个众所周知的笑话开始的.1966 年,麻省理工学院教授佩帕特(Seymour Papert)表示:"计算机连接上摄像头,'描绘它看到什么'这个问题一个暑期项目就能搞定.&qu ...
宜建立自主可控的车用芯片和操作系统技术体系
万物互联时代,操作系统的边界在不断突破,面向"人机物"融合的泛在计算场景,能够支撑分布式人机物协同应用的操作系统将是产业未来之光.操作系统在经过主机时代.PC互联时代.移动互联时代 ...
机器人锤石下路组合_下周二，极智嘉研发总监讲解物流机器人视觉感知与定位关键技术...
工业互联网浪潮下,智慧物流已从概念走上快速发展的道路.作为劳动密集型行业,仓储物流对效率的要求也在不断提高.在这样的背景之下,物流机器人成为仓储物流行业在解决高度依赖人工.业务高峰期分拣能力有限等瓶颈 ...
自动驾驶系统中视觉感知模块的安全测试
本文由吴昊,王浩,苏醒,李明昊,许封元,仲盛联合创作摘要近年来,基于深度学习的视觉感知技术的发展极大地促进了车联网领域中自动驾驶的繁荣,然而自动驾驶系统的安全问题频出引发了人们对自动驾驶未来的担忧 ...
视觉神经网络芯片是什么,视觉神经网络芯片设计
安霸半导体最新推出高性能AI视觉处理器CV5,你了解多少? . Ambarella(下称"安霸半导体",纳斯达克代码:AMBA,专注人工智能视觉的一家半导体公司)宣布推出CVflo ...
弃用基于帧的视觉感知，奔驰/博世/Mobileye瞄准新方向
从低速到高速,是ADAS一直以来安全演进的基本逻辑.对于高级别自动驾驶也是如此,从奥迪到本田,L3级自动驾驶仍然停留在TJP阶段,系统对限速有非常严格要求. 这背后的核心因素之一,是现有电子架构下,从 ...
自动驾驶的视觉感知包括哪些内容？
点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达本文转自:3D视觉工坊文章导读本文针对自动驾驶行业的视觉感知做 ...
自动驾驶多目视觉感知
来源 | 巫婆塔里的工程师@知乎转自 | 汽车电子与软件 1 前言从输出维度的角度来看,基于视觉传感器的感知方法可以分为2D感知和3D感知两种. 从传感器的数量上看,视觉感知系统也分为单目系统,双 ...
视觉感知在数据可视化中的作用
数据可视化的目标是让用户最真实.最高效的接收到界面所传达的信息内容.在过去很长的一段时间,数据可视化是将线下信息移至线上,形成简单数字化模型,达到高效.易懂的展示交互目标. 1.感知与可视化高效的计 ...

突破帧率天花板，超速全时视觉感知芯片重塑机器视觉技术体系

突破帧率天花板，超速全时视觉感知芯片重塑机器视觉技术体系相关推荐

最新文章

热门文章