视觉感知堪比人眼：这款突破性光学传感器模仿人类视网膜，有望带来 AI 重大进展
视觉、听觉、嗅觉、味觉、触觉是人类最基本的五种感觉，其中视觉极为关键，毕竟随着物种进化，眼睛作为人类最为精细、复杂的器官，感知能力无与伦比。
曾有神经科学、认知心理学研究表明，80% 以上的外界信息都是通过视觉进入了我们的大脑。
技术代代革新之下，仿人眼的尝试不断涌现。
2015 年，美国明尼苏达州一位名为 Allen Zderad 的 68 岁男子在失明 10 年之后，凭借一双 “仿生眼”重见光明。
2020 年 5 月，香港科技大学范智勇团队联合加州大学伯克利分校、美国劳伦斯伯克利国家实验室的一组研究人员，就视网膜问题提出了最新方案，甚至打造出了多项性能超越人眼的仿生眼。
而就在近日，美国公立研究型大学俄勒冈州立大学(Oregon State University)在光学传感器领域有了重大进展，更接近于人眼感知视野变化能力的传感器终于来了。
俄勒冈州立大学表示：
- 该传感器是图像识别、机器人和人工智能等领域的重大突破，突破性的仿人眼光学传感器是人工智能发展的关键一步。
打造新型视网膜传感器
2020 年 12 月 8 日，相关研究成果正式发表于《应用物理快报》，题为 A perovskite retinomorphic sensor(一种钙钛矿型视网膜传感器)，论文作者为俄勒冈州立大学工程学院研究员、电气与计算机工程助理教授 John Labram 和研究生 Cinthya Trujillo Herrera。
- 哪怕最先进的超级计算机，复杂程度也无法与人脑相媲美。
最早，基于这一事实，神经形态计算领域的研究开始兴起，其设计目的是在执行机器学习任务时优于传统计算机，原理可以简要概括为一句话：将人脑(的一些方面)复制到硬件中。
论文介绍，虽然近年来这一领域取得了很大的进展，但几乎所有提供给神经形态处理器的输入信号仍然是为传统的 von Neumann 计算机体系结构设计的。
研究团队设计了一个简单的光敏电容器，并描述了它对光刺激的反应。
如下图 a 所示，该结构基于双层电介质：
- 底部为二氧化硅：二氧化硅高度绝缘，并且对光基本上没有反应。
- 顶部为钙钛矿：即甲基铵碘化铅(MAPbI3)，这是一种具有大光电导响应的化合物，在光照下介电常数有显著变化，是电介质的理想候选材料，在光照下可以改变电容。
电极方面：
- 底部电极是高掺杂的硅，用作衬底。
- 顶部电极是 15nm 的、通过热蒸发沉积的金，被设计得足够薄，即便接触电阻很大，在导电时能对光照半透明。
John Labram 表示：
- 以前尝试制造仿人眼设备(视网膜视觉传感器)都是依靠软件或较为复杂的硬件。但我们设计的这种新型传感器，其操作包括在基础设计中，涉及了钙钛矿半导体的超薄层。当置于光下时，钙钛矿会从坚固的电绝缘体变为导体，它具有发展太阳能的潜力，近年来对于钙钛矿，学界也有着广泛的研究。
基于上述结构，当与外部电阻器串联时，电阻器两端的电压降(又称电位差)将在电容器充电 / 放电时暂时出现尖峰，然后恢复到其平衡值。也就是说，传感器会在照度变化时出现尖峰，在其他时候输出零电压(如上图 d 所示)。
研究团队设计的光敏电容器在设计和预期的用途上，都与别的科学团队以前研制的光电电容器不同——光电电容器被设计用来储存来自太阳辐射的能量，而上述传感器被设计用来检测神经形态计算中光学刺激的变化。
模仿人眼感知更加逼真
那么上述传感器实际的仿人眼效果如何呢?
首先，研究人员通过播放视频作为施加给传感器的光学刺激，模拟大型阵列。
结果表明：
- 对应视频的静止部分，传感器输出了较暗的视频;
- 对应视频的移动部分，传感器则输出了较亮的视频。
- 在没有光照的情况下缓慢移动时，传感器输出的较亮区域存在 “鬼影”效应。
可见，传感器对于动态图像有着很明显的反应。
随后，研究人员向传感器施加了以特定角度排列的光刺激，作为另一种检验。
这一实验受到了 20 世纪 50、60 年代一项发现的启发——科学家们注意到猫的某些神经元对以特定角度排列的光刺激有强烈的反应。科学家们认为，这是视网膜中一些细胞的特定排列导致了超极化、去极化，它们对光学刺激会产生反应。
因此，研究人员选择测量两个值：电容器两端的电压降(C 传感器)和电阻器两端的电压降(R 传感器)。
结果如上图所示，这种传感器的确会对某个方向的刺激做出更强烈的反应。
上述两项实验表明，这一传感器的人眼感知模仿能力的确较强。
不仅如此，研究人员还认为，由于这是一种传感器，它不需要任何复杂的读出算法或后处理，它可直接输出电压，电压取决于传感器所瞄准的物体的方向。
John Labram 表示：
- 新型传感器将与神经形态计算机完美匹配，将为下一代人工智能的应用提供动力，如自动驾驶汽车、机器人技术和先进的图像识别。
视觉感知堪比人眼：这款突破性光学传感器模仿人类视网膜，有望带来 AI 重大进展相关推荐
- 弃用基于帧的视觉感知，奔驰/博世/Mobileye瞄准新方向
从低速到高速,是ADAS一直以来安全演进的基本逻辑.对于高级别自动驾驶也是如此,从奥迪到本田,L3级自动驾驶仍然停留在TJP阶段,系统对限速有非常严格要求. 这背后的核心因素之一,是现有电子架构下,从 ...
- 突破帧率天花板，超速全时视觉感知芯片重塑机器视觉技术体系
" 允许失败,鼓励探索--北京是一个对颠覆性技术有很大宽容度的城市.作为全国科技创新中心,这里诞生出一系列领先世界的原创性科技成果.以超速全时视觉感知芯片为例,该芯片由智源研究院院长.北京大 ...
- 自动驾驶的视觉感知包括哪些内容？
点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达 本文转自:3D视觉工坊 文章导读 本文针对自动驾驶行业的视觉感知做 ...
- 视觉感知在数据可视化中的作用
数据可视化的目标是让用户最真实.最高效的接收到界面所传达的信息内容.在过去很长的一段时间,数据可视化是将线下信息移至线上,形成简单数字化模型,达到高效.易懂的展示交互目标. 1.感知与可视化 高效的计 ...
- 数据可视化笔记之视觉感知认知
文章目录 数据可视化 视觉感知与认知 视觉感知和认知(基本概念) 1. 可视化和可视分析过程的主体:用户 2. 视觉感知处理系统 3. 表征单元 4. 格式塔理论 ①贴近原则 ②相似原则 ③连续原则 ...
- 视觉感知特性 【1】人类视觉系统的信息处理机制的4个特性
大约有一个月没有写博客了,毫无疑问这就代表我有一个月没有写到新东西了!!!最近接受师弟的邀请去一家公司兼职,去了才发现自己好多不会好多不懂的东西,可惜没办法说"这个我不会"!哎.. ...
- 高富帅的颜色插值方法：在视觉感知线性变化的色彩空间中进行颜色插值
大多数情况下,我们会给材质提供一个Color值,来整体控制对象的颜色.一般都是使用 Color * ( TextureColor + LightColor) 来做. 颜色值动画是常规的动画特效之一,最 ...
- 自动驾驶系统中视觉感知模块的安全测试
本文由吴昊,王浩,苏醒,李明昊,许封元,仲盛联合创作 摘要 近年来,基于深度学习的视觉感知技术的发展极大地促进了车联网领域中自动驾驶的繁荣,然而自动驾驶系统的安全问题频出引发了人们对自动驾驶未来的担忧 ...
- 数据可视化笔记2 视觉感知、认知与色彩（韦伯定律、格式塔理论、色彩空间、配色工具和网站）
文章目录 韦伯定律 格式塔理论 颜色基本理论 配色网站 视觉感知和认知--定义 感知:客观事物通过感觉器官在人脑中的直接反应. 通俗地说,关于输入信号的本质,看见(视觉).听见(听觉).闻到(嗅觉). ...
最新文章
- R语言max函数min函数计算各种数据对象最大值最小值实战
- boot数据加解密 spring_SpringBoot 集成 Jasypt 对数据库加密以及踩坑
- BurpSuite实例教程讲解
- 电脑安装python为什么显示的是程序丢失-python报错：无法启动此程序，因为计算机中丢失...
- 【高校宿舍管理系统】第九章 寝室编号设置和宿舍初始化以及预选设置
- centos window系统安装django
- Xcode中四种build for 的区别
- sprintf与swprintf
- C语言输出有趣的图形,c语言经典游戏程序源代码大全
- linux 终端命令字体大小,如何实现更改Linux终端字体的种类和大小
- 新浪微博API错误代码说明对照表
- python click 函数
- 尼基塔·丹尼诺夫《梦想者》
- 【转】图像视觉开源代码
- 解决Activiti 7自动部署后不生成数据库act_hi _* 历史表
- buuctf————findkey
- 学点SmallTalk
- springboot+校园新闻数据化系统-计算机毕设 附源码99293
- Windows 11 即将问世 | Windows 10 和 Windows 11 该如何抉择
- SQL中DQL、DML、DPL、DCL、DDL、CCL的概念与区别