在AI时代,越来越多的生物特征可以被提取出来并进行识别,目前市场应用比较多的有人脸识别、指纹识别、声纹识别等,而门槛相对较高的虹膜识别、掌静脉识别、步态识别技术等技术则在落地应用中难觅踪影。

在疫情发生后,应用范围广泛的人脸识别、指纹识别等技术却出现了极大的应用受阻。比如人脸识别技术,只提取人的脸部特征信息,在戴口罩、或者灯光黑暗、拍摄角度不佳、帽子遮挡等情况下,人脸识别技术难以发挥效用。为此,弥补人脸识别技术不足的一些技术也应运而生,比如步态识别技术、ReID技术,这两个技术都能在一定程度上弥补人脸识别的不足。

步态识别技术和ReID技术其实是两个并不相同的技术,但不了解它们的人,很容易将两者混为一谈,接下来将从几个方面来剖析了解两者究竟有何不同,以及它们在落地应用的场景中又有哪些优势?

两者的概念不同

步态识别技术:靠身体体型和走路姿态识别人。

ReID技术:靠不变的衣服、多摄像头追踪识别人。

什么是步态识别技术?

它是通过身体体型和行走姿态来分析人的身份,其物理基础是每个人不同的生理结构:身高、头型、腿骨、臂展、肌肉、重心、神经灵敏度等。

在日常生活中,如果在远处出现一个你熟悉的身影,即使看不清面部,或者穿了一件你从来没有见过的衣服,但是凭借你对他的熟悉程度,你依然可以认出他的身影。这其实是人类视觉的一个步态识别。

步态识别是一种生物特征识别技术,是对于人的全身特征的一个识别,具有远距离、跨视角、非受控的优势。

最初,大家了解这个技术源自一部电影《碟中谍5》,在当时看来,很有科幻色彩。随后,科研机构也对此展开了研究,但多年来,这个技术还停留在实验阶段,技术概念多于落地应用。

CPS中安网向多家企业了解这个技术的进展和落地应用情况,但意外的是,收到的回复,要么是已经不涉足了,要么是还停留在概念阶段,未有实际的技术突破。

(大华步态识别技术图示)

唯有大华股份和银河水滴公开表示在步态识别技术领域取得新的突破,其中,大华在2019年深圳安博会上发布的7大“黑科技”中,就有一个与步态识别相关的技术——跨相机跟踪技术:使用目标检测与步态识别技术,实现多个摄像机之间目标物体的视频接力跟踪

但对于这项技术的场景落地应用,大华并没有过多着墨,以致目前在市场上,银河水滴成为唯一一家以步态识别技术为核心技术的人工智能企业,并且已经落地应用。

什么是ReID技术?

行人重识别(Person Re-identification)也称行人再识别,简称为ReID,是利用计算机视觉技术判断图像或者视频序列中是否存在特定行人的技术。

在多摄像设备网络下对行人进行检索,利用步态动作、身体特征等更为全面的信息来识别人物,无论单独使用还是与人脸识别相结合,都能发挥更大的应用价值。特别是当摄像头无法抓拍到清晰的人脸时,行人重识别技术就发挥着非常重要的作用,只需看行人的穿着、体态、发型就“认出”人。

ReID也有另外一个名称,叫“跨镜追踪”,可以对无法获取清晰拍摄人脸的行人进行跨摄像头连续跟踪,从不同摄像机拍摄的图像或视频中找出同一个人物,增强数据的时空连续性。

(大华视频结构化服务器以图搜图应用效果)

目前,大华、宇视、旷视、商汤、依图、云从、阿里、云天励飞等涉及AI业务的企业几乎都有这项技术,有很强的市场成熟度。

两者提取的特征点不同

步态识别技术提取的特征点包含两个方面,一方面是提取静态的内部特征,如身高、头型、腿骨、关节、肌肉等生理结构,这些特征相对比较稳定,在很长一段时间,都不会发生大的变化;第二方面,是提取人的动态特征,比如走路姿态、手臂摆幅、晃头耸肩、运动神经敏感度等,这些动态特征与身体属性密不可分,很长一段时间内也会相对比较稳定。但是,这些动态特征的提取与处理难度也更大。

ReID技术依靠行人的整体姿态来做检索,主要提取静态的外部特征,比如穿着、背包、发型、雨伞等,通过分析行人的穿着和体态来识别人。但是,这些静态的外部特征很容易发生改变,比如整体外型发生变化,换了衣服、发型、帽子、鞋子,甚至是伪装姿态、体型等等,那么,行人重识别在此时能发挥的作用就比较有限。

算法模型训练不同

(银河水滴步态识别技术)

步态识别技术,首先是用摄像头对人走路的过程进行数据获取,然后进行数据的检测和分割,也就是说将人形区域和背景区域剥离开来。然后把行人在整个行走过程中的每一帧画面进行步态分割,形成整个走路周期,然后再对步态的特征进行提取和表达,最后跟步态数据库中的数据进行比对和识别。

行人动态信息较多,每一个环节其实都是一个非常难的问题。比如在数据获取阶段,怎么获取数据,怎么构建步态识别的数据库;在获取到数据后怎么分割前景和背景,怎么让它更精确;在特征表达的阶段,怎么解决跨视角的识别问题等等。

银河水滴研发一套大规模的步态识别系统,涵盖软件“步态识别互联系统4.0”和硬件“小规模检索步态识别一体机”、“大规模检索-步态抓拍盒子&阵列”,将海量的视频数据接入到步态识别系统中,利用抓拍盒子、抓拍阵列等硬件的处理,将原始的视频进行固态的结构化处理。

现在的一些核心算法,包括超精度的目标分割,能达到的精度已经跟人眼差不多;还有极速的目标检测,以及跨视角的识别精度都已经处在世界首位。除此之外,步态识别技术还需要庞大的贴近实际场景的步态数据库,银河水滴参与和创建公开、自有的步态数据库,目前还与公安系统和司法系统共同推进造库计划,大规模地将嫌疑人的步态数据采集入库。

行人重识别ReID技术方面,依图科技最近在该领域有了新突破,为此,在这里以依图科技的算法水平作为参考进行阐述。在行人重识别技术领域,首位命中率(Rank-1 Accuracy)和平均精度均值(Mean Average Precision,mAP)是业内公认的衡量算法水平的核心指标。在三大ReID公认数据集Market1501、DukeMTMC-ReID、CUHK03上,依图将衡量算法性能的两大关键指标“首位命中率”(Rank-1 Accuracy)及“平均精度均值”(Mean Average Precision,mAP)的六项数据全部提升,刷新世界记录。

(依图算法水平的核心指标)

首位命中率高,意味着算法能够在众多图像中准确找出最容易识别或者匹配的那张,并不能反应模型的真实能力,尤其是应对复杂场景的表现;而平均精度均值mAP值越高,说明系统的实用性越好,既能查得全也能查得准,能够较好地应对多遮挡、光线暗、画面模糊等情况。因此,评价行人重识别算法性能时需要结合mAP值,它反映的是系统的综合检索性能。

依图科技深度优化了ReID算法框架,提升了算法效率,通过结合AutoML等前沿技术,进一步实现了模型参数的自动搜索与迭代,突破了依赖算法研究员手工设计与调优的传统算法开发流程,在降低人力成本的同时,使得算法的泛化性能更强。

两者面对的挑战不同

针对步态识别技术

(银河水滴步态识别系统)

步态识别技术具有非接触、远距离和不容易伪装的优势;但在落地应用时,步态识别技术需要随机采样大量的时序步态数据进行模型学习,建步态库,然后根据步态数据提供系统解决方案。

在前期建库采集数据的时候,步态识别的正面识别率低,容易受到性别、步长、节奏、速度等的干扰;同时,相机角度、天气条件、遮挡物、附属物、道路崎岖、甚至衣服光照等都会影响准确性;比较难获取年龄、性别等信息,而且非普遍性,如残疾人不适合步态识别技术。那么在落地商用的过程中,大多数监控场景都是比较复杂的,可能存在多个运动物体,行人图像容易受天气、光照等外界因素的影响,而有所变化。以日照条件下运动目标的影子为例,它可能与被检测的目标相连,也可能与目标分离。如果是前者,影子扭曲了目标形状,使基于轮廓的步态识别方法不可靠;如果后者,影子可能被误认为是场景中一个错误的目标。因此,在实际场景下的步态检测面对的挑战不小。

银河水滴为了应对这些挑战,推出了一系列产品和解决方案:步态检索智能一体机“水滴神鉴”,步态识别、检索与追踪系统“水滴慧眼”,步态抓拍盒子,步态人脸抓拍机,WATRIXBOX等。通过采取三种不同的模式来建立实战的步态数据库:

(1)步态人脸自动建库(武汉模式):采集对象:有人脸信息的在逃人员/重点人员;

(2)步态采集系统(上海模式):采集对象:未来需关注的重点人员;

(3)未破获案件视频库(重庆模式):采集对象:无人脸信息的在逃人员/重点人员;

同时,在解决方案中还融合多种技术,包括ReID、足迹辨别、人脸识别、电子围栏、视频结构化等。

这些产品和解决方案,让银河水滴的步态识别技术在派出所、看守所、监狱、公安刑事案件等领域中得到应用,为人脸识别提供较大的补充。

针对ReID技术

(行人重识别存在挑战)

行人重识别技术是需要利用大量单个人体同一时段不同监控下的图像信息进行模型学习。在用于监控场景中相对较短时间内的行人识别,精度较高,算法速度可达到毫秒级别。

在真实场景下,ReID算法需要做到在跨时间段、跨场景、跨不同成像质量的图像采集设备下进行高精度的快速识别,而这些摄像机所覆盖的范围彼此并不重叠,导致缺乏连贯的信息。而且在不同画面中,人物的姿态、行为及外观会发生较大变化,不同时间、场景的光照、背景和遮挡物各不相同,背景中还常有体型、衣着相似的其他人物干扰;摄像机的分辨率也有高有低,人物在画面中出现的位置有远有近,这些都对ReID技术提出了极大的挑战。

行人的姿态多变导致人脸上广泛使用的对齐技术也在ReID中失效。行人的数据获取难度远远大于人脸识别数据获取难度,而行人的信息复杂程度又远远大于人脸,这两个因素叠加在一起,使得ReID的算法研究变得更加困难,也更加重要。通过算法的有效设计,降低对数据依赖来实现ReID效果的突破是现在业内的共识。这不仅对算法提出更高要求,也需要更高效的芯片提供强大的算力支持,二者缺少任意一个,都会影响行人重识别的实际应用价值。

       依图在2017年投入云端AI芯片QuestCore(求索)的研发,并于2019年5月“发布即商用”。QuestCore是全球首颗云端视觉AI芯片,提供强大算力,单路摄像头功耗不到1W。在行人重识别实战应用中,依图研发人员对算法做了进一步优化, 依托依图自研AI芯片, 在仅凭穿着、体态特征的条件下,已能将行人重识别技术做到2017年~2018年人脸识别的精度。

在智慧城市领域,ReID技术能通过轨迹还原功能,快速筛查可疑人员并进一步锁定出行区域,进而做到精准预防和打击。应用到智能园区和智能交通领域,ReID可对于陌生人等可疑人员进行全方位刻画,有效保障园区安全;在人流密集的超市、园区等大型公共场所,ReID能够帮助实现不慎走失的儿童、老人的迅速查找;在地铁站、机场等交通枢纽区域,ReID技术可以配合人脸、局部的动作和姿态进行快速识别,大幅提升人员过检速度。在智能交通领域,ReID有助于在道路、车辆和驾驶员之间建立快速的智能通信联系,形成人、车、道路的完整调动闭环,精准感知交通路口各个方向的车辆数量、流量和密度,为交警决策提供准确依据;在无人驾驶领域,ReID可有效对车辆、行人、障碍物、道路以及交通信号灯和交通标识进行感知,构建真正智能的交通体系,带给人们更加安全、便捷的出行体验。在数据时代,AI技术赋能视频监控后,视频图像可以全面看、自动看、关联看,可以跨系统、跨区域,而且算得快、识得准。

无论是人脸识别、虹膜识别、指纹识别和步态识别等生物识别技术,还是图像检索的行人重识别技术,通过计算机视觉或机器学习的方式,发展到如今,都各有所长,彼此互补。步态识别技术、行人重识别技术虽然有很多的不同,但它们在人脸识别不能发挥效用的时候,都能起到重要的补充识别作用。而且,这些识别技术在实际落地应用的时候,若要发挥更大的效能,必定是需要彼此融合、彼此学习,不能完全割裂或独立。相信在不久的将来,多种识别技术彼此结合,必定能满足市场更多更丰富的场景应用需求。

步态识别技术与ReID技术相关推荐

  1. 50米外,秒读你的“活体密码”——步态识别将带给用户更好的识别体验

    不知道看过<碟中谍5>的朋友对这个场景是否还有印象:阿汤哥的搭档班吉在破解了指纹解锁.三重物理旋转密码锁挑战后,迎来了"步态识别锁".班吉对这个系统束手无策,只能依靠阿 ...

  2. 中国式创新技术“步态识别”终于来临,你大胆地走两步,我就知道你是谁

    放完假的数据君,回到办公室,苦恼该码一篇什么文章,来给各位送上"节后的祝福". 这么想着,数据君便开始浏览最新的科技报道: 什么鬼!这难道是什么新兴的黑科技吗?! 数据君赶紧查了下 ...

  3. 《碟中谍5》中惊鸿一瞥的步态识别技术,究其神在哪里?

    <碟中谍5>中惊鸿一瞥的步态识别技术,究其神在哪里? 电影<碟中谍5>中,黑客班吉起初并未把门禁放在眼里,当他得知必须经过"步态识别系统"的监测时,最后只能 ...

  4. 云从的多粒度网络(MGN)的结构设计与技术实现-ReID行人重识别

    云从的多粒度网络(MGN)的结构设计与技术实现-ReID 1.简介 全局特征和局部特征的结合是提高人的再识别(re-ID)任务识别性能的一种有效方法.以前的基于部分的方法主要集中在定位具有特定预定义语 ...

  5. 行人重识别(ReID) ——技术实现及应用场景

    导读 跨镜追踪(Person Re-Identification,简称 ReID)技术是现在计算机视觉研究的热门方向,主要解决跨摄像头跨场景下行人的识别与检索.该技术能够根据行人的穿着.体态.发型等信 ...

  6. 即使隐藏脸部也没用 最新步态识别技术将用来辨识嫌疑犯

    人脸辨识还不够,中国政府已经导入新的步态辨识(gait recognition)技术,可以凭影片中的体形和走路姿势来辨识可能的罪犯,即使隐藏脸部也无法遁形. 报导指出,中国公安已经在北京和上海街头部署 ...

  7. 中科院谭铁牛爱徒研发出《碟中谍5》中的步态识别技术,不看脸50米内在人群中认出你

    <碟中谍5>中惊鸿一瞥的步态识别技术,究其神在哪里? 电影<碟中谍5>中,黑客班吉起初并未把门禁放在眼里,当他得知必须经过"步态识别系统"的监测时,最后只能 ...

  8. 一种基于步态识别技术的智能案件串并系统——AI新应用

    一.系统介绍 智能串并系统是武汉盈力科技自主研发的智能案件串并分析产品.依托公安视频侦查实战应用平台,智能串并系统以视频/图片结构化技术为基础,对上传的案件文本.人体运动特征等各要素进行智能化提取,然 ...

  9. 行人重识别技术(Re-ID)概述、研究现状以及相关数据集下载

    ReID技术概述 什么是ReID 一般流程 Re-ID特点 研究现状 难点 数据集 reid常用数据集以及下载链接 评价指标 实现思路 研究方式 基于表征学习 基于度量学习 基于局部特征 全局特征 切 ...

  10. 刷新三项世界纪录的跨镜追踪(ReID)技术是怎样实现的?进来了解一下

    跨镜追踪(Person Re-Identification,简称 ReID)技术是现在计算机视觉研究的热门方向,主要解决跨摄像头跨场景下行人的识别与检索.该技术能够根据行人的穿着.体态.发型等信息认知 ...

最新文章

  1. 经验分享:服务器托管必用的10大工具
  2. Linux export 命令用法
  3. Understanding Clouds from Satellite Images的kernel调研+肉眼识别每种云朵示例
  4. MVC简单实现插件Demo-从底层理解MVC路由匹配浏览器请求的URL
  5. mysql批量导入已经格式好的文本数据
  6. redis哨兵主从不切换_Redis的三种模式:主从、哨兵、集群
  7. server sql 数据c盘迁移d盘_C盘空间不足怎么办?如何给C盘扩容?
  8. 美团推出外卖版拼多多;iOS 14 Beta 3暂禁用3D Touch功能;Rust 1.45 发布| 极客头条
  9. 修改linux最大文件句柄数
  10. Mysql 设置 max_user_connections
  11. Linux socket
  12. UnauthorizedAccessException Invaild cross-thread access
  13. html json编辑器,JSON.html HTML Editor
  14. SPSS安装多次显示请输入注册的电子邮箱时,采用的解决办法。亲测有效!
  15. 第二届亚太应用经济学会博硕士论文研讨会长沙落幕
  16. android版本低无法安装微信,解决低版本安卓4.4.4无法安装微信的问题
  17. 两年,从纯小白到腾讯阿里,应届非计算机毕业生的2014互联网求职之路
  18. 网络--VLAN知识详解
  19. 体积 524MB,无广告!微信输入法来了
  20. 2.AZ900资源汇总

热门文章

  1. nginx 5xx 状态码分析
  2. 谷歌浏览器默认最小字体的解决方法以及各浏览器对字体大小的支持
  3. 手机局域网关闭计算机的方法,用手机控制电脑关机 方法介绍【图文】
  4. 微信第三方登陆,无需注册一键登录,获取用户信息,PHP实现方法.
  5. 线程生命周期与创建线程的多种方式
  6. 华佳慧科技:OSN500设备的RPLCUR性能事件
  7. Silvaco仿真学习
  8. 数据结构与算法笔记 二叉树、二叉搜索树、二叉平衡树的区分与关系
  9. C#: 生辰八字五行计算算法
  10. vue开发pc端支付方式(支付宝、微信、银联)