畅想

目前的视频安防手段主要还是记录不同角度的二维画面,实时(比如闯红灯抓拍)或事后分析处理。由于安防摄像头数量众多,安装角度和安装地点分散,很难对存量的巨大数量的视频录像做有效分析。目前很多安防视频平台正在利用深度学习的能力不断增强对视频解读的能力,但是效果基本就是类似去数据库里查某些字段,对普通一线的使用人员来说,这些视频分析手段存在一定的门槛,很难有一个简单的手段把大量的视频画面整合成一个整体。

说白了,目前的视频安防就像医院里拍片子,布的点再多,也不过是多个角度的二维画面,而不是一个实时活生生的3D模型,看懂仍然需要专业知识。

降低门槛的办法不是没有,那就是把信息整合成自然的方式呈现出来。

设想有这样一种叫做“上帝之眼”的魔幻雷达,它能以3D的方式还原真实的世界,就像实况足球一样,可以让人从任意角度、任意距离、任意视场角回放整个世界发生的所有细节。

这听起来很像刘慈欣的小说《镜子》里的情节,每个原子都能在那个设备中被仿真出来。当然我们期望的这种魔幻雷达不是仿真世界,而是记录世界。

有了这种魔幻的雷达,我们就能以3D的方式在电脑里渲染出来世界运行的样子,以需要的任何方式去观察。比如对于一栋房子,可以去掉墙壁观察里面的所有任务的活动,就像上帝一样无视一切遮挡。

对于一个小区或者一个街道,可以像看沙盒一样看到全局的细节。

上图是一个常见的小区渲染图,但是如果这个图是实时3D的,而且和真实的世界一模一样,就可以放大看、离近看。什么区域人多,有没有人打架,都一清二楚。有了这个雷达,就不需要再去巡逻了,带个VR眼睛就能在虚拟空间中进行巡视,说不定这玩意还可以用作旅游呢。

分析

从上面的畅想中可以知道,要实现“上帝之眼”打开上帝视角,可以把需求分解为两部分,一部分是比较固定的场景,场景可以是一个街道,也可以是一栋楼的所有房间。另一部分就是变化较大的行人和汽车,今天我们只考虑行人这个元素,暂不考虑汽车。

技术分解

3D场景重建

3D场景重建是一个比较成熟的领域。

如果是室外的3D场景,可以采用无人机进行倾斜摄影,有大量成熟的商业方案可选择。


室内的3D场景重建也有很多成熟的方法,双目、激光甚至结构光。比如网上有家叫做Auto3D的公司就提供室内3D重建设备,据说已经在链家APP上用上了。

除了这些传统方法,深度学习领域有大量单目3D场景重建的努力,也取得了不错的效果,但是商业应用上还不够成熟,相信不久的将来(有可能是5年内)会有成熟的商业化方案。

有了3D场景重建,最终可以在任意角度得到的类似下面的透视图

3D行人姿态估计

浙大CAD实验室三维视觉研究组在CVPR2019上提出了一种多视角多人三维姿态估计新方法,可以在在给定标定好的多视角图像, 恢复场景中多人的三维姿态。

安防摄像头基本就是固定且多视角的,刚好可以利用这种技术。

3D行人渲染

旷视研究院在CVPR2019提出一种行人重识别监督之下的纹理生成网络,该模型可从单一图像中生成3D纹理。

可以把旷视和浙大CAD实验室的方案结合起来,用于生成行人的3D姿态纹理。

多目标跟踪和重识别

有了行人的3D渲染,还要结合多目标跟踪技术和行人重识别技术,减少姿态估计和渲染的计算量,并解决行人交叉、遮挡等问题。

参考资料

本文所有图片来自网络,我本人没有版权。侵立删。

姿态估计

浙大CAD实验室三维视觉研究组提出快速鲁棒的多视角多人三维姿态估计新方法,已开源

行人重识别和行人3D纹理

旷视研究院提出一种行人重识别监督之下的纹理生成网络

3D场景重建

目前有哪些做倾斜摄影比较好的公司,国内的和国外的都可以?

计算机视觉方向简介 | 深度相机室内实时稠密三维重建

Auto3D往事

单幅RGB图像整体三维场景解析与重建

基于单目视觉的三维重建算法综述

视频安防“上帝视角“的畅想相关推荐

  1. 【解决方案】SkeyeVSS视频安防综合管理系统助力解决夜吃烧烤安全隐患,为夜市安全保驾护航

    炎炎夏日,很多市民选择夜间出行就餐娱乐,因此烧烤摊等夜市文化盛行.然而,伴随着市民的休闲放松,部分地区先后爆出烧烤摊酒后闹事.寻衅滋事.打架斗殴等不文明行为,严重损害夜出居民的人身.财产安全.各地安保 ...

  2. SkeyeVSS视频安防综合管理平台打造智慧楼宇“可视、可析、可控、可建、可管”安防体系

    当下,大数据.人工智能.5G等新兴技术正引领城市向智能化.数字化方向发展,楼宇作为城市的基石,智慧化转型升级是必然趋势. 传统楼宇管理方式比较落后,各系统互相独立.数据分散不共享,缺乏感知.预警和应急 ...

  3. 监控在服务器中的作用和功能,视频安防监控服务器能实现哪些功能以及解决哪些问题呢...

    随着物联网的快速发展,视频安防监控服务器开发也在不断的进步,核心技术是进行视频监控服务器开发的重要基础.但由于要满足用户的各种各样的需求,还需要解决很多相关技术.那么视频安防监控服务器能实现哪些功能? ...

  4. 计算机网络技术现代安防是啥意思,现代化校园视频安防监控系统 具有哪些特点呢...

    原标题:现代化校园视频安防监控系统 具有哪些特点呢 校园视频安防监控系统主要是利用监控设备对学校场所进行全方位.全高清视频立体化管理和监控,从而维护校园秩序和安全,同时能为同学们的生活和学习营造更好的 ...

  5. 【解决方案】SkeyeVSS视频安防综合管理平台呵护群众“舌尖上的安全”

    古人有云:"民以食为天,食以安为先."食品安全是百姓最为牵挂的民生问题之一,近年来食品安全事故频发,如何呵护群众"舌尖上的安全"是各地市场监管局需要解决的首要难 ...

  6. SkeyeVSS视频安防综合管理系统助力智慧楼宇解决方案

    高空抛物作为居民住宅小区管理的通病,其管理整治关系着社会的治安稳定和群众的生命安全,然而仅依靠传统的口头宣传和物业监管已无法达到关键性效果,特别是高楼层居民为了贪图一时方便,对外抛物产生更为严重的公共 ...

  7. 后疫情时代,SkeyeVSS视频安防综合管理平台如何为疫情防控提供服务支撑

    当前国内疫情卷土重来,呈多点散发与局部暴发并存的特点.为强化精准溯源.科学防控,各地相关部门均加强建设视频防疫防控体系,着力推动视频监控系统部署,落实"监控助力疫情防控".不可否认 ...

  8. RTSP视频安防智能监控系统EasyNVR配置完成后登录web页面不显示数据是什么问题?

    EasyNVR视频安防智能监控系统可以说是一款极为轻便的视频安防监控系统,部署在服务器且进行简单配置后即可直接使用,无需自建服务器即可实现网页无插件直播. 正常情况下EasyNVR配置完成后只需通过I ...

  9. 直播那么火,视频安防公司也想插一脚

    近日视频安防公司万佳安在深圳召开发布会,推出了WorthCloud视频云平台,"值得看"直播电商平台和直播摄像机X6.万佳安是一家有十多年历史的视频安防解决方案公司,去年11月在新 ...

最新文章

  1. windows常用命令有哪些(整理)
  2. php和python写爬虫-为什么选择用python做爬虫
  3. 检索数据_18_按照多个字段排序查询结果
  4. 外部工具连接SaaS模式云数仓MaxCompute—ETL工具篇
  5. golang学习笔记01
  6. linux服务器非root用户安装Anaconda,并配置tensorflow/pytorch
  7. 表格列数太多 页面怎么设计_B端产品设计规范分享
  8. Python 使用pyecharts生成echarts图像
  9. ANSYS18的简略安装教程
  10. 机器学习实战(一)xgboost实战
  11. 计算机基础知识题库选择题,计算机基础知识题库选择题
  12. python绘制缓和曲线_CAD绘制缓和曲线说明
  13. openglshader实现虚拟场景_OpenGL着色器教程
  14. 华为路由与交换 eSight基本概述学习笔记
  15. 电子墨水+android+平板,请推荐一款电子墨水屏的安卓平板
  16. 无法启动计算机的病毒是,电脑病毒导致系统中的exe文件无法打开如何解决
  17. 智慧政务说明书 督察督办(八)
  18. 洛谷 P2962 [USACO09NOV]灯Lights
  19. 笔记本gtx1650最好用驱动_Intel EVO平台认证有啥用?只看真实性能 闭着眼买笔记本都不会错-Intel,EVO,笔记本,认证 ——快科技(驱动之家旗下媒体)-...
  20. 正面杠腾讯音乐与网易云音乐,抖音与快手谁能“弯道超车“?

热门文章

  1. 学习笔记——CDQ分治
  2. Linux基础命令-tar打包压缩文件
  3. Ramdisk虚拟内存盘,Swap分区
  4. ubuntu 12.10 安装 QQ2012
  5. 什么是容器编排及容器编排是怎么工作的?
  6. 使用html,css实现简单的导航栏
  7. java hasnext_java – hasNext() – 什么时候阻止,为什么?
  8. Java 调用Python+Opencv实现图片定位
  9. 后台服务器用户管理模块的解析
  10. Win32ASM学习[16] :乘除指令: MUL、IMUL、DIV、IDIV