概述

针对航空影像的车道线分割,提出了一种基于小波变换增强的对称全卷积网络(FCN)。使用定制的损失函数和新的数据增强步骤,来解决车道标志像素数量与背景像素数量不平衡的问题。发布了自己的航空影像路面标志检测数据集。

  • Paper
  • Code

总结

  • 创新点:

    • 1.建立了航片路面标志数据集
    • 2.使用小波变换保留全频域信息,使用敏感交叉熵函数调节前景与背景像素的不平衡性
  • 不足:阴影区域分割不理想,以及wash out markings不理想
  • 分析:
  • 结论:end-to-end,小目标分割,精度高且鲁棒

1. Introdution

高精地图引入,内容较多,写论文时可以借鉴些。自动驾驶、车道级交通监测、城市管理、城市规划。现有数据采集方式移动测量车,一次只能覆盖一小部分区域,航空相片可解决这个问题。
挑战:航空相片数据两个挑战:遮挡与阴影。车道线分割任务中的挑战:

  • 不同的类别
  • 小尺寸
  • 洗出的样品
  • 罕见案例
  • 复杂的背景

相关研究:#P2B
本文研究:与已有研究不同的是:1)第一个针对遥感数据航空相片,而非地面数据先取路面再检测分割;2)在不同过程中将输入图像的离散小波变换(DWTs)插入到FCNNs中来保存高频信息,以此来专注于小尺寸标记。本文方法选择FCN32s网络并用VGG16作为backbone,因为它简单且准确。CNN在空间域和部分光谱域处理图像,DWT允许从全光谱域分析图像。集成DWT可使网络能够访问在卷积和平均池化层中丢失的强度频率信息,强度频率信息位于像素强度频率变化的频域中,而不在不同的图像波段中。

文章中使用了不同的DWT分解组合进行了实验,这些组合被用作FCN32s的改进版本的输入,最终结果为车道标志的像素语义分割。为了解决车道像素和背景像素数量不平衡问题,应用成本敏感损失函数,将车道标志错误分类作为次要类别强加比背景的错误分类损失更高的损失。

2. Aerial LaneNet

整体架构



小波变换的下采样可以看成是另一种形式的池化,文章中将输入的小波变换信息同传统的FCNNs以及池化层进行合并,为了保留多尺度信息,在数据的不同分辨率下均应用小波变换分解,以此实现低频高频域信息分析和不同分辨率的分析。
离散小波变换 #PA。最后文中是在池化之后再fuse

细节架构

3. Experiments

评价标准

1不同base

2像素权重比例


3对称FCNN的重要性


4DWT的重要性

5DWT分量影响

6不同的融合可能性(DWT与卷积Fig.8)

7混淆矩阵

8与SOTA比较

4. Conclusion

航空相片分割小目标,高精度且鲁棒,提出了Aerial LaneNet,基于FCNN附加小波变换,将丢失的频率域信息得到保留并学习,普通CNN因为卷积池化大多只分析了低频信息。

【2019-TGRS】Aerial LaneNet: Lane-Marking Semantic Segmentation in Aerial Imagery Using Wavelet-Enhanc相关推荐

  1. 【深度学习】【CVPR2019 oral】Structured Knowledge Distillation for Semantic Segmentation

    [CVPR2019 oral]Structured Knowledge Distillation for Semantic Segmentation KD Intro Approach Structu ...

  2. 【论文翻译】AFFormer:Head-Free Lightweight Semantic Segmentation with Linear Transformer

    论文地址:https://arxiv.org/pdf/2301.04648v1.pdf Abstract ​ 现有的语义分割工作主要集中在设计有效的解码器上:然而,整体结构引入的计算负载长期以来一直被 ...

  3. 【语义分割】Fully Attentional Network for Semantic Segmentation

    文章目录 一.背景和动机 二.方法 三.效果 本文收录于 AAAI2022 一.背景和动机 语义分割中,non-local (NL)的方法起到了很好了捕捉 long-range 信息的作用,大致可分为 ...

  4. 【语义分割】CVPR2021_Rethinking BiSeNet For Real-time Semantic Segmentation

    文章目录 一.背景 二.动机 三.方法 3.1 Design of Encoding Network 3.2 Decoder 四.实验 4.1 消融实验 4.2 和 SOTA 方法对比 Paper: ...

  5. 【论文阅读】Fully Convolutional Networks for Semantic Segmentation【CVPR,PAMI】

    摘要 我们的研究表明,卷积网络通过端到端.像素到像素的训练,在语义分割方面比之前的最佳结果有所提高 我们的关键见解是构建完全卷积网络,它接受任意大小的输入,并产生相应大小的输出,并具有有效的推理和学习 ...

  6. 【论文阅读】Structured Knowledge Distillation for Semantic Segmentation

    概述 这篇论文来自CVPR2019 Oral. 论文的出发点:语义分割的模型往往很难兼顾速度与精度,也因此语义分割的网络分为两类,论文中描述为 cumbersome segmentation netw ...

  7. 【论文翻译】Fully Convolutional Networks for Semantic Segmentation

    论文题目:Fully Convolutional Networks for Semantic Segmentation 论文来源:Fully Convolutional Networks for Se ...

  8. 【语义分割】DUC -- Understand Convolution for Semantic Segmentation

    参考:Understand Convolution for Semantic Segmentation

  9. datatable 汇总_【2019 版】中国石油大学(北京)计算机考研信息、资料汇总

    院校简介 中国石油大学(北京)(China University ofPetroleum,Beijing)简称中石大(CUP),创建于1953年,由中华人民共和国教育部直属,位列国家首批"2 ...

  10. 【新书推荐】【2019.09】溢油合成孔径雷达成像机理

    [2019.09]溢油合成孔径雷达成像机理Synthetic Aperture Radar Imaging Mechanism for Oil Spills,共300页. 如果需要电子版,请联系QQ: ...

最新文章

  1. 微信8.0大更新,6大新功能加入!未来还将引入自己的输入法!
  2. C# Delegate(委托)与多线程
  3. 程序员面试题精选100题(56)-C/C++/C#面试题(4)
  4. DL之CNN:基于CRNN_OCR算法(keras,CNN+RNN)利用数据集(torch,mdb格式)训练来实现新图片上不定长度字符串进行识别—预测过程
  5. struts2中实现文件的上传
  6. scanf(%c, ch)和scanf( %c, ch)和scanf(%s, str)的注意事项
  7. ASP.NET 2.0中实现模板中的数据绑定
  8. 我要做 Android 之 ContentProvider
  9. 三种代理服务器以及反向代理详解
  10. linux bitmap save 图片_Linux内核浅析-进程调度时机和过程
  11. idea怎么调试jsp页面_一文学会JSP
  12. k均值聚类+基于核的k均值聚类+C++实现
  13. ENVI学习总结(十一)——NDVI的计算
  14. UE3名称结构(Name)
  15. 在VSAN实验环境下如何将普通HDD标注成SSD
  16. SAP 下载EXCEL模板
  17. Remote Desktop Connection 7.0
  18. VSTO开发Powerpoint插件
  19. 【历史上的今天】9 月 14 日:中国第一封电子邮件;世界上最早的电子银行系统;微软发布 Windows Me
  20. 智牛股_第一章_交易平台_项目介绍、 工程规范及环境搭建

热门文章

  1. leaflet 导出图片,打印图片(A4横版或竖版)
  2. [交易日记]2016-11-24交易笔记
  3. 警告:Named Route ‘Main‘ has a default child route. When navigating to this named route
  4. 【matplotlib】绘图模块介绍
  5. linux indent添加,linux indent格式化代码
  6. 嵌入式睡眠监控报警仪的研究及设计
  7. C语言-字符0、数字0和‘\0’的区别
  8. 如何自动生成表关联关系关系图 或 实体关系模型图------EER图
  9. AMD CPU 历史表
  10. 生信蛋白分析数据库与ID转换