摘要+介绍部分

文章首先提出要有效地利用不同的光谱，主要的问题在于信息融合过程

总的来说，就是下面这张图

一、提出的方法

（1）融合：

文章提出的融合方法就是把两个模态的特征图先concat+BN+3*3卷积，然后为了防止过拟合，循环中融合部分的3*3卷积都设置一样的权重

其实这里不太懂为什么共享权重可以防止过度拟合！！

（2）细化：

细化就是将融合的特征图和单一模态特征图逐元素相加后再经过一个激活函数，即得到细化后的单一模态特征图

（3）语义分割监督：

图中对每一个经过细化后的特征图都引入了语义分割辅助监督信息，帮助网络去更好的优化

并且语义分割信息可以帮助决定何时特征图的一致性和互补性达到了平衡，从而不再进行循环

（4）最终的融合

二、实现细节

1.数据集

数据集采用清洗过后的KAIST数据集（消除了注释错误的）和FLIR数据集（这里只选取了包含car、person、bicycle三类；并且手动删除了没有对齐的图像对）

2.结果图

为了公平起见，分别使用清洗过后的数据集和未清洗的数据集的比较结果

3.循环次数的图

可以看到，在采用3次循环时，效果最好

欢迎大家批评指正！！！！

【MULTISPECTRAL FUSION FOR OBJECT DETECTIONWITH CYCLIC FUSE-AND-REFINE BLOCKS】论文阅读相关推荐

Small Object Detection using Context and Attention（论文阅读笔记）
Small Object Detection using Context and Attention 论文阅读笔记出处:2021 International Conference on Artifi ...
Object Detection in 20 Years A Survey 论文阅读笔记
文章链接:https://arxiv.org/pdf/1905.05055.pdf 1.Introduction 作为计算机视觉的基本问题之一,目标检测构成了许多其他计算机视觉任务的基础,例如实例分割 ...
《Fast Video Object Segmentation by Reference-Guided Mask Propagation》论文阅读
Abstract 我们提出了一种有效的半监督视频对象分割方法. 与其他方法相比,我们的方法在运行时间很短的情况下实现了与最先进的方法相比的准确性.为此,我们提出了一个深度的Siamese编码器 - 解 ...
论文阅读06——《CaEGCN: Cross-Attention Fusion based Enhanced Graph Convolutional Network for Clustering》
欢迎到我的个人博客看原文论文阅读06--<CaEGCN: Cross-Attention Fusion based Enhanced Graph Convolutional Network f ...
论文阅读 End-to-End Multi-View Fusion for 3D Object Detection in Lidar Point Clouds
[论文阅读] End-to-End Multi-View Fusion for 3D Object Detection in Lidar Point Clouds 原文链接:https://arxiv ...
【论文阅读】【综述】3D Object Detection 3D目标检测综述
目录写在开头 3D Object Detection 相关博客: Sliding window Vote3Deep: Fast Object Detection in 3D Point Clouds ...
论文阅读 R-FCN: Object Detection via Region-based Fully Convolutional Networks
本文转载自: http://www.cnblogs.com/lillylin/p/6277094.html R-FCN论文阅读(R-FCN: Object Detection via Region-b ...
rgb fusion检测不到显卡_【论文阅读27】Co-Fusion
主要内容物体级别的语义SLAM.维护一个背景模型和多物体模型,每个模型由面元地图表示. 基于运动分割和语义信息检测运动物体. 使用基于ICP对齐的几何误差和基于颜色差异的光度误差跟踪背景模型(相机位 ...
Feature Selective Anchor-Free Module for Single-Shot Object Detection论文阅读翻译 - 2019CVPR
Feature Selective Anchor-Free Module for Single-Shot Object Detection论文阅读翻译文章目录 Feature Selective A ...

【MULTISPECTRAL FUSION FOR OBJECT DETECTIONWITH CYCLIC FUSE-AND-REFINE BLOCKS】论文阅读