CMGCN 2022ACL

论文题目（Title）：Multi-Modal Sarcasm Detection via Cross-Modal Graph Convolutional Network

研究问题（Question）：反讽检测

研究动机（Motivation）：纯文本描述可能错误地表达真实情况。

主要贡献（Contribution）：

1.作者指出自己是第一个探索使用基于辅助对象检测的图模型来建模多模态讽刺检测中关键文本和视觉信息之间的矛盾情绪。

2.利用图像对象的属性-对象对作为桥梁，提出了一种新的构建交叉模态图的方法，通过重要程度不同的边显式连接两个模态

3.在一个公开的多模态讽刺检测基准数据集上的一系列实验表明，作者提出的方法达到了最先进的性能。

研究思路（Idea）：首先检测与图像模态描述配对的对象，使学习重要的视觉信息成为可能。然后，通过对对象的描述作为桥梁，确定图像情态对象与文本情态语境词之间关联的重要性，为每个多情态实例构建跨模态图。此外，作者设计了一个跨模态图卷积网络，以理解多模态讽刺检测中模态之间的不一致性关系。

研究方法（Method）：

研究过程（Process）：

（1）Text-modality表示

（2）Image-modality表示

（3）建立跨通道图

（4）跨模态融合

（5）学习目标

1.数据集（Dataset）

2.评估指标（Evaluation）

准确度（ACC）、F1-score、Macro-average

3.实验结果（Result）

证明了该方法是目前效果最好的方法，通过消融实验，验证了各个参数设置。

总结（Conclusion）：本文提出了一种新的多模态讽刺检测的跨模态图结构，该结构将关键的视觉区域显式连接到高度相关的文本标记，用于学习讽刺表达的不一致情绪。

CMGCN 2022ACL相关推荐

MABSA（Multimodal Aspect-Based Sentiment Analysis）2022ACL 预训练
大致浏览,没有细看. 论文题目(Title): Vision-Language Pre-Training for Multimodal Aspect-Based Sentiment Analysis ...
VLN阅读报告1：Vision-and-Language Navigation综述（2022ACL）
本博文是结合论文Vision-and-Language Navigation: A Survey of Tasks, Methods, and Future Directions,对VLN进行学习总结 ...
《论文阅读笔记》Attention Bottlenecks for Multimodal Fusion
转自于https://blog.csdn.net/me_yundou/article/details/121070837 查看全文 http://www.taodudu.cc/news/show-62 ...
论文阅读《Knowledge Collaborative Fine-tuning for Low-resource Knowledge GraphCompletion》
论文链接基于知识协同微调的低资源知识图谱补全方法 2022年3月发表于软件学报是浙大prompt系列的一个延续本文之前的工作: AdaPrompt: Adaptive Prompt-based ...
[方面级别情感分析]0x01方面级情感分析笔记
0.什么是方面级情感分析先介绍几个概念缩写 ABSA: Aspect-Based Sentiment Analysis方面级情感分析的缩写,下文用ABSA代替方面级情感分析这一概念,给定一个句子,比 ...
论文总结——情感对话
这周主要是看了几篇情感对话相关的论文首先会介绍三个数据集,然后还有涉及到共情.情感支持等方面的一些论文~ ATOMIC if-then推理的机器常识图集包含877K个知识的文本描述,主要关注由if ...
2022 ACL accepted论文集资料以及关键词分析
目录 1 会议论文数据集 1.1 爬虫获取paper基本信息 1.2 爬虫下载论文pdf 2 数据分析 2.1 关键词提取 2.2 可视化词云图 3 会议信息 1 会议论文数据集 1.1 爬虫获取pa ...
TTS行业调研20221201
文章目录微软相关方向现有技术的改进点前端声学模型小样本 diffusion model 微软相关方向 diffusion做双声道音频生成旋律生成:直接生成/给定歌词生成旋律歌曲识别: ...

CMGCN 2022ACL

CMGCN 2022ACL相关推荐

最新文章

热门文章