一文简要了解词义消歧与实体消歧
每天给你送来NLP技术干货!
来自:AI算法小喵
写在前面
最近刚开始调研实体消歧方面的相关工作,这里先开一个头吧。希望大家可以通过这篇简要的文章对实体消歧任务本身有一个基本的认识。
1. 背景:词义消歧与实体消歧
1.1 词义消歧
自然语言文本中存在着大量的多义词,而多义词的存在也会影响人对文本的语义理解,让人对文本的意思产生混淆。
词义消岐(Word Sense Disambiguation,简称WSD) 是NLP中一个非常基本的任务,旨在确定多义词在具体语境中的确切意义。
在词义消歧中,同一词语的不同义项会作为候选词。我们需要在所有候选词中找到与文本中目标词语最接近的那个义项。这里“义项”指的是词是词典中的某个具体表示。
如上图所示,「苹果」在百度百科中共有25个义项,单说「苹果」我们可能并不知道说的是「苹果公司」还是「水果里的苹果」。但结合具体的上下文语境,我们就可以很好地对「苹果」消歧,从而明确「苹果」的具体含义:
1.2 实体消歧
实体链指/实体链接(Entity Linking,简称 EL) 在知识图谱构建、信息检索和问答系统等领域具有广泛的应用价值。
实体链指的主要目标是识别上下文中的实体指称具体指代现实世界中的哪一个实体,也就是将实体指称项映射到知识库中的相应实体上去。
具体而言,实体链指一般包括实体识别、候选实体获取、实体消歧这三个主要环节。之所以需要实体消歧,而不是直接将实体识别的结果放入知识图谱的原因主要有两方面:
多样性(即多词同义):同一实体在文本中会有不同的指称。比如:甜瓜、安东尼、和瓜哥都指美国职业篮球运动员卡梅隆·凯恩·安东尼。
歧义性(即一词多义):相同的实体指称在不同的上下文中可以指不同的实体。比如:迈克尔·乔丹可能指美国篮球运动员,也可能指爱尔兰政治家等。
1.3 总结
从以上说明来看,其实词义消歧与实体消歧具有一定相似性, 二者的目的都是处理文本中词汇歧义的问题. 主要区别在于:
在词义消歧中的词义通常是固定的, 可根据目标词在词典中的义项来列举;
在实体消歧中, 实体词义无法列举,所以需要前序步骤候选实体获取;
此外,实体词的词义数目大于普通词,这个主要还是跟知识库的量级相关。
2. 相关论文
这里我们主要给大家推荐两篇近期发表的论文:
词义消歧:《ESC: Redesigning WSD with Extractive Sense Comprehension》
实体消歧:《ExtEnD: Extractive Entity Disambiguation》
两篇论文的模型都非常简单,个人觉得关键或者说亮点主要在于他们对问题的转换。其实,从这两篇论文的名字就能看出端倪:都是将消歧问题转换成了抽取式问题。
2.1 EXTENE 实体消歧
论文名称:《ExtEnD: Extractive Entity Disambiguation》
论文链接:https://aclanthology.org/2022.acl-long.177.pdf
代码地址:https://github.com/SapienzaNLP/extend.
如上图所示,EXTEND 将实体消歧任务转换为了抽取式任务,或者说MRC类任务。具体地:
将含有目标实体指称项的文本当作Query;
将知识库中对应的所有候选实体及其描述当作Context;
二者拼接然后预测Answer的Span(start\end prediction,start-end matching),这里的Answer就是在知识库中目标实体指称实际关联的实体。
好了,这就是 EXTEND 论文的核心思想。是不是感觉模型已经跃然纸上了,整体上应该和我们之前在 一文详解关系抽取模型 CasRel、实体识别LEAR论文阅读笔记、 实体识别BERT-MRC论文阅读笔记中介绍过的模型类似。
2.2 ESC 词义消歧
论文名称:《ESC: Redesigning WSD with Extractive Sense Comprehension》
论文链接:https://aclanthology.org/2021.naacl-main.371.pdf
代码地址:https://github.com/SapienzaNLP/esc
ESC 的模型架构和 EXTEND 是相似的。整体上首先将输入的上下文和目标词的所有义项拼接,模型的输出则是目标词真正义项的起始和终止位置。
2.3 总结
论文的具体细节就不在本文里赘述了,大家可根据链接下载原文阅读。此外,两篇论文都公布了源码,大家也可以快速利用源码在一些开源数据上进行实验。
当然也有一些相关比赛,比如百度:实体链指[1]目前就还在进行中:
我目前看到的几个还是比较一致的做法,打分➕排序:
比如实体链指比赛方案分享[2]:
CCKS&百度 2019中文短文本的实体链指 第一名解决方案[3]:
大家可以将论文的模型适配到中文场景下,然后尝试在这个比赛的实体消歧环节使用,看看效果如何。
还是一样,如果本文对你有帮助的话,欢迎点赞&在看&分享,这对我继续分享&创作优质文章非常重要。感谢
一文简要了解词义消歧与实体消歧相关推荐
- 知识图谱(五)——实体消歧
一.任务概述 多样性--同一实体在文本中会有不同的指称.eg:飞人.帮主.老大和MJ都指美国篮球运动员迈克尔·乔丹 歧义性--相同的实体指称在不同的上下文中可以指不同的实体.eg:迈克尔·乔丹指美国篮 ...
- 信息抽取之实体消歧,统一
1.前言 信息抽取相关内容可以参考信息抽取简介 和关系抽取详解 2.实体消歧的本质 如小米,它是一个实体,在有些句子中表示"小米公司",但在某些语句下它表示一种谷物 又比如: 怎么 ...
- 【创新实训】BERT4EL,基于文本相似度的实体消歧实现
任务描述 现有douban.mtime.maoyan三个来源的电影,包含名称.简介.导演.演员.类型等等属性. 需要相同的电影融合为一个电影条目,其中maoyan数量很少,可以合并到mtime中. 参 ...
- nlp(贪心学院)——实体消歧、实体统一、指代消解、句法分析
任务212:Entity Disambiguation (实体消歧)介绍 小米是公司还是吃的? 苹果是公司还是吃的? 根据左边的上下文找出左边的James Craig到底是右边(1)(2)(3)哪个J ...
- matlab 自适应噪声对消,自适应噪声对消
应噪声对消的语音增强法 王振 力 张雄伟 郑君杰 ( 解放军理 工大学 通信工程学 院,江苏南京 200)107 摘 要 :在 自适应噪声对消( N)AC中,本文根据主辅...... (000)007 ...
- 一次消谐和二次消谐有什么共同点
一次消谐和二次消谐有什么共同点 一次消谐和二次消谐都是用于消除电力系统中的谐波干扰的装置,它们的共同点包括: 相同的工作原理:都是通过串联电抗器和电阻器组成的消谐电路,将谐波电流引入电抗器中,从而消除 ...
- 【工程处理技巧一篇】基于半规则数据的命名实体消歧识别【未完】
作者:finallyly 出处:博客园(转载请注明作者和出处) 看到这篇文章的标题,您一定会以为此篇博客要讲解一个何等高深的算法.其实不然,本篇博客旨在分享笔者在处理那些繁杂.冗踏.低端甚至于极其TM ...
- 一文简要概述Seata AT与TCC的区别
AT与TCC的比较 首先,先了解一下Seata分布式事务的工作原理(见下图) Seata分布式事务 我们可以将Seata分布式事务的参与角色分为三个:TC(事务协调者,即Seata-Server),T ...
- 实体统一,实体消歧, 指代消解
指代消解:比较难,目前还没有得到很好的结果.
- 成语消消乐java代码_成语消消看-4399成语消消看-成语消消看答案大全
成语消消看65 文过饰非.无疾而终.大浪淘沙.因地制宜.飞龙在天.人山人海 微信成语消消看65关答案 惺惺相惜,飞龙在天,大浪淘沙,分崩离析,文过饰非 因地制宜,无疾而终,婀娜妩媚,人山人海,极乐世界 ...
最新文章
- 机器学习-贝叶斯分类器
- php方法数组注释,php中的注释、变量、数组、常量、函数应用介绍
- jdk1.8中接口可以写默认方法
- 【VS Code】vue.js ESLint + vscode 代码格式配置
- URAL 1047 Simple Calculations
- 07_NoSQL数据库之Redis数据库:Redis的高级应用之事务处理、持久化操作、pub_sub、虚拟内存
- 重新安装Linux自带的JDK
- 银联支付java代码实现_Java后端实现三方支付集成支付宝、微信、银联、光大、邮政支付...
- Django在Window下的部署
- MES系统是什么?MES系统的操作流程是怎样?
- Java 生成条形码 订单条形码
- PostgreSQL下载安装
- windows系统重装(绝对干净)、备份还原、引导修复步骤
- summer框架API--summer.download
- python微信公众号开发音乐功能_python利用微信公众号实现报警功能
- html水平排列三个元素,且三者占宽度相同
- 大小端高位低位字节的理解
- 开发用于互操作性的应用程序_云标准:确保云应用互操作性的工具
- PMI-ACP练习题(14)
- 蟋蟀蝙蝠的全球与中国市场2022-2028年:技术、参与者、趋势、市场规模及占有率研究报告