入坑传送门

赛事介绍

文本匹配拥有广泛的应用场景，可以用于去除重复问题和文本相似度中。在本次学习中我们将学习：

如何计算文本之间的统计距离
如何训练词向量 & 无监督句子编码
BERT模型搭建和训练

上述步骤都是一个NLP算法工程师必备的基础，从2023.1.4~2023.2.1，我们将逐步从基础出发，逐步解决文本匹配问题。

背景介绍

文本语义匹配是自然语言处理中一个重要的基础问题，NLP 领域的很多任务都可以抽象为文本匹配任务。例如，信息检索可以归结为查询项和文档的匹配，问答系统可以归结为问题和候选答案的匹配，对话系统可以归结为对话和回复的匹配。语义匹配在搜索优化、推荐系统、快速检索排序、智能客服上都有广泛的应用。如何提升文本匹配的准确度，是自然语言处理领域的一个重要挑战。

信息检索：在信息检索领域的很多应用中，都需要根据原文本来检索与其相似的其他文本，使用场景非常普遍。
新闻推荐：通过用户刚刚浏览过的新闻标题，自动检索出其他的相似新闻，个性化地为用户做推荐，从而增强用户粘性，提升产品体验。
智能客服：用户输入一个问题后，自动为用户检索出相似的问题和答案，节约人工客服的成本，提高效率。

让我们来看一个简单的例子，比较各候选句子哪句和原句语义更相近：

原句：“车头如何放置车牌”
比较句1：“前牌照怎么装”
比较句2：“如何办理北京车牌”
比较句3：“后牌照怎么装”
比较结果：

比较句1与原句，虽然句式和语序等存在较大差异，但是所表述的含义几乎相同
比较句2与原句，虽然存在“如何” 、“车牌”等共现词，但是所表述的含义完全不同
比较句3与原句，二者讨论的都是如何放置车牌的问题，只不过一个是前牌照，另一个是后牌照。二者间存在一定的语义相关性
所以语义相关性，句1大于句3，句3大于句2，这就是语义匹配。

天池比赛

【打卡】医学搜索Query相关性判断学习赛相关推荐

搜索-Query理解(全)
Query 模块: 纠错分词紧密度同义词词权重实体词识别意图识别长尾 query 的多样性对于搜索系统来说是一个很大的挑战,原因有: ❶ 存在输入错误.例如上图中的错误 query &q ...
Elasticsearch 搜索的高级功能学习
在文章 Elasticsearch 入门学习中介绍了 Elasticsearch 的基础概念以及一些常用的 API.这篇文章是继续对 Elasticsearch 中一些高级的搜索功能的学习和总结: ...
知乎搜索文本相关性与知识蒸馏
分享嘉宾:申站知乎算法工程师编辑整理:许宴铭出品平台:DataFunTalk 导读:大家好,我是申站,知乎搜索团队的算法工程师.今天给大家分享下知乎搜索中文本相关性和知识蒸馏的工作实践,主要内 ...
搜索-Query Understanding (QU)
往简单来讲,用户输入了搜索词,系统通过搜索词找到与搜索词相关的商品集合,系统通过用户及商品的情况进行排序,最终展现给用户. 0.找不到但是在构建搜索系统的初期总是无法精准地帮助用户找到想要的商品主要 ...
消息队列(Message Query)的初学习
消息队列(Message Query)的初学习摘要:本篇笔记主要记录了对于消息队列概念的初次学习.消息队列的基础知识. 文章目录消息队列(Message Query)的初学习 1.何为消息? ...
Airbnb搜索：Embedding表示学习
导读本文将基于Airbnb KDD 2018年的论文,介绍Airbnb搜索中,如何学习item.user embedding,并应用到搜索推荐中.对工业界搜索推荐系统中如何更好地学习embeddin ...
综述：当医学影像遇上深度学习
2019-11-24 17:45:16 作者 | 李翔来源 | 视说AI(ID:techtalkai) 在传统医疗领域,医院内每日的医学影像数据量巨大,影像科医生做着大量重复性和机械性的工作.每张片 ...
数据结构与算法之判断一棵树是否为搜索二叉树、判断一棵树是否是完全二叉树
数据结构与算法之判断一棵树是否为搜索二叉树.判断一棵树是否是完全二叉树目录判断一棵树是否为搜索二叉树判断一棵树是否是完全二叉树 1. 判断一棵树是否为搜索二叉树概念:搜索树就是中序遍历的结果是 ...
Kusto Query Language (KQL) 学习笔记
Kusto Query Language (KQL) 学习笔记 Kusto 是一种nosql,其有自身的查询语言规则,简称KQL. 学习笔记持续更新中,点击每个节点的小加号,展开小节内容 KQL学习笔 ...

【打卡】医学搜索Query相关性判断学习赛

赛事介绍

背景介绍

【打卡】医学搜索Query相关性判断学习赛相关推荐

最新文章

热门文章