ES 排序，相关度和热度之间的平衡

2024-06-04 11:18:58

ES 排序，相关度和热度之间的平衡

算法推荐要达到不错的效果，需要解决好这四类特征：相关性特征、环境特征、热度特征和协同特征。

现在一般使用 ES的 function_score 实现这里的逻辑。

现有的逻辑是先排序相关度(这里的相关度是经过粗化的结果)，然后将热度作为二级排序。(这里的相关度粗化不好控制，需要不断调试)

一个实现：https://github.com/muhao1020/multistep_score
通过一个综合函数，将相关度和热度指标结合起来，成一个评分，然后通过此评分排序。(这种方式比难构造，并且极端值特别影响结果)
如果有多个热度指标如何展示热度值？(模型构建人为因素太多了)

如果有一个热度指标，仅看一个文档的指标(比如查看数)是没有意义的，需要从整体上看，将指标绝对值变成一个结合全局得出一个热度的指标。

仿照之前的同义词查询，完全也可以搞一个热词库，就是当前的新闻热词，在查询时如果分词匹配上了当前的热词，那么给这个热词加一个比较高的评分。热词库需要实时性更新。(这里的更新需要使用一种更新机制，或自动发现当前阶段的新闻热词，随着时间的衰减不断变化，在搜索的时候改变权重)

同时热词库又分为查询热词库、和内容热词库，具体方式是查询热词库，保存一个用户查询分词的记录，可以利用redis 实现；内容热词需要热词库维护人员主动去发现当前的热点事件、新闻热词，加入其中，同样也是查询匹配上的话，给一个较大的权重。

function_score

写的不错的博客：

https://blog.csdn.net/weixin_40341116/article/details/80913045

在使用ES进行全文搜索时，搜索结果默认会以文档的相关度进行排序，而这个 “文档的相关度”，是可以透过 function_score 自己定义的，也就是说我们可以透过使用function_score，来控制 “怎麽样的文档相关度更高” 这件事

function_score是专门用于处理文档_score的DSL，它允许爲每个主查询query匹配的文档应用加强函数，以达到改变原始查询评分 score的目的

function_score会在主查询query结束后对每一个匹配的文档进行一系列的重打分操作，能够对多个字段一起进行综合评估，且能够使用 filter 将结果划分爲多个子集 (每个特性一个filter)，并爲每个子集使用不同的加强函数

ES 排序，相关度和热度之间的平衡相关推荐

在边缘AI与云AI之间寻找平衡
边缘的AI允许通过本地化处理进行实时机器学习,从而实现即时数据处理,详细的安全性和增强的客户体验.同时,许多企业正在寻求将AI推入云端,这可以减少实施障碍,改善知识共享并支持更大的模型.前进的道路在于 ...
mysql复杂查询示例_找到时间和内存复杂性之间的平衡-一个示例
mysql复杂查询示例 by Anmol Uppal 通过Anmol Uppal 找到时间和内存复杂性之间的平衡-一个示例 (Finding the balance between time and ...
在物质与精神之间实现平衡
2019独角兽企业重金招聘Python工程师标准>>> 佛说,人生有四苦:生老病死.说病与死是苦应该没人会质疑,衰老是苦也还能理解,一则因为面对逝去的青春美好年富力强,眼前的苍老衰弱 ...
在思考云时在战术与战略之间取得平衡
这一直是一个问题-那些将IT体系结构视为可以为单个应用程序或小型系统域提供服务的事物. 如今,许多组织无法选择一种云技术来为整个企业IT服务. 他们处理一系列具有一次性云架构的战术应用案例. 这样做2 ...
混合云：公共云和私有云之间取得平衡的方式？
在可预见的未来,混合云是现实的,但真正的收获是试图找出企业最终朝向公共或私人资源是否平衡. 你在与任何技术供应商沟通时,也许会涉及到数据中心,但大多会提到云计算的三种方式:私有云,公共云,以及混合云. ...
锦标赛排序、洪水填充算法、平衡规划
锦标赛排序锦标赛排序(胜者树,记录胜者) 锦标赛排序(胜者树,记录胜者) - Class Xman - 博客园锦标赛排序(胜者树,记录胜者)_继续微笑lsj-CSDN博客_锦标赛排序数据结构之树 ...
【听】情商，理性和感性之间的平衡
情商,关于情商的书籍,介绍了什么是情商,情商的重要性,情商如何提升等方面,寻求一种理性与感性的平衡. 情绪往往很重要,是动力也是关键.人往往是两方面大脑,一方面是理性思考思维,另一方面是感性感知思维, ...
mysql字段的区分度_详解MySQL索引长度和区分度之间的平衡，值得收藏
概述前面我们讲了怎么去计算索引所占用的长度?那么换个方式想?索引又应该设置多少长度比较合理呢? 区分度与索引长度的权衡首先索引长度和区分度是相互矛盾的, 索引长度太短,那么区分度就很低,吧索引长度 ...
06，数据保护，怎样在安全和效率之间找平衡
数字化转型的基础是全量,全要素的连接和实时反馈,当所有的数据都连接进来之后.企业这个时候就有了大量的数据资产,就能解决很多原来解决不了的问题. 但是,就像茨维格那句民言所说的,所有命运赠送的礼物早已暗 ...

最新文章

热门文章