ES系列--打分机制

一、文档打分机制

当你通过关键字搜索相关文档时,可能会出现多个文档,这些文档的顺序是通过一个max_score属性的大小从高到低顺序展现出来的,max_score属性就是我们所说的评分。而这个评分是通过一个文档打分机制计算出来的。

二、打分原理

一、总公式

max_score = boost * idf * tf

其中,查询权重可以自己定义。

二、IDF与TF的计算

可以使用

GET /index/_search?explain=true

{

"query": {

"match": {

"text(这个是查询字段)": "hello"(这个是词条)

}

}

}

一、计算TF (词频)

Term Frequency : 搜索文本中的各个词条(term)在查询文本中出现了多少次, 出现次数越多,就越相关,得分会比较高

TF = freq / ( freq + k1 * ( 1 - b + b * dl / avgdl ))

freq:搜索的关键词在文档中出现的次数。

avgdl = fields / documents:

fields : 查询出来的所有文档的分解字段数量

documents:查询文档数量

dl:搜索的关键词再当前文档中分解的长度

二、 计算IDF(逆文档频率)

Inverse Document Frequency : 搜索文本中的各个词条(term)在整个索引的所有文档中 出现了多少次,出现的次数越多,说明越不重要,也就越不相关,得分就比较低。

log ( 1 + ( N - n + 0.5) / ( n + 0.5 ))

N:这个只是查询字段

n:文档中词条,也即查询的关键词的数量

注:这里的 log 是底数为 e 的对数

三、查询权重

我们可以通过控制查询权重来控制文档结果展现的顺序性。
GET /testscore/_search?explain=true

{

"query": {

"bool": {

"should": [{

"match": {

"title": {

"query": "Hadoop",

"boost": 1

}

}

},

{

"match": {

"title": {

"query": "Hive",

"boost": 1

}

}

},

{

"match": {

"title": {

"query": "Spark",

"boost": 2 // 通过查询权重来控制结果的顺序性

}

}

}

]

}

}

}

结果:

相关推荐
小小AK4 小时前
钉钉与金蝶云星空无缝集成方案
大数据·人工智能·钉钉
QYR_115 小时前
2026年全球寡核苷酸合成用固相载体行业深度洞察与展望
大数据·人工智能
xiaoduo AI8 小时前
客服机器人可按紧急程度排序会话?Agent 开放平台通过关键词设置优先级实现急救咨询优先处理?
大数据·机器人
hughnz8 小时前
钻井RTOC的能力以及趋势
大数据·人工智能
workflower9 小时前
机器人应用-楼宇室内巡逻
大数据·人工智能·算法·microsoft·机器人·动态规划·享元模式
电子科技圈9 小时前
从进迭时空K3看RISC-V CPU与Imagination GPU协同:如何构建高性能SoC能力
大数据·图像处理·人工智能·嵌入式硬件·边缘计算·智能硬件·risc-v
阿里云大数据AI技术9 小时前
EMR Serverless Spark 推出 Spark 4.0,加速湖仓架构下的数据处理升级
大数据·人工智能·spark
2601_949194269 小时前
springboot之集成Elasticsearch
spring boot·后端·elasticsearch
永霖光电_UVLED10 小时前
1.6T 光模块的能效革命
大数据·人工智能·汽车·娱乐
talen_hx29610 小时前
《零基础入门Spark》学习笔记 Day 17
大数据·笔记·学习·spark