性能优化 | Elasticsearch: 权威指南

性能优化 | Elasticsearch: 权威指南 | Elastic

2024-04-18

请注意:
本书基于 Elasticsearch 2.x 版本，有些内容可能已经过时。

» » »

« 使用邻近度提高相关度寻找相关词 »

性能优化编辑

短语查询和邻近查询都比简单的 query 查询代价更高。一个 match 查询仅仅是看词条是否存在于倒排索引中，而一个 match_phrase 查询是必须计算并比较多个可能重复词项的位置。

Lucene nightly benchmarks 表明一个简单的 term 查询比一个短语查询大约快 10 倍，比邻近查询(有 slop 的短语查询)大约快 20 倍。当然，这个代价指的是在搜索时而不是索引时。

通常，短语查询的额外成本并不像这些数字所暗示的那么吓人。事实上，性能上的差距只是证明一个简单的 term 查询有多快。标准全文数据的短语查询通常在几毫秒内完成，因此实际上都是完全可用，即使是在一个繁忙的集群上。

在某些特定病理案例下，短语查询可能成本太高了，但比较少见。一个典型例子就是DNA序列，在序列里很多同样的词项在很多位置重复出现。在这里使用高 slop 值会到导致位置计算大量增加。

那么我们应该如何限制短语查询和邻近近查询的性能消耗呢？一种有用的方法是减少需要通过短语查询检查的文档总数。

结果集重新评分编辑

在先前的章节中，我们讨论了而使用邻近查询来调整相关度，而不是使用它将文档从结果列表中添加或者排除。一个查询可能会匹配成千上万的结果，但我们的用户很可能只对结果的前几页感兴趣。

一个简单的 match 查询已经通过排序把包含所有含有搜索词条的文档放在结果列表的前面了。事实上，我们只想对这些 顶部文档 重新排序，来给同时匹配了短语查询的文档一个额外的相关度升级。

search API 通过 重新评分 明确支持该功能。重新评分阶段支持一个代价更高的评分算法--比如 phrase 查询--只是为了从每个分片中获得前 K 个结果。然后会根据它们的最新评分重新排序。

该请求如下所示：

GET /my_index/my_type/_search
{
    "query": {
        "match": {  
            "title": {
                "query":                "quick brown fox",
                "minimum_should_match": "30%"
            }
        }
    },
    "rescore": {
        "window_size": 50, 
        "query": {         
            "rescore_query": {
                "match_phrase": {
                    "title": {
                        "query": "quick brown fox",
                        "slop":  50
                    }
                }
            }
        }
    }
}

	`match` 查询决定哪些文档将包含在最终结果集中，并通过 TF/IDF 排序。
	`window_size` 是每一分片进行重新评分的顶部文档数量。
	目前唯一支持的重新打分算法就是另一个查询，但是以后会有计划增加更多的算法。

« 使用邻近度提高相关度寻找相关词 »

官方地址：https://www.elastic.co/guide/cn/elasticsearch/guide/current/_Improving_Performance.html

有任何技术问题请点击这里网站运营推广招聘

IT PHP 编程语言 Linux 科技开发编程 Elasticsearch HTML/CSS/XML 网络 JAVA NoSQL C/C++ 面试 Golang 数据库 Git 算法正则表达式操作系统 Redis 互联网 MySql JavaScript 运维软件架构设计 Mac OS TCP/IP 国际 Excel Vim Windows Socket Oracle VR MongoDB 运营 Python MemCache 商业硬件电子设计 nginx 娱乐摄影游戏 WordPress HTTP 团建数码电器

Elasticsearch是做什么的以及它的使用和基本原理 Elasticsearch集群模式知多少携程Elasticsearch数据同步实践如何配置使用Elasticsearch的动态映射 (dynamic mapping) Elasticsearch简介与实战 elasticsearch动态映射 elasticsearch配置 elasticsearch出现只读索引如何操作 blocked by: [FORBIDDEN/12/index read-only / allow delete (api)];') elasticsearch集群部署文档 es 相关配置文件 ES查看集群信息命令 ES查找空字符串 Elasticsearch－基础介绍及索引原理分析 Elasticsearch6.X 新类型Join深入详解 Elasticsearch Mapping设置 ES的聚合统计不准确 Elasticsearch 映射参数 fields ES查询父文档所有的子文档parent_id查询 Elasticsearch 7 : 使用 ignore_above 限制字符串长度两节点Elasticsearch集群

略微加速

Elasticsearch权威指南 - 互联网笔记

性能优化编辑

结果集重新评分编辑

略微加速

Elasticsearch权威指南 - 互联网笔记

性能优化编辑

结果集重新评分编辑

Getting Started Videos