让 Elasticsearch Delete By Query 请求立即生效

让 Elasticsearch Delete By Query 请求立即生效

在 Elasticsearch 中,Delete By Query 操作默认是近实时的(near real-time),这意味着删除操作可能不会立即对搜索可见。要让删除操作立即生效,你可以使用以下几种方法:

1. 使用 refresh 参数

在请求中设置 refresh 参数为 truewait_for

go 复制代码
req := esapi.DeleteByQueryRequest{
    Index:      []string{doc.IndexName()},
    Body:       strings.NewReader(string(body)),
    Refresh:    esapi.BoolPtr(true), // 立即刷新
    // 或者使用 wait_for 让操作在刷新后返回
    // Refresh:    esapi.StringPtr("wait_for"),
}

2. 手动刷新索引

执行删除操作后,立即刷新相关索引:

go 复制代码
// 执行删除操作
res, err := req.Do(context.Background(), client)
if err != nil {
    // 处理错误
}
defer res.Body.Close()

// 手动刷新索引
refreshReq := esapi.IndicesRefreshRequest{
    Index: []string{doc.IndexName()},
}
refreshRes, err := refreshReq.Do(context.Background(), client)
if err != nil {
    // 处理错误
}
defer refreshRes.Body.Close()

3. 配置索引的刷新间隔

如果你经常需要实时操作,可以考虑将索引的刷新间隔设置为1秒(默认值):

json 复制代码
PUT /your_index/_settings
{
  "index.refresh_interval": "1s"
}

或者完全禁用自动刷新,改为手动控制:

json 复制代码
PUT /your_index/_settings
{
  "index.refresh_interval": "-1"
}

4. 使用 ?refresh URL 参数

如果你使用的是 REST API 而不是 Go 客户端,可以在 URL 中添加 ?refresh 参数:

复制代码
POST /your_index/_delete_by_query?refresh
{
  "query": { ... }
}

最佳实践建议

  1. 对于生产环境,频繁的刷新操作会影响性能,建议:

    • 批量操作时使用 refresh=wait_for
    • 对实时性要求高的单次操作使用 refresh=true
    • 大多数情况下依赖默认的刷新机制
  2. 如果你正在执行大量删除操作,考虑在操作完成后执行一次手动刷新,而不是每次删除都刷新。

  3. 注意 refresh=true 会立即创建新的段文件,可能导致更多的段合并操作,从而影响集群性能。

相关推荐
richdata4 小时前
商品数字化不是先做大数据,而是先把数据变成可用决策
大数据·运维·数据治理·商品数字化·智能补货·ai商品决策
极新5 小时前
中国机器人已出海至141国,售后服务正成为新的机会
大数据·人工智能·机器人
AI_yangxi6 小时前
靠谱的短视频矩阵系统
大数据·人工智能·矩阵
czxxxc6 小时前
知识服务迎来 AI 变革,创客匠人 AI 智能体破解创作者运营难题
大数据·人工智能
戴西软件7 小时前
戴西iDWS.3DViz Suite数据轻量化可视化软件,从传统桌面软件向云端协同的重大突破
大数据·运维·网络·人工智能·机器学习·3d
tianyuanwo7 小时前
Jenkins Pipeline 沙箱与非沙箱:CPS、序列化与白名单的深度解读(含 `take()` 与 `subList()` 实战对比)
pipeline·jenkins·groovy·take·sublist
衡石科技7 小时前
衡石科技携手超聚变联合发布HENGSHI BOX,引领私域ChatBI规模化落地
大数据·人工智能·科技
2301_818474448 小时前
福建中小微企业云 ERP 落地实践:轻量化信息化项目实施指南
大数据·人工智能
咕泡科技8 小时前
咕泡科技×创业酵母俞头私享会:AI时代,组织如何长出“破局力”?
大数据·人工智能·科技