JAVA获取ES连接并查询所有数据

我们的项目要获取es连接,新版本和旧版本有不小的区别,在8.17.0版本使用的是

复制代码
ElasticsearchClient
复制代码
<dependency>
    <groupId>co.elastic.clients</groupId>
    <artifactId>elasticsearch-java</artifactId>
    <version>8.17.0</version> <!-- 使用最新版本 -->
</dependency>

<dependency>
    <groupId>com.fasterxml.jackson.core</groupId>
    <artifactId>jackson-databind</artifactId>
    <version>2.15.2</version>
</dependency>

初始化代码

复制代码
File certFile = new File(caPath);
        SSLContext sslContext = TransportUtils.sslContextFromHttpCaCrt(certFile);
        BasicCredentialsProvider credsProv = new BasicCredentialsProvider();
        credsProv.setCredentials(
                AuthScope.ANY, new UsernamePasswordCredentials(esUserName, esPwd)
        );
        RestClient restClient = RestClient
                .builder(new HttpHost(esHost, esPort, esHttpType))
                .setHttpClientConfigCallback(hc -> hc
                        .setSSLContext(sslContext)
                        .setDefaultCredentialsProvider(credsProv)
                        .setSSLHostnameVerifier(NoopHostnameVerifier.INSTANCE)
                )
                .build();
        ElasticsearchTransport transport = new RestClientTransport(restClient, new JacksonJsonpMapper());
        ElasticsearchClient client = new ElasticsearchClient(transport);

循环获取代码

复制代码
SearchResponse<Object> searchResponse = client.search(searchRequest, Object.class);// 执行初始搜索
        List<Hit<Object>> hits = searchResponse.hits().hits();// 获取命中的文档列表

        String scrollId = searchResponse.scrollId();
        // 2. 循环获取所有结果
        boolean isEmpty = false;
        while (scrollId != null && !isEmpty) {
            String finalScrollId1 = scrollId;
            ScrollResponse<Object> scrollResponse = client.scroll(s -> s
                            .scrollId(finalScrollId1)
                            .scroll(Time.of(b -> b.time("30s")))
                    , Object.class);

            scrollId = scrollResponse.scrollId();
            List<Hit<Object>> scrollHits = scrollResponse.hits().hits();
            
        }

        // 最后清除 scroll 上下文
        String finalScrollId = scrollId;
        client.clearScroll(c -> c.scrollId(finalScrollId));
        client.close();
        writer.flush();
        writer.close();

重点关注循环获取数据的内容,通过AI搜索的不一定对,这是经过修改之后的。

相关推荐
全栈陈序员31 分钟前
【Git】从入门到精通(六)—— git commit:提交到版本库
大数据·git·elasticsearch
真上帝的左手39 分钟前
30. 技术专题-‌应用框架组件-搜索引擎-ES
大数据·分布式·elasticsearch·搜索引擎·中间件
Elasticsearch42 分钟前
两条规则,一次故障,一条告警:变点检测如何减少告警噪声
elasticsearch
天河归来10 小时前
第三方接口不稳定,如何让核心任务继续完成
java·大数据
Knight_AL11 小时前
Java 文件下载时文件名中的 `#` 被转换成 `%23`?一次 URL 编码与解码问题排查
java·开发语言
砚底藏山河12 小时前
python量化自定义周期 K 线合成
java·开发语言·数据库·python·金融
猿究院_夏燊12 小时前
MySQL 的四种隔离级别
java·数据库·mysql
码流子13 小时前
移动收费怎么做?手持终端+App+收费中心的架构实践
java·开发语言·架构
霸道流氓气质13 小时前
AI 流式对话与实时聊天平台:SSE 解码竞态、有状态会话隔离与背压取消的 Vue3 + Spring AI 生产级实战
java·人工智能·spring
云创智城-yuncitys13 小时前
YunParking 4.0:JDK 17 与 Spring Boot 3.2 的停车云升级
java·开发语言·spring boot