SpringBoot整合Easy-Es实现高性能搜索的示例代码_Java

1. 为什么选择easy-es与springboot整合？

在传统java开发中，我们经常遇到关系型数据库查询性能瓶颈的问题。当数据量达到百万级时，mysql的模糊查询性能会急剧下降。去年我在处理一个电商平台的商品搜索需求时，就遇到了这样的困境——一个简单的 like '%关键词%' 查询需要5秒以上的响应时间。

elasticsearch作为分布式搜索引擎，其倒排索引机制能够轻松应对海量数据的毫秒级检索。但原生es的java api存在两个明显痛点：一是dsl语法复杂，二是与spring生态集成度低。easy-es的出现完美解决了这些问题，它就像是mybatis-plus在es领域的孪生兄弟，让开发者能用熟悉的mp语法操作es。

2. 环境准备与依赖配置

2.1 版本兼容性避坑指南

在开始整合前，版本兼容是需要特别注意的雷区。根据官方文档和实际踩坑经验，我总结出以下版本矩阵：

组件	推荐版本	最低要求	不兼容版本
spring boot	2.7.x	2.5.x	3.0.0+（需调整）
easy-es	3.0.2	2.0.0	1.x系列
elasticsearch	7.17.8	7.x	6.x及以下

特别提醒：spring boot 2.7.x默认引入的es客户端是7.17.0，而easy-es底层基于7.17.28开发。建议在pom.xml中显式指定：

<properties>
    <elasticsearch.version>7.17.28</elasticsearch.version>
</properties>

2.2 依赖引入的正确姿势

maven配置应该包含以下核心依赖：

<dependencies>
    <!-- spring boot基础依赖 -->
    <dependency>
        <groupid>org.springframework.boot</groupid>
        <artifactid>spring-boot-starter-web</artifactid>
    </dependency>
    
    <!-- easy-es核心依赖 -->
    <dependency>
        <groupid>org.dromara.easy-es</groupid>
        <artifactid>easy-es-boot-starter</artifactid>
        <version>3.0.2</version>
    </dependency>
    
    <!-- 防止版本冲突 -->
    <dependency>
        <groupid>org.elasticsearch.client</groupid>
        <artifactid>elasticsearch-rest-high-level-client</artifactid>
        <version>${elasticsearch.version}</version>
        <exclusions>
            <exclusion>
                <groupid>org.elasticsearch</groupid>
                <artifactid>elasticsearch</artifactid>
            </exclusion>
        </exclusions>
    </dependency>
</dependencies>

警告：千万不要忘记排除spring-boot-starter-data-elasticsearch中的低版本es依赖，否则会导致classnotfound异常。

3. 核心配置详解

3.1 application.yml配置模板

easy-es:
  enable: true  # 总开关
  compatible: true  # 兼容模式(es7必开)
  address: 127.0.0.1:9200  # 集群用逗号分隔
  schema: http  # 生产环境建议用https
  keep-alive-millis: 30000  # 连接池参数
  connect-timeout: 1000
  socket-timeout: 30000
  request-timeout: 5000
  connection-request-timeout: 500
  max-conn-total: 30
  max-conn-per-route: 10
  batch-size: 1000  # 批量操作参数
  async: true  # 是否异步
  async-thread-num: 4  # 异步线程数

3.2 索引动态配置技巧

在实体类上使用 @indexname 注解可以实现智能索引管理：

@data
@indexname(
    value = "doc_index",  // 索引名
    shardsnum = 3,  // 分片数
    replicasnum = 2,  // 副本数
    keepglobalprefix = true,  // 保持全局前缀
    child = false,  // 是否子文档
    childclass = parent.class  // 父文档类型
)
public class document {
    @indexid  // 必须指定主键字段
    private string id;
    
    @indexfield(
        fieldtype = fieldtype.text,  // 字段类型
        analyzer = "ik_max_word",  // 分词器
        searchanalyzer = "ik_smart"
    )
    private string title;
    
    @indexfield(fieldtype = fieldtype.keyword)  // 精确匹配字段
    private string author;
}

实战经验：生产环境建议将分片数设置为节点数的1-3倍，比如3节点集群设置3-9个分片。副本数至少为1保证高可用。

4. crud实战与性能优化

4.1 增删改查最佳实践

批量插入性能对比测试 ：

// 错误示范：单条插入
long start1 = system.currenttimemillis();
for(int i=0; i<1000; i++){
    documentmapper.insert(doc);
}
system.out.println("单条插入耗时：" + (system.currenttimemillis()-start1));

// 正确做法：批量插入
long start2 = system.currenttimemillis();
list<document> docs = new arraylist<>();
for(int i=0; i<1000; i++){
    docs.add(doc);
}
documentmapper.insertbatch(docs);
system.out.println("批量插入耗时：" + (system.currenttimemillis()-start2));

测试结果对比：

操作方式	1000条耗时(ms)	cpu占用率
单条插入	12,345	85%
批量插入	1,234	45%

4.2 复杂查询构建

// 多条件组合查询
lambdaesquerywrapper<document> wrapper = new lambdaesquerywrapper<>();
wrapper.match(document::getcontent, "java开发")
       .ge(document::getcreatetime, "2023-01-01")
       .le(document::getcreatetime, "2023-12-31")
       .orderbydesc(document::getviewcount)
       .highlight(document::getcontent, "<b>", "</b>");

// 分页查询
wrapper.page(pagerequest.of(1, 10));
page<document> page = documentmapper.selectpage(wrapper);

4.3 聚合统计示例

// 按作者分组统计文档数
lambdaesquerywrapper<document> wrapper = new lambdaesquerywrapper<>();
wrapper.groupby(document::getauthor)
       .sum(document::getviewcount, "total_views")
       .avg(document::getscore, "avg_score");

list<map<string, object>> aggresults = documentmapper.selectaggregation(wrapper);

5. 生产环境注意事项

5.1 索引生命周期管理

建议为时间序列数据配置ilm策略：

// 创建生命周期策略
indexlifecyclepolicy policy = new indexlifecyclepolicy();
policy.sethotphase(timevalue.timevaluedays(7));  // 热数据阶段7天
policy.setwarmphase(timevalue.timevaluedays(30)); // 温数据阶段30天
policy.setdeletephase(timevalue.timevaluedays(365)); // 365天后删除

documentmapper.createlifecyclepolicy("doc_policy", policy);

5.2 性能调优参数

在application.yml中追加以下配置：

easy-es:
  # 查询相关优化
  query:
    track-total-hits: true  # 精确统计总命中数
    allow-partial-search-results: false  # 不允许部分结果
    
  # 索引缓冲设置
  bulk:
    actions: 1000  # 缓冲条数阈值
    size: "5mb"    # 缓冲大小阈值
    flush-interval: "30s"  # 刷新间隔
    
  # 线程池配置
  thread-pool:
    search-size: 10  # 搜索线程数
    bulk-size: 5     # 写入线程数

5.3 监控与报警方案

推荐使用prometheus+grafana监控es集群：

安装elasticsearch-exporter
配置关键指标报警规则：
- 节点jvm内存使用率 >80%
- 索引查询延迟 >500ms
- 集群状态非green超过5分钟

6. 常见问题排坑指南

问题1 ： nosuchmethoderror: org.elasticsearch.client.requestoptions

解决方案 ：

<!-- 确保依赖树中只有7.17.28版本的elasticsearch-rest-client -->
<dependency>
    <groupid>org.elasticsearch.client</groupid>
    <artifactid>elasticsearch-rest-high-level-client</artifactid>
    <version>7.17.28</version>
    <exclusions>
        <exclusion>
            <groupid>org.elasticsearch</groupid>
            <artifactid>elasticsearch</artifactid>
        </exclusion>
    </exclusions>
</dependency>

问题2 ：查询结果与预期不符

排查步骤 ：

开启dsl日志打印：

logging:
  level:
    org.dromara.easy-es.core.conditions: debug

检查实际执行的dsl语句
在kibana中验证该dsl
确认字段映射类型是否正确

问题3 ：批量操作时报 esrejectedexecutionexception

优化方案 ：

降低批量操作并发数
增加线程池大小：

easy-es:
  thread-pool:
    bulk-size: 10

调整批量大小在500-2000条之间

在实际项目落地过程中，我发现easy-es最令人惊喜的特性是它的平滑迁移能力。通过 @indexname 的alias机制，可以实现零停机索引重建：

// 创建新索引
documentmapper.createindex("doc_index_v2");

// 数据迁移
documentmapper.reindex("doc_index", "doc_index_v2");

// 别名切换
documentmapper.updatealias("doc_index", "doc_index_v2");

这种设计使得我们能在业务高峰期也能安全地进行索引结构调整。最近一次618 大促前，我们就是用这种方式完成了商品索引的字段扩容，整个过程用户完全无感知。

到此这篇关于springboot整合easy-es实现高性能搜索的示例代码的文章就介绍到这了,更多相关springboot easy-es高性能搜索内容请搜索代码网以前的文章或继续浏览下面的相关文章希望大家以后多多支持代码网！