时隔 3 年,Elasticsearch 迎来重大版本更新!基于 Lucene 10.1.0 构建,9.0.0 版本在 AI 搜索、安全分析、向量计算、集群管理 等多个领域实现突破性升级

版本亮点

  • 新增rank_vectors字段类型:支持late-interaction排名,提升复杂搜索排序能力。

  • ES|QL LOOKUP JOIN技术预览:更强大、灵活的SQL级联查询功能。

  • semantic_text字段类型全面GA(稳定版):为语义搜索注入新活力。

  • 权限认证升级:支持更安全的SSHA-256 API密钥散列方式,精细化Kibana系统用户权限管理。

重要功能与优化 1. 集群与分配机制
  • • 新增“非主节点”状态,实现更精准负载均衡。

  • • 嵌入更多指标,提升集群健康监测效率。

2. 安全与权限增强
  • • 完善了内置和预留角色的查询和管理权限。

  • • 为安全解决方案相关数据流配置更完善的索引权限。

3. 数据流与重索引
  • • 新增基于源索引创建的索引操作接口,简化数据迁移。

  • • 支持重索引过程的取消和状态查询API,提升管理灵活性。

  • • 优化OTel日志索引排序,加速分布式数据查询。

4. ESQL与SQL查询引擎
  • • 引入多项ES|QL功能扩展,如偏移缩减、支持null值、异步查询元数据查询。

  • • 探索多日期纳秒级别支持,丰富时间序列分析能力。

  • • 查询计划优化,提升大规模数据处理效能。

5. 机器学习与推理
  • • 集成DeBERTa-v2/v3分词器,提升NLP模型表现。

  • • 增强Inference API的统一调用体验,支持聊天和重排任务。

  • • 引入mTLS支持,加强推理服务安全。

6. 核心引擎与存储
  • • 升级为Java 24环境,抛弃Java SecurityManager,采用Elastic自研Entitlements权限系统。

  • • 升级Lucene至10.1版本,进一步提升索引检索能力。

7. 网络与接口
  • • 默认启用HTTP非安全缓冲,优化网络通信效率。

  • • 新增错误响应控制参数,提升API错误处理的灵活性。

修复与改进精选
  • • 修复ECDSA签名错误、OIDC认证空指针异常和CAT API文档错误等关键问题。

  • • 重写查询计划中的大小写比较逻辑,增强规则推送到Lucene正确性。

  • • 优化日志和追踪,防止节点在错误情况下泄漏堆栈信息。

  • • 确保系统数据流快照可恢复、合并映射模板准确。

安全预警与升级建议
  • • Elasticsearch 9.0.0正式淘汰Java SecurityManager,改为全新Entitlements保护机制,运行环境升级需注意兼容性。

  • • 强化elastic-keystore加密强度到AES 256。

  • • 关注安全公告页面,及时获取最新补丁和漏洞修复信息。

总结

Elasticsearch v9.0.0不仅拥抱了最新的技术栈和安全机制,还在查询引擎、数据流、机器学习等多领域进行了深度优化,助您构建更高效、更安全的搜索和分析平台。

我们相信人工智能为普通人提供了一种“增强工具”,并致力于分享全方位的AI知识。在这里,您可以找到最新的AI科普文章、工具评测、提升效率的秘籍以及行业洞察。 欢迎关注“福大大架构师每日一题”,让AI助力您的未来发展。