写点什么

基于 Elasticsearch 创建企业 AI 搜索应用实践 |QCon 北京

  • 2025-03-23
    北京
  • 本文字数:1458 字

    阅读完需:约 5 分钟

基于 Elasticsearch 创建企业 AI 搜索应用实践 |QCon北京

2025 年 4 月 10 - 12 日,QCon 全球软件开发大会将在北京召开,大会以 “智能融合,引领未来” 为主题,将汇聚各领域的技术先行者以及创新实践者,为行业发展拨云见日。


Elastic 中国社区首席布道师刘晓国已确认出席并发表题为《基于 Elasticsearch 创建企业 AI 搜索应用实践》的主题分享。传统的词汇搜索不能满足当今时代的需求,特别是在这个智能的时代。当代企业针对搜索提出语义搜索,也就是根据文字的语义来进行搜索,而不是简单的词汇匹配。另外,我们也需要针对其它的数据类型,比如图片,语音及视频来进行搜索。


Elasticsearch 自 8.0 开始提供向量搜索(密集向量,稀疏向量)。它可以完美地解决文字语义搜索及多媒体数据的搜索。此外,向量搜索也并非完美,特别是针对文字搜索。我们可以使用混合搜索(词汇搜索,向量搜索)进行多路召回并对最终结果进行排名,这种方法可以提高搜索的精度及召回率。在人工智能发展的今天,结合大模型,使用 GenAI 可以让我们得到唯一的搜索答案,而不是传统的搜索引擎提供的多页面的搜索结果。由于企业数据或私有数据在每时每刻都在生成。大模型在缺乏上下文的情况下使用大模型来进行推理,在很多的时候会产生幻觉,因为这些知识不存在于大模型中。结合 Elasticsearch 的向量搜索技术针对企业数据或私有数据进行搜索,把搜索结果作为上下文提供给大模型,从而消除幻觉。这种技术也被称作为 RAG(检索增强生成)。本次演讲将详细介绍 Elasticsearch 的向量搜索技术及如何使用它进行 RAG 的应用开发。


刘晓国是新加坡国立大学硕士,西北工业大学本硕。曾就职于新加坡科技,康柏电脑,通用汽车,爱立信,诺基亚,Linaro 非营利组织 (Linux for ARM),Ubuntu,Vantiq 等企业。从事过嵌入式软件开发,电脑设计,手机软件设计,汽车电子,计算机操作系统,通信,云实时事件处理等行业。他在本次会议的详细演讲内容如下:


演讲提纲

1. 智能时代的搜索需求

  • 对语义搜索的需求,而不是简单的词汇匹配

  • 对多媒体数据的搜索,比如图片,声音及视频

  • 非结构化数据的搜索

  • 向量搜索带来的新的解决方案

2. Elasticsearch 向量搜索

  • 向量搜索原理

  • 向量搜索种类(密集向量,稀疏向量)

  • 混合搜索介绍(多路召回,综合评分)

3. RAG 实现

  • 如何使得大模型变得更聪明

  • RAG 的实现方法

4. Elasticsearch 在向量搜索上的最新进展

  • 硬件加速

  • 并行化

  • 标量量化

  • 搜索效率

  • 重新排名

  • Semantic text 字段

  • 推理 API

  • AI 生态

5. 使用 Elasticsearch 在企业搜索中的案例分享

  • 高级 RAG 案例分享


您认为,这样的技术在实践过程中有哪些痛点?

向量搜索需要大量的内存及计算能力,如果针对超大规模的数据进行向量搜索,存在成本上考虑。有时搜索的结果缺乏可解释性。如何结合传统的词汇搜索来实现更加精准的搜索的结果。如何使用大语言模型/人工智能来提高最终的搜索结果排名。在使用 GenAI 时,如何针对私有或者企业数据来规避幻觉。


演讲亮点

  • 使用 Elasticsearch 来针对企业进行大规模的商用、规避搜索幻觉

  • 结合大模型,使用混合搜索来得到更加精准的搜索结果


听众收益

  • 了解如何运行 Elasticsearch 来进行语义搜索

  • 了解如何结合大模型,针对企业数据进行 GenAI 搜索


除此之外,本次大会还策划了多模态大模型及应用AI 驱动的工程生产力面向 AI 的研发基础设施不被 AI 取代的工程师大模型赋能 AIOps云成本优化Lakehouse 架构演进越挫越勇的大前端等专题,届时将有来自不同行业、不同领域、不同企业的 100+资深专家在 QCon 北京现场带来前沿技术洞察和一线实践经验。


现在报名即可以享受 9 折优惠,单张门票立省 680 元,详情可扫码或联系票务经理 18514549229 咨询。



2025-03-23 09:034607

评论

发布
暂无评论

技术写作的“坎”

码猿外

程序员 写作

基于开源IM即时通讯框架MobileIMSDK:RainbowChat-iOS端v6.2版已发布

JackJiang

网络编程 即时通讯 IM

手写一个react,看透react运行机制

goClient1992

React

从深度学习框架到开发工具,百度飞桨携最新成绩单亮相 GTC

飞桨PaddlePaddle

英伟达 百度飞桨 GTC

ChunJun 1.16 Release版本即将发布,bug 捉虫活动邀您参与!

袋鼠云数栈

深度分析React源码中的合成事件

goClient1992

React

BNB Chain 2023年40佳DAPP评选,Zebec赫然在列

鳄鱼视界

深入React源码揭开渲染更新流程的面纱

goClient1992

React

ChatGPT 爆火,社交应用如何 Get 新技能

融云 RongCloud

IM ChatGPT

走进RocketMQ(三)消息存储与消费

白裤

Java RocketMQ RocketMQ消息存储 RocketMQ消息消费

如何使用C LinkSDK(4.x)快速接入阿里云物联网平台?——实践类

阿里云AIoT

阿里云 物联网 IoT

从零手写react-router

helloworld1024fd

JavaScript 前端

从源码角度看React-Hydrate原理

flyzz177

React

极光笔记 | 极光PUSH服务助力企业提升抢单速度

极光GPTBots-极光推送

技术干货 移动推送 智能推送

墨天轮2022年度数据库获奖名单

墨天轮

数据库 opengauss TiDB oceanbase 国产数据库

TSBS 是什么?为什么时序数据库 TDengine 会选择它作为性能对比测试平台?

TDengine

性能测试 时序数据库 ​TDengine

基于大规模边缘计算的千万级聊天室技术实践

环信

聊天室 大规模边缘计算 千万级

京东前端二面常考手写面试题(必备)

helloworld1024fd

JavaScript 前端

自动化测试工具加入黑科技带来新纪元

石臻臻的杂货铺

人工智能

轻量易部署!Coolbpf 发布不依赖 Clang 的脚本化编程特性 lwcb | 龙蜥技术

OpenAnolis小助手

开源 rust ebpf coolbpf lwcb

滴滴前端一面常考手写面试题整理

helloworld1024fd

JavaScript 前端

从react源码看hooks的原理

flyzz177

React

云原生消息队列Pulsar浅析——实践类

阿里云AIoT

阿里云 物联网 IoT

从计费出账加速的设计谈周期性业务的优化思考

鲸品堂

运营商 业务流程优化 企业号 3 月 PK 榜

假如面试官要你手写一个promise

helloworld1024fd

JavaScript 前端

从recat源码角度看setState流程

flyzz177

React

【明晚直播】KunlunBase 1.1 版本发布:完善MySQL 兼容性,OLAP性能提升

KunlunBase昆仑数据库

MySQL 数据库 PgSQL 线上直播

基于 Elasticsearch 创建企业 AI 搜索应用实践 |QCon北京_AI&大模型_QCon全球软件开发大会_InfoQ精选文章