【AICon】探索RAG 技术在实际应用中遇到的挑战及应对策略!AICon精华内容已上线73%>>> 了解详情
写点什么

PB 级数据检索平台 ElasticSearch 在滴滴的实践

  • 2019-08-17
  • 本文字数:512 字

    阅读完需:约 2 分钟

PB级数据检索平台  ElasticSearch在滴滴的实践

QCon广州2019大会上,张亮讲师做了《PB 级数据检索平台 | ElasticSearch 在滴滴的实践》主题演讲,主要内容如下。


演讲简介


滴滴数据检索平台是基于 ElasticSearch 构建的一站式搜索中台,服务了公司一千多个平台方,涵盖了搜索与推荐、MySQL 实时数仓、安全分析、日志检索四大应用场景。本次会分享面对数千万 TPS 写入、数万 QPS 查询,PB 级的数据存储,如何打造存储成本低、系统稳定性好,易用的搜索中台。


听众受益


  1. 如何基于 ElasticSearch 构建低成本的日志检索解决方案?

  2. 面对千万级 TPS 的实时写入,万级 QPS 的实时查询,如何保证检索平台的稳定性?

  3. 业务快速发展下,平台如何高效地服务用户?


讲师介绍


张亮


滴滴出行 高级专家工程师,TGO 鲲鹏会会员


2011 年 4 月-2014 年 4 月担任华为南研所网盘研发工程师;2014 年 4 月至今任职滴滴出行数据中台高级专家工程师。在滴滴任职 5 年,从无到有组建团队,主持构建过任务调度系统、业务监控系统、链路跟踪与诊断系统、数据同步中心等架构设计与研发工作,目前在负责数据通道、kafka 服务、数据检索的引擎建设工作,具有丰富的高并发、高吞吐场景的架构设计与研发经验。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2019/guangzhou/schedule


2019-08-17 00:002424
用户头像

发布了 25 篇内容, 共 25.4 次阅读, 收获喜欢 118 次。

关注

评论

发布
暂无评论
发现更多内容

第十周命题作业

cc

架构师训练营第五周学习总结

跳蚤

产品 0 期 - 第三周作业

Jxin

95 后张勇:Apache Pulsar Committer 军团新生代力量

Apache Pulsar

大数据 开源 pulsar Apache Pulsar 消息系统

架构师训练营第五周作业

跳蚤

LeetCode题解:433. 最小基因变化,双向BFS(beats 99%),JavaScript,详细注释

Lee Chen

算法 大前端 LeetCode

ReentrantReadWriteLock读写锁简单原理案例证明

叫练

ReentrantReadWriteLock 共享锁 独占锁 锁降级

智能汽车vs.智能手机 (28天写作 Day24/28)

mtfelix

智能手机 28天写作 智能汽车 未来社会 未来游牧化

前端工程师的一大神器——puppeteer

执鸢者

大前端 Node puppeteer

在nodejs中创建cluster

程序那些事

nodejs cluster 程序那些事 childprocess workerThread

Scrum Patterns:准备就绪的标准 DoR(译)

Bruce Talk

敏捷 译文 Agile Scrum Patterns

「架构师训练营 4 期」 第五周 - 001&2

凯迪

批判性思维自修课(五)

石君

28天写作 批判性思维

图解类加载器和双亲委派机制,一看就懂

Java鱼仔

Java 程序员 面试 类加载

第十周学习心得

cc

Pulsar 社区周报|2021-01-18 ~ 2021-01-24

Apache Pulsar

大数据 开源 pulsar Apache Pulsar 消息系统

架构总结思维导图

Mars

webpack | 进阶用法1:多入口构建/资源内联/脚本分离等

梁龙先森

大前端 webpack 28天写作

开发质量提升系列:标准模板(上)

罗小龙

方法论 28天写作

架构师训练营 4 期 第5周

引花眠

架构师训练营 4 期

产品的解决方案设计原则

🙃

产品经理

第三周作业

秦挺

死锁问题

武哥聊编程

Java 多线程 死锁

第十周课后练习

Binary

使用 Tye 辅助开发 k8s 应用竟如此简单(一)

newbe36524

Docker 微服务 k8s dotnet

你知道什么是敏捷交换机吗?

Soul网关源码解析目录

Java 网关 源码解析

怎么才能摸透String类的底层原理?看完这篇你就懂了

后台技术汇

28天写作

架构入门感悟总结

笑春风

产品经理训练营笔记-解决方案的设计和积累

.nil?

产品经理训练营

CSS(十)——用CSS设置表格样式

程序员的时光

程序员 大前端 七日更 28天写作

PB级数据检索平台  ElasticSearch在滴滴的实践_QCon_张亮_InfoQ精选文章