PB 级数据检索平台 ElasticSearch 在滴滴的实践

阅读数:829 2019 年 8 月 17 日 00:00

PB级数据检索平台  ElasticSearch在滴滴的实践

QCon 广州 2019 大会上,张亮讲师做了《PB 级数据检索平台 | ElasticSearch 在滴滴的实践》主题演讲,主要内容如下。

演讲简介

滴滴数据检索平台是基于 ElasticSearch 构建的一站式搜索中台,服务了公司一千多个平台方,涵盖了搜索与推荐、MySQL 实时数仓、安全分析、日志检索四大应用场景。本次会分享面对数千万 TPS 写入、数万 QPS 查询,PB 级的数据存储,如何打造存储成本低、系统稳定性好,易用的搜索中台。

听众受益

  1. 如何基于 ElasticSearch 构建低成本的日志检索解决方案?
  2. 面对千万级 TPS 的实时写入,万级 QPS 的实时查询,如何保证检索平台的稳定性?
  3. 业务快速发展下,平台如何高效地服务用户?

讲师介绍

张亮

滴滴出行 高级专家工程师,TGO 鲲鹏会会员

2011 年 4 月 -2014 年 4 月担任华为南研所网盘研发工程师;2014 年 4 月至今任职滴滴出行数据中台高级专家工程师。在滴滴任职 5 年,从无到有组建团队,主持构建过任务调度系统、业务监控系统、链路跟踪与诊断系统、数据同步中心等架构设计与研发工作,目前在负责数据通道、kafka 服务、数据检索的引擎建设工作,具有丰富的高并发、高吞吐场景的架构设计与研发经验。

PB级数据检索平台  ElasticSearch在滴滴的实践

PB级数据检索平台  ElasticSearch在滴滴的实践

PB级数据检索平台  ElasticSearch在滴滴的实践

PB级数据检索平台  ElasticSearch在滴滴的实践

PB级数据检索平台  ElasticSearch在滴滴的实践

PB级数据检索平台  ElasticSearch在滴滴的实践

PB级数据检索平台  ElasticSearch在滴滴的实践

PB级数据检索平台  ElasticSearch在滴滴的实践

PB级数据检索平台  ElasticSearch在滴滴的实践

PB级数据检索平台  ElasticSearch在滴滴的实践

完整演讲 PPT 下载链接

https://qcon.infoq.cn/2019/guangzhou/schedule

评论

发布