AICon 上海站|日程100%上线,解锁Al未来! 了解详情
写点什么

PB 级数据检索平台 ElasticSearch 在滴滴的实践

  • 2019-08-17
  • 本文字数:512 字

    阅读完需:约 2 分钟

PB级数据检索平台  ElasticSearch在滴滴的实践

QCon广州2019大会上,张亮讲师做了《PB 级数据检索平台 | ElasticSearch 在滴滴的实践》主题演讲,主要内容如下。


演讲简介


滴滴数据检索平台是基于 ElasticSearch 构建的一站式搜索中台,服务了公司一千多个平台方,涵盖了搜索与推荐、MySQL 实时数仓、安全分析、日志检索四大应用场景。本次会分享面对数千万 TPS 写入、数万 QPS 查询,PB 级的数据存储,如何打造存储成本低、系统稳定性好,易用的搜索中台。


听众受益


  1. 如何基于 ElasticSearch 构建低成本的日志检索解决方案?

  2. 面对千万级 TPS 的实时写入,万级 QPS 的实时查询,如何保证检索平台的稳定性?

  3. 业务快速发展下,平台如何高效地服务用户?


讲师介绍


张亮


滴滴出行 高级专家工程师,TGO 鲲鹏会会员


2011 年 4 月-2014 年 4 月担任华为南研所网盘研发工程师;2014 年 4 月至今任职滴滴出行数据中台高级专家工程师。在滴滴任职 5 年,从无到有组建团队,主持构建过任务调度系统、业务监控系统、链路跟踪与诊断系统、数据同步中心等架构设计与研发工作,目前在负责数据通道、kafka 服务、数据检索的引擎建设工作,具有丰富的高并发、高吞吐场景的架构设计与研发经验。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2019/guangzhou/schedule


2019-08-17 00:002859
用户头像

发布了 25 篇内容, 共 26.3 次阅读, 收获喜欢 119 次。

关注

评论

发布
暂无评论
发现更多内容

TCP 协议灵魂问题,巩固你的网路底层基础

了解操作系统的那些事儿,从这篇文章开始

飞天小牛肉

Java 程序员 面试 操作系统 2月春节不断更

LeetCode题解:1143. 最长公共子序列,动态规划,JavaScript,详细注释

Lee Chen

算法 大前端 LeetCode

【STM32】ST-LINK下载器下载后需复位,程序才运行的问题

AXYZdong

硬件 stm32 2月春节不断更

万字长文:解读区块链7类共识算法

华为云开发者联盟

区块链 公有链 拜占庭容错 共识算法 公式算法

Elasticsearch Query DSL 概述

escray

elastic 七日更 死磕Elasticsearch 60天通过Elastic认证考试 2月春节不断更

诊所数字化:就诊流程标准化和产品SOP设计

boshi

数字化转型 医疗 七日更

DIY一款4路USB转TTL串口调试模块

不脱发的程序猿

DIY 电路设计 硬件设计 USB电路 USB转TTL

最新金三银四阿里巴巴内部Java架构师面试突击面试题手册,面试前必看

Java架构追梦

Java 阿里巴巴 架构 面试 金三银四

android进阶之光!还有人不知道什么是AndroidX的吗?通用流行框架大全

欢喜学安卓

android 程序员 面试 移动开发

一、MongoDB简介

Kylin

数据库 mongodb 学习 七日更 二月春节不断更

CoralCache:一个提高微服务可用性的中间件

华为云开发者联盟

数据库 微服务 中间件 内存 CoralCache

架构师week12心得

Geek_xq

开源数据库管理系统现在比商业产品更受欢迎

PostgreSQLChina

数据库 postgresql 软件 开源社区

android开发工程师需要学什么?360°深入了解Flutter,这原因我服了

欢喜学安卓

android 程序员 面试 移动开发

Elasticsearch Search API 基础语法

escray

elastic 七日更 死磕Elasticsearch 60天通过Elastic认证考试 2月春节不断更

【LeetCode】最大连续1的个数三Java题解

Albert

算法 LeetCode 2月春节不断更

一文搞懂TCP的三次握手和四次挥手

不脱发的程序猿

三次握手 四次挥手 TCP/IP 网络通信协议 二月春节不断更

2021金三银四想进字节大厂必看:LeetCode算法收割机+算法刷题宝典

比伯

Java 编程 架构 面试 算法

地表建筑物识别Dayo1

IT蜗壳-Tango

七日更 2月春节不断更

对DevOps的九大误解,是时候纠正了!

禅道项目管理

开源 DevOps 敏捷 自动化 持续交付

竞猜商城系统软件制作

v16629866266

技术秘籍 | 如何简单优雅的适配textview行间距?

百度开发者中心

大前端 TextView

前端学习总结,经验分享,项目经验分享过程

我是哪吒

学习 程序员 Vue 大前端 2月春节不断更

15. Python 程序运行速度如何提高十倍?第一遍滚雪球学 Python 收工

梦想橡皮擦

Python 2月春节不断更

Hive HMS Canary 时间较长异常分析

kwang

大数据 hadoop hive

数据中心决策如何快人一步?一块大屏轻松实现3D数据可视化

一只数据鲸鱼

物联网 数据中心 数据可视化 IDC 机房管理

日记 2021年2月19日(周五)

Changing Lin

2月春节不断更

架构师week12作业

Geek_xq

Kafka.01 - 简介

insight

kafka 2月春节不断更

翻译:《实用的Python编程》01_07_Functions

codists

Python 人工智能 后端 数据结构与算法 函数

PB级数据检索平台  ElasticSearch在滴滴的实践_QCon_张亮_InfoQ精选文章