NVIDIA 初创加速计划,免费加速您的创业启动 了解详情
写点什么

PB 级数据检索平台 ElasticSearch 在滴滴的实践

  • 2019-08-17
  • 本文字数:512 字

    阅读完需:约 2 分钟

PB级数据检索平台  ElasticSearch在滴滴的实践

QCon广州2019大会上,张亮讲师做了《PB 级数据检索平台 | ElasticSearch 在滴滴的实践》主题演讲,主要内容如下。


演讲简介


滴滴数据检索平台是基于 ElasticSearch 构建的一站式搜索中台,服务了公司一千多个平台方,涵盖了搜索与推荐、MySQL 实时数仓、安全分析、日志检索四大应用场景。本次会分享面对数千万 TPS 写入、数万 QPS 查询,PB 级的数据存储,如何打造存储成本低、系统稳定性好,易用的搜索中台。


听众受益


  1. 如何基于 ElasticSearch 构建低成本的日志检索解决方案?

  2. 面对千万级 TPS 的实时写入,万级 QPS 的实时查询,如何保证检索平台的稳定性?

  3. 业务快速发展下,平台如何高效地服务用户?


讲师介绍


张亮


滴滴出行 高级专家工程师,TGO 鲲鹏会会员


2011 年 4 月-2014 年 4 月担任华为南研所网盘研发工程师;2014 年 4 月至今任职滴滴出行数据中台高级专家工程师。在滴滴任职 5 年,从无到有组建团队,主持构建过任务调度系统、业务监控系统、链路跟踪与诊断系统、数据同步中心等架构设计与研发工作,目前在负责数据通道、kafka 服务、数据检索的引擎建设工作,具有丰富的高并发、高吞吐场景的架构设计与研发经验。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2019/guangzhou/schedule


2019-08-17 00:002444
用户头像

发布了 25 篇内容, 共 25.4 次阅读, 收获喜欢 118 次。

关注

评论

发布
暂无评论
发现更多内容

拍乐云 X 青云科技,预见数字自由,相约 CIC 2021 云计算峰会

拍乐云Pano

获取微信小程序页面路径方法

一颗小树

小程序 微信开发者工具 页面路径 微信开发者

国内首家入驻统信系统的APaaS厂商

明道云

Linux之ln命令

入门小站

Linux

🐬【MySQL技术导航】常用函数介绍(1)

洛神灬殇

MySQL 7月日更

【Flutter 专题】80 初识 Flutter Stream (一)

阿策小和尚

Flutter 小菜 0 基础学习 Flutter Android 小菜鸟 7月日更

基于迁移学习的语义分割算法分享与代码复现

华为云开发者联盟

语义分割 modelarts 迁移学习 语义分割算法 迁移分割

快手上线本地生活榜单:自媒体平台在逐步蚕食搜索引擎市场

石头IT视角

[翻译]innodb_ruby 项目简介

keaper

MySQL 数据库 后端 服务端 innodb

Java到底是什么?

卢卡多多

Java 入门 7月日更 Java入门

网络安全、Web安全、渗透测试之笔经面经总结

网络安全学海

面试 网络安全 信息安全 渗透测试 漏洞分析

【LeetCode】两个链表的第一个公共节点Java题解

Albert

算法 LeetCode 7月日更

华为云UGO正式公测:4大核心优势破解异构数据库迁移难题

华为云开发者联盟

数据库 华为云数据库 异构数据库 对象迁移 应用迁移

图解 JavaScript 数组方法

devpoint

ES6 array 7月日更

在线XML转CSV工具

入门小站

char+char=number

喵叔

7月日更

微信朋友圈复杂度分析

桂阳

Vue进阶(幺玖肆):localStorage应用总结

No Silver Bullet

Vue LocalStorage 7月日更

“吴痛针灸”代言人翻车,为什么女性会重新定义品牌优势

脑极体

现代企业架构师的5大特征及六种方法

禅道项目管理

架构 数据 开发 创新 行业趋势

Go语言,什么情况下应该使用指针?

微客鸟窝

Go 语言

微信朋友圈高性能复杂度分析

木云先森

架构实战营

MERN堆栈

DisonTangor

node.js mongodb React Express

大数据实战训练营作业二

Clarke

在外包做开发3年,为了进大厂,耗时半年,整合出25W字Java全栈面试题,这就是我的决心

Java架构师迁哥

用户管理系统 - 用户权限设计从入门到精通

蒋川

后台开发 权限系统 权限管理 权限架构 用户管理

Rust从0到1-面向对象编程-概念

rust oop 面向对象编程

【软件测试转型自动化测试001】Python环境搭建&语法规则

程序员阿沐

Python 软件测试 自动化测试 环境搭建 语法规则

【架构训练营】模块二作业

zclau

Python OpenCV 图像的几何变换,先说不平凡的 resize 函数

梦想橡皮擦

Python 7月日更

Vue进阶(三十五):watch监听函数详解

No Silver Bullet

Vue 7月日更 watch

PB级数据检索平台  ElasticSearch在滴滴的实践_QCon_张亮_InfoQ精选文章