最新发布《数智时代的AI人才粮仓模型解读白皮书(2024版)》,立即领取! 了解详情
写点什么

PB 级数据检索平台 ElasticSearch 在滴滴的实践

  • 2019-08-17
  • 本文字数:512 字

    阅读完需:约 2 分钟

PB级数据检索平台  ElasticSearch在滴滴的实践

QCon广州2019大会上,张亮讲师做了《PB 级数据检索平台 | ElasticSearch 在滴滴的实践》主题演讲,主要内容如下。


演讲简介


滴滴数据检索平台是基于 ElasticSearch 构建的一站式搜索中台,服务了公司一千多个平台方,涵盖了搜索与推荐、MySQL 实时数仓、安全分析、日志检索四大应用场景。本次会分享面对数千万 TPS 写入、数万 QPS 查询,PB 级的数据存储,如何打造存储成本低、系统稳定性好,易用的搜索中台。


听众受益


  1. 如何基于 ElasticSearch 构建低成本的日志检索解决方案?

  2. 面对千万级 TPS 的实时写入,万级 QPS 的实时查询,如何保证检索平台的稳定性?

  3. 业务快速发展下,平台如何高效地服务用户?


讲师介绍


张亮


滴滴出行 高级专家工程师,TGO 鲲鹏会会员


2011 年 4 月-2014 年 4 月担任华为南研所网盘研发工程师;2014 年 4 月至今任职滴滴出行数据中台高级专家工程师。在滴滴任职 5 年,从无到有组建团队,主持构建过任务调度系统、业务监控系统、链路跟踪与诊断系统、数据同步中心等架构设计与研发工作,目前在负责数据通道、kafka 服务、数据检索的引擎建设工作,具有丰富的高并发、高吞吐场景的架构设计与研发经验。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2019/guangzhou/schedule


2019-08-17 00:002438
用户头像

发布了 25 篇内容, 共 25.4 次阅读, 收获喜欢 118 次。

关注

评论

发布
暂无评论
发现更多内容

强化学习是否言过其实?

高端章鱼哥

强化学习 计算机程序

敏捷开发流程及项目实战分享

谐云

用ChatGPT搞定12 种编程语言:看看它的表现如何

互联网工科生

人工智能 编程语言 ChatGPT

机器学习之PyTorch和Scikit-Learn第2章 为分类训练简单机器学习算法

Alan

人工智能 机器学习 PyTorch scikit-learn 多层感知机

华为开发者大会:软件开发小白的华为云云上初体验

YG科技

2023全球数字经济大会召开,天翼云携手产业链共建开放共赢云生态

天翼云开发者社区

云计算

我和“华为云”有个约会

YG科技

使用华为云开发者插件一键部署应用到ECS

YG科技

什么是从人类反馈中强化学习(RLHF)?

高端章鱼哥

LLM RLHF 大语言模型

成功MLOps具有的五大共同特征

这我可不懂

机器学习

从Vue到无限可能:数智时代下的低代码快速开发之旅

快乐非自愿限量之名

架构 Vue 低代码 数智化

汽车ECU软件开发之应用层软件与底层软件

DevOps和数字孪生

汽车ECU 仿真建模

直播 | SDS 容灾方案,让制品数据更安全

CODING DevOps

高效运营新纪元:智能化华为云Astro低代码重塑组装式交付

华为云PaaS服务小智

云计算 软件开发 华为云 华为开发者大会2023

适配各类大模型应用!手把手教你选择 Zilliz Cloud 实例类型

Zilliz

Milvus Zilliz 向量数据库 zillzicloud

详解:为什么瓴羊QuickBI被誉为国内口碑最好的BI工具

巷子

Cilium 流量治理功能与部署实践

谐云

机器学习之PyTorch和Scikit-Learn第一章 赋予计算机学习数据的能力

Alan

人工智能 机器学习 PyTorch scikit-learn

《深入浅出Java虚拟机 — JVM原理与实战》带你攻克技术盲区,夯实底层基础 —— 吃透class字节码文件技术基底和实现原理(核心结构剖析)

洛神灬殇

Java JVM 深入理解JVM 挖掘底层原理

玩转云端| 天翼云边缘安全加速平台AccessOne实用窍门之多款产品管理难?一站式平台管理全hold住!

天翼云开发者社区

云计算 云平台 边缘安全

数智时代加速!云存储与低代码开发:超强联盟引领技术革新

不在线第一只蜗牛

低代码 云存储

《面试1v1》java注解

JavaPub

Java 面试 注解

插件界的全家桶!对接华为云能力就用它了!

YG科技

窥探AI图像安全技术:守护数智时代的无形盾牌与低代码的魔术师

EquatorCoco

AI 低代码 ChatGPT 图像安全

阿里内部 SpringCloud Alibaba(全彩版)开源,P8 大牛纯手打造

采菊东篱下

Java 程序员 微服务

数智革命下的开发利器:探索云原生技术与低代码的超强结合!

加入高科技仿生人

云原生 低代码

PostgreSQL技术内幕(九)libpq通信协议

酷克数据HashData

社区新手小伙伴测评第二弹 | 使用 ChatGPT 可以帮助完成 IoTDB 的写入和查询吗?

Apache IoTDB

时序数据库 IoTDB Apache IoTDB ChatGPT

华为云出品《IDEA-Plugin-开发手册》电子书——学完即会场景设计

华为云PaaS服务小智

开发者 华为云 编程学习 华为开发者大会2023

2023-07-13:如果你熟悉 Shell 编程,那么一定了解过花括号展开,它可以用来生成任意字符串。 花括号展开的表达式可以看作一个由 花括号、逗号 和 小写英文字母 组成的字符串 定义下面几条语

福大大架构师每日一题

福大大架构师每日一题

面向Web开发人员的Linux实用入门

互联网工科生

Linux 运维 Web

PB级数据检索平台  ElasticSearch在滴滴的实践_QCon_张亮_InfoQ精选文章