9月7日-8日,相约 2023 腾讯全球数字生态大会!聚焦产业未来发展新趋势! 了解详情
写点什么

转转数据中台技术架构方法论与实践

  • 2020-02-05
  • 本文字数:911 字

    阅读完需:约 3 分钟

转转数据中台技术架构方法论与实践

ArchSummit 北京 2019 大会上,李军讲师做了《转转数据中台技术架构方法论与实践》主题演讲,主要内容如下。


演讲简介


作为一个千亿规模的二手电商交易平台,转转拥有复杂的业务生态、足够纵深的业务链路,以及快速迭代的业务功能,遂产生了海量的数据,也催生了大量的数据需求。


在飞速发展的业务和不断膨胀的数据需求面前,传统的数据研发模式和数据平台短板逐渐暴露:数据脏、乱、差,业务不满意;数据研发疲于奔命、四处救火、服务效率低下,普遍苦恼 SQL-Boy 没有成长。面对高速向前发展的业务和踌躇不前的数据服务又该如何化解两者矛盾,进而让数据与业务产生协同效应?


解决方案选型:面向业务服务建模、基于平台资源整合、能力复用赋能业务、构建企业级的数据中台。


方案介绍:转转数据中台的核心架构包括:PaaS 层、DaaS 层、DA 层,分别对应业务数据化→数据服务化→服务业务化的三个阶段,形成完整的数据生命周期及业务的有机结合,取之业务,用之业务。


实施后效果说明:数据中台解决了之前数据脏、乱、差状况,也解决了服务、交付效率低下、研发价值认同感低等关键问题。需求数量年环比下降 60%,平台服务覆盖 100%业务部门,数据研发效率提升 50%,核心数据延迟与异常下降 90%。


内容大纲


  1. 转转数据中台的背景与目标

  2. 数据中台技术架构与思路

  3. 数据中台构建过程:

  4. PaaS

  5. DaaS

  6. DA

  7. 转转数据中台未来方向

  8. 数据中台建设经验总结


听众受益点


  1. 了解当下最火热的数据中台怎样在中小型公司落地

  2. 数据中台能解决什么问题,不能解决什么问题

  3. 数据中台建设中的一些坑与实践


讲师介绍


李军


转转 数据中台负责人


2016 年 4 月加入转转担任数据中台负责人,在转转从 0 开始组建数据产品、研发、架构、统计分析团队,为 30+部门产品运营、战略分析、数据挖掘团队提供各类工具平台、数据及产品支持,赋能业务。此前先后在腾讯、58 同城从事大数据研发、架构、管理工作。


十年的大数据研发、架构、管理,积累了丰富的互联网大数据行业经验,有完整的数据平台、基础架构搭建经验,团队成员从 0 到 100 的管理经验。对数据体系与中台建设、数据仓库及其业务应用、产品落地等亦有深厚认知与丰富的实践经验。












完整演讲 PPT 下载链接


https://archsummit.infoq.cn/2019/beijing/schedule


活动推荐:

2023年9月3-5日,「QCon全球软件开发大会·北京站」 将在北京•富力万丽酒店举办。此次大会以「启航·AIGC软件工程变革」为主题,策划了大前端融合提效、大模型应用落地、面向 AI 的存储、AIGC 浪潮下的研发效能提升、LLMOps、异构算力、微服务架构治理、业务安全技术、构建未来软件的编程语言、FinOps 等近30个精彩专题。咨询购票可联系票务经理 18514549229(微信同手机号)。

2020-02-05 20:151505

评论

发布
暂无评论
发现更多内容

如何在设计时保证RPA机器人的稳定运行?

金小K

APP热更新技术最优解,不只是支持热更新...

Speedoooo

小程序 APP开发 容器安全 热更新 小程序容器

新插件上线,public API 处理能力更进一步

API7.ai 技术团队

HTTP APISIX APISIX 网关

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

百度开发者中心

报名直达丨HarmonyOS开发者创新大赛线下城市交流会来了,约吗?

HarmonyOS开发者

HarmonyOS 交流 创新大赛

为什么国企要加快推进数字化转型?

用友BIP

数字化转型 用友 用友iuap 用友YonBIP 国企

异步请求积压可视化|如何 1 分钟内快速定位函数计算积压问题

Serverless Devs

2022写作计划2月文章排行榜

TGO鲲鹏会

TGO鲲鹏会 写作计划

Apache APISIX 新技能,代理 gRPC-Web 请求

API7.ai 技术团队

gRPC HTTP 网关 APISIX

Apache APISIX 集成 Open Policy Agent

API7.ai 技术团队

开源 后端 API网关 OPA Apache APISIX

浅析企业云服务之SaaS、PaaS、IaaS对比分析

郑州埃文科技

IaaS PaaS SaaS

StarRocks 元数据管理及 FE 高可用机制

邸星星

BerkeleyDB-JE bdbje StarRocks元数据管理

Window下Redis的安装和部署详细教程

明金同学

redis

使用goofys挂载S3 bucket为文件系统

阿呆

文件系统 goofys aws s3

学生外包管理系统架构设计文档

孙强

#架构实战营

如何使用 Apache APISIX CSRF 安全插件拦截跨站点伪造攻击

API7.ai 技术团队

CSRF API网关 Apache APISIX

阿里云资深专家李国强:云原生的一些趋势和新方向

Serverless Devs

常青藤开源科技加入,龙蜥社区再迎 HPC 和开源领域新伙伴

OpenAnolis小助手

Linux 开源 高性能计算

你知道钓鱼网站的形成步骤吗?一次网络钓鱼演练带你了解(增强安全意识)

H

网络安全 钓鱼网站

Nacos 在 Apache APISIX API 网关中的服务发现实践

API7.ai 技术团队

nacos 注册中心 服务发现 API网关 APISIX

斯图飞腾Stratifyd入选「2022爱分析·营销科技厂商全景报告」

Geek_2d6073

企业级 APIs 安全实践指南 (建议初中级工程师收藏)

领创集团Advance Intelligence Group

API

【场景化集成方案】如何让企业快速集成钉钉各种能力

钉钉开发者

钉钉能力中心 钉钉官网 场景化能力包 场景化解决方案 应用集成方案

极速生成缩略图,Serverless 支撑赛事转播锁定冬奥亮点

Serverless Devs

万字通俗讲解何为复杂度

华为云开发者联盟

数据结构 时间复杂度 复杂度 空间复杂度 复杂度分许

生态扩大进行中!Apache APISIX 集成 Splunk HTTP Event Collector

API7.ai 技术团队

API网关 Apache APISIX

JWT Token在线编码生成

入门小站

工具

COPT4.0新增凸QP、QCP和QCQP求解能力

杉数科技

求解器 优化求解器 凸QP 凸QCP

第十五节:SpringBoot使用JPA访问数据库

入门小站

spring-boot

SQL注入-“错误”的语句为什么会得到“正确”的结果?

BUG侦探

MySQL 网络安全 SQL注入

计算IIS

杉数科技

求解器 优化求解器 计算IIS 混合整数规划 杉数科技

  • 扫码添加小助手
    领取最新资料包
转转数据中台技术架构方法论与实践_ArchSummit_李军_InfoQ精选文章