写点什么

数据中台初探与应用实践

  • 2020-05-18
  • 本文字数:1518 字

    阅读完需:约 5 分钟

数据中台初探与应用实践

本文是【技术琐话公益直播】4 月 28 日晚分享嘉宾徐桢虎在线直播中主题《数据中台初探与应用实践》内容整理,内容有删减调整,直播回放见之前的分享。


1 为什么需要数据中台


当企业发展到一定规模时,数据是否能够创造价值显得尤为重要。如果没有从业务的角度对数据进行规划,再多的数据也没有用。一个企业业务与数据双中台的战略地位是相辅相成的,需要打造数据与业务的闭环。


  • 数据增值 :对数据做统一规划、管理、深度挖掘,实现数据到资产的增值;

  • 数据流通 :高价值数据资源的整合、积累、流通,提升数据处理能力;

  • 业务创新 :打破技术隔阂,构建智能化技术引擎,提高业务效率和创新能力。


数据中台的核心价值为优化现有业务和实现新业务的转型,打造数据驱动的智能化企业。


业务价值


  • 以客户为中心进行精细化运营

  • 以数据为基础支撑商业模式创新

  • 打造持续增值的数据资产


技术价值


  • 应对不同数据处理的需求

  • 对数据资产进行标签化应用

  • 快速复用数据服务

  • 快速定位数据血缘链路

2 什么是数据中台


传统数据仓库,第一次明确了数据分析的应用场景应该用单独的解决方案去实现,不再依赖于业务的数据库。这个阶段主要是 IBM、oracle 的产品的黄金年代。但是进入互联网时代后业务发展太快,数据量剧增,传统数据仓库逐渐没落。为什么传统数据仓库效率这么低?自顶向下建模。


数据湖(Data Lake)是一个以原始格式存储数据的存储库或系统。以 google 发布的三篇论文为基础实现的 hadoop 开源项目的出现大数据平台是面向数据研发场景的,覆盖数据研发的完整链路的数据工作台。


大数据平台像一条设备流水线,经过大数据平台的加工,原始数据变成了指标,出现在各个报表或者数据产品中。


数据中台的核心,是在企业数字化战略的基础上,利用一套技术标准构建的共享、安全、标准、统一的数据服务。


恩门建模(自顶向下)因为是从数据源和主题域开始构建,构建成本比较高,适用于应用场景比较固定的业务,比如金融领域,冗余数据少是它的优势。金博尔建模(自底向上)由于是从分析场景出发,适用于变化速度比较快的业务,比如互联网业务。



嘉宾观点:数据中台是各个企业独有的一种战略选择和组织形式,不存在数据中台这样的一个能对外直接售卖的产品。


3 哪些企业需要数据中台


嘉宾认为:


企业有一定的信息化基础,但存在较多的业务数据的孤岛,需要数据整合分析


企业有数字化转型需求,需要通过精细化运营提升效率


企业是跨多个领域业务线的集团架构,有丰富的标签维度和大量的数据应用场景


四、什么时候要建数据中台

4 什么时候要建数据中台


5 建数据中台的成本

五、建设数据中台的成本


6 如何建数据中台

六、如何建数据中台



嘉宾观点:可见是数据资产化,可用是数据产品化和服务化,可运营是要打造数据价值转换的闭环


建议原则:


尽量兼容原各业务线系统,避免推倒重来(开源兼容)


先拿新的业务线作为试点,再大面积推广(快速试错)


先使用的业务线,提供更高的容错度和激励(鼓励创新)



7 建数据中台职责由那个团队承担?

8 封面传媒数据中台应用实践













嘉宾核心观点



人的因素往往最难推动,因为涉及到很多团队的利益,还涉及到能不能找到一些有经验的人来做这个事情。


嘉宾介绍


徐桢虎,西南交通大学计算机硕士,专业方向是数据仓库与数据挖掘


封面传媒 总经理助理兼数据研究部总监


技术委员会召集人、人工智能研究所执行所长


专注领域:数据中台建设、媒体 AI 应用落地


TGO 鲲鹏会 成都分会成员


2050 大会讲师


四川省青联委员


本文转载自公众号技术琐话(ID:TheoryPractice)。


原文链接


https://mp.weixin.qq.com/s?__biz=MzIxMzEzMjM5NQ==&mid=2651036706&idx=1&sn=467ce35475c82de0c88ba932455b541c&chksm=8c4c4926bb3bc030dafc939cc1701e4ef8e770c043da3dfd96831c6f85a78a2bb06e194d01fe&scene=27#wechat_redirect


2020-05-18 10:062561

评论 3 条评论

发布
用户头像
个人认为,中台在大多数公司性价比不高。失败的概率也非常大。
1、投入真的很大。如果小投入,几乎不要试。
2、高层会在中台建设一半,然后发现效果一般时,会马上提出质疑。压迫式KPI就会到来。
3、中台很容易是大数据团队自己幻想的。是否跟业务运营,数据分师接得上气,还未知。
2020-05-19 14:46
回复
用户头像
受益匪浅。在比较高的层次讲解了数据中台的意义,也给了数据中台建设的一般范式。看文章内容应该是截取了ppt,是否可以分享ppt
2020-05-18 15:52
回复
用户头像
中台适用场景小
2020-05-18 11:06
回复
没有更多了
发现更多内容

前端二面高频手写面试题

helloworld1024fd

JavaScript

实现Promise的原型方法--前端面试能力提升

helloworld1024fd

JavaScript

GaiaX开源解读 | 给Stretch(Rust编写的Flexbox布局引擎)新增特性,我掉了好多头发

阿里巴巴文娱技术

开源 rust 后端 rust语言 GaiaX

聊聊电商系统架构, 常见的9个大坑

Java全栈架构师

程序员 后端 架构师 电商 系统秒杀

TiDB Operator扩缩容和集群的管理

TiDB 社区干货传送门

集群管理 管理与运维 安装 & 部署 扩/缩容

Lightning checksum failed 报错实践案例

TiDB 社区干货传送门

深度剖析 | 【JVM深层系列】[HotSpotVM研究系列] JVM调优的"标准参数"的各种陷阱和坑点分析(攻克盲点及混淆点)「 1 」

码界西柚

JVM 12 月 PK 榜 调优参数 调优技术

【敏捷转型,效能提升】敏捷转型实践系列分享

京东科技开发者

敏捷 敏捷团队 效能度量 效能提升 #DevOps

民航二所马勇:数据安全防护体系的探索与思考

极盾科技

数据安全

破记录!国产数据库KunDB 单节点TPC-C事务性能超180万tpmC

星环科技

XTransfer技术专家亮相Flink Forward Asia 2022

XTransfer技术

手把手教你成为荣耀开发者:应用管理指南

荣耀开发者服务平台

前端 快应用 荣耀 honor 应用集成

公交车LED电子路牌宣传效果更好吗

Dylan

LED显示屏 户外LED显示屏 led显示屏厂家

RocketMQ Connect 构建流式数据处理平台

Apache RocketMQ

RocketMQ Connect

性能最大提升60%,阿里云发布基于第四代英特尔至强的第八代ECS实例

云布道师

阿里云

五大亮点来袭!神州云科冬季发布会报名通道开启,千份精美礼品等你来拿!

通明湖

从TiDB搭建到监控闭环

TiDB 社区干货传送门

监控 管理与运维

搜电充电:创新“服务卡片”,让即时充电更便捷

HarmonyOS开发者

HarmonyOS

TiCDC 在多种场景的新特性的应用

TiDB 社区干货传送门

安装 & 部署 OLTP 场景实践

TiDB增强型 StatefulSet 控制器--Advanced StatefulSet

TiDB 社区干货传送门

集群管理 管理与运维 安装 & 部署 扩/缩容

必会vue面试题总结

bb_xiaxia1998

Vue

【12.9-12.16】写作社区优秀技术博文一览

InfoQ写作社区官方

热门活动

中移链合约常用开发介绍 (一)开发基本流程

BSN研习社

中移链

全球首家!星环科技通过3TB TPCx-AI测试,实现大数据与AI的完美融合

星环科技

将渲染计算搬到云端,开启低成本、强交互、沉浸式体验

阿里云CloudImagine

云计算 阿里云 云渲染 串流

社招前端常考手写面试题总结

helloworld1024fd

JavaScript

几个常见的js手写题,你能写出来几道

helloworld1024fd

JavaScript

星环数据云平台 TDC 3.1 发布,新增滚动重启、存储回收站等八大核心功能

星环科技

重写Nacos服务发现:多个服务器如何跨命名空间,访问公共服务?

LigaAI

Java 测试 nacos 测试环境 12 月 PK 榜

别再秃头背锅了!这个小技巧统计第三方接口耗时很安逸

Java永远的神

Java 程序员 后端 架构师 springboot

数据中台初探与应用实践_开源_徐桢虎_InfoQ精选文章