Graph + AI 中国峰会火热报名中,点击探索图分析更多可能! 了解详情
写点什么

大数据的下一站:数据中台

2018 年 9 月 17 日

伴随着移动互联网和物联网的发展,大数据概念开始产生,但并不是所有的数据都能称为大数据,IT 调研与咨询服务公司 Gartner 对“大数据”的定义是:需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

大数据行业发展现状

根据中国信通院发布的中国大数据发展调查报告:2017 年中国大数据总体规模为 4700 亿元人民币,同比增长 30%,2017 年大数据核心产业规模为 236 亿元人民币,增速达到 40.5%,预计 2018-2020 年增速保持在 30% 以上。

在大数据应用上,接近 2/3 的企业已经成立相关数据分析部门,企业对数据分析的重视程度进一步提高,其中应用大数据实现了智能决策的企业占比最高,达到了 55.2%,其次,46.6% 的企业表示应用大数据后提升了运营效果,35.9% 的企业应用大数据后能够更好地管理风险。

大数据得到快速发展的一个重要原因是智能手机的普及,用户行为被有效记录下来,全球数据量开始呈现爆发性增长,目前,大数据的来源主要包括:

  • 移动设备的传感器收集了大量用户的行为数据;
  • 电子地图产生大量的用户轨迹数据,揭示了人们的流动规律和生活习惯;
  • 电商应用带来了网上交易数据,包括购买喜好、支付渠道、物流运输等。

在技术层面上来说,数据采集与传输、数据存储与管理、计算处理、查询与分析和可视化展现构成数据分析生态结构,近几年,相应技术层级的企业都如雨后春笋般涌现。而目前,数据体量、产业规模以及云计算高速发展所推动的基础设施成本都已不再是问题,大数据能否创造真实的商业价值和回报是大数据企业真正关心的核心问题。

开放数据是合作的基础

TalkingData 创始人兼首席执行官崔晓波认为,互联网公司之间的战役已经结束了。所有企业主战场不在线上而在线下,不管是互联网巨头还是产业巨头都在思考如何利用互联网、数据和相关技术的能力改变线下产业。而且,选择合作伙伴应该遵循一个原则:愿意真的开放数据,愿意给实体产业赋能

目前,中国已进入数据时代,企业核心竞争力是数据,不管是数据中台还是数据平台,提供的是一个核心能力,基于这一核心能力需要和别人互利共赢。简单说就是如何管理渠道、管理合作伙伴,这是中国企业首先要过的一关。第二才是如何把这个东西做大,其后才是生态环节。

大数据需要合法连接

数据的收集一直被人们担心是否侵犯了个人隐私,对此,崔晓波认为美国对信息隐私主要采取普通法保护的模式,由法院最终确定哪些行为构成侵犯隐私权。中国的个人信息保护制度才刚刚建立,只有几部法律分别界定了个人信息保护的内容,对如何保护个人信息还没有统一的说法,所以,需要结合我国的国情形成我们特有的个人信息保护理论和个人信息保护制度。

对企业而言,他们应该考虑数据如何做到安全合法连接,国家鼓励数据互联互通,政府部门之间数据也需要互联互通,但是由于规则不清楚,大多公司都不敢去做。所以企业需要摸清合规的界限在哪里,做到合法连接;数据连接、关联之后,再提供类似于安全沙箱的环境,将数据在里面做整合,来保证应用、建模时的数据安全。

大数据需要沉淀为产品

虽然,在基础科研方面,中国跟美国还有一些距离,但在大数据应用市场上,中国的应用和需求是比较强劲的,因为中国企业更关心应用和落地,解决应用才能给客户创造价值。

过去,所有大数据企业都在做项目,并没有更多资源把能力沉淀成产品和平台。比如很多可共用的数据服务没有服务化、产品化,很多产品总是做重复的动作。

今年,数据中台成为大数据行业的热门概念,它最先是从阿里引出的,是指通过数据技术,对海量数据进行采集、计算、存储、加工,同时统一标准和口径。数据中台把数据统一之后,会形成标准数据,再进行存储,形成大数据资产层,进而为客户提供高效服务。这些服务跟企业的业务有较强的关联性,是这个企业独有的且能复用的,它是企业业务和数据的沉淀,其不仅能降低重复建设、减少烟囱式协作的成本,也是差异化竞争优势所在。

在不久前举办的 TalkingData T11 数据智能峰会上,红杉中国专家合伙人车品觉先生指出,数据中台把数据与数据的技术,再与整个人才架构或公司架构结合以后,能孵化出更多的创新出来,形成创新的前端。

未来,基于数据时代,可能有很多公司平台出现。现在几大互联网巨头都在做自己的平台,不过更多是为企业自身服务。但创业公司由于体量比较小,既缺少客户,也缺乏聚合数据的能力,这就需要数据中台提供赋能。如何让服务头部企业探索出来的能力和方法,更好地去赋能整个产业链中的中小企业,是未来几年着力探索的工作。

崔晓波认为数据中台需要具备数据管理、数据工程和数据科学的能力。现在不同的数据中台有很多,有的企业把数据中台做成了软件中台,堆砌工具,这往往是 IT 部门主导的。但是所有数据中台的核心应该是数据,最核心的思想是数据如何共享,所以数据中台是否成功的唯一检验标准就是是否有足够的共享能力。

2018 年 9 月 17 日 01:532895
用户头像

发布了 83 篇内容, 共 43.0 次阅读, 收获喜欢 183 次。

关注

评论

发布
暂无评论
发现更多内容

【基础架构】不同场景下的数据存储技术,你用对了吗?

嘉为蓝鲸

网络 存储 系统 raid 磁盘挂载

鼓舞人心!主席支持数字经济!央行数字货币研究所为世界制定区块链相关国际标准

CECBC区块链专委会

区块链 金融

万字长文 | 23 个问题 TCP 疑难杂症全解析

yes

TCP 计算机网络

又踩Maven的两个坑

xiaoboey

maven Unknown lifecycle phase settings.xml 无效 PowerShell

浅析LR.Net工作流引擎

Philips

敏捷开发 工作流 软件开发流程 开发工具

深兰科技的征途,AI的赛场与战场

脑极体

为什么企业自主开发软件时,都会使用统一的模块化框架式开发平台?

Learun

敏捷开发 程序设计 开发工具 软件设计 技术方案

内存型数据库Redis,是如何实现持久化的?

Zhongger

redis

有的时候,到达目的地,还不如在旅途中。

金龟换酒

心理学 哲学 活在当下

LeetCode题解:225. 用队列实现栈,两个队列, 压入 - O(n), 弹出 - O(1),JavaScript,详细注释

Lee Chen

LeetCode 前端进阶训练营

深入浅出java虚拟机

AI乔治

Java 架构 性能优化 JVM JVM原理

week13 作业

Geek_2e7dd7

就靠这几段代码,带你玩转rpc通信协议,不信你学不明白

小Q

Java 架构 面试 RPC 网络

云图说 | 一分钟带你扫盲云容器黑话

华为云开发者社区

容器 节点 集群

DB-Engines 9月数据库排名:ClickHouse一路猛冲,Redis坐稳第七

华章IT

MySQL 数据库 redis Clickhouse

北京城市副中心将试点法定数字货币

CECBC区块链专委会

数字货币 货币

CPU中的程序是怎么运行起来的

良知犹存

cpu

架构师课作业 - 第十二周

Tulane

喷一喷坑爹的面向UI编程

架构师修行之路

一个银行客户经理的“变形记”

华为云开发者社区

人工智能 金融科技

Docker私有化部署gitlab gitlab-runner

Leon

gitlab 持续集成 runner

抽象可能从未停止过

架构师修行之路

系统设计 抽象 抽象思维

week 13 学习总结

Geek_2e7dd7

使用amoeba实现mysql读写分离

小Q

Java MySQL 编程 程序员

太赞了!华为工程师终于总结出了Linux归纳笔记,提供开放下载

小Q

产业互联网成区块链与数字货币的分水岭

CECBC区块链专委会

区块链 数字货币 产业互联网

正在走进现实的“飞行汽车”,能否颠覆地面交通?

脑极体

快来看看!AQS 和 CountDownLatch 有怎么样的关系?

程序员小航

Java AQS 源码阅读 CountDownLatch JUC

深入Spring Security魔幻山谷-获取认证机制核心原理讲解

朱季谦

spring security

或许是史上最好的AQS源码分析了,你确定要错过?!

InfoQ_d2212957090d

XSKY全新一代SDS一体机五大场景之存储+灾备

XSKY融合存储

大数据的下一站:数据中台-InfoQ