报名「音视频前端技术创新实践专场」,听腾讯云技术专家揭秘音视频相关技术>> 了解详情
写点什么

DataWorks 新品发布:阿里云一站式全链路数据开发与治理平台

  • 2021 年 10 月 19 日
  • 本文字数:1130 字

    阅读完需:约 4 分钟

DataWorks 新品发布:阿里云一站式全链路数据开发与治理平台

10 月 19 日,在 2021 杭州云栖大会全链路数据治理峰会上,阿里巴巴集团副总裁、阿里云智能计算平台事业部负责人贾扬清发表了《从数据要素到数据生产力—全链路数据治理的智能演进》主题演讲,同时阿里云智能高级产品专家黄博远发布了 DataWorks 新品—阿里云一站式全链路数据开发与治理平台

 

贾扬清在演讲中分享了阿里巴巴对数据平台的探索过程,从积木型工具组件到一站式数据开发再到目前的全链路数据治理,从小作坊到大平台到敏捷制造,可以说是让数据从低效向高质高效流动。“在大平台基础上,我们会看到各种数据质量问题,因此今天在关注平台的时候,我们会更加关注敏捷制造的概念。”数据的敏捷制造,能让数据要素释放更大的生产力。

 

怎样让数据质量、开发质量、数据利用率能够做得更好?在构建数据治理的方法论上,贾扬清也针对全链路数据治理提出三个方向

 

  • 组织主动性

  • 平台智能化

  • 业务可用性

 

对于贾扬清提到的全链路数据治理黄博远也在会上发布了 DataWorks 新品——阿里云一站式全链路数据开发与治理平台

 

诞生于 2009 年阿里巴巴集团内部的 DataWorks,不仅见证了阿里巴巴十多年大数据几次蜕变发展,更是阿里巴巴数据中台建设的最佳实践之一。如今 DataWorks 平台可以支撑阿里巴巴内部上百个业务团队的数据业务建设,每天稳定调度上千万数据处理任务。阿里巴巴每天有超过 5 万名员工在 DataWorks 上完成数据分析、数据开发和数据治理工作。那么,本次 DataWorks 新品又有什么亮点呢?会上,黄博远主要为大家介绍了七点:

 

  • 开放平台

  • 开放接口

  • 开放消息

  • 扩展点

  • 扩展程序

 

  • 数据建模

  • 正向逆向可视化建模

  • Excel 导入模型

  • DSL 脚本建模

  • 批量快速生成指标

  • 数据标准落标检测

 

  • 数据治理中心

  • 全新数据治理中心门户

  • 数仓问题主动发现机制

  • 数据治理健康度评估模型

 

  • 智能数据查询

  • 基于自然语言的数据查询

 

  • 隐私安全计算能力

  • 大规模分布式安全计算框架

  • 内置丰富算法,多种安全计算技术

 

  • 作业迁移工具与迁云专家服务

  • Airflow/Oozie/Azkaban等开源引擎作业迁移至 DataWorks

  • DataWorks 作业跨账号、跨地域、跨云迁移

  • 大数据迁云专家服务

 

  • 数据集成

  • 全增量一体化实时同步

  • 分库分表实时同步

  • 大规模分布式实时同步

 

目前 DataWorks 新品——阿里云一站式全链路数据开发与治理平台已经在北京、上海、杭州、深圳、张家口、成都以及新加坡开启公测,感兴趣的开发者可以进行试用。除重磅发布 DataWorks 新品外,本次全链路数据治理峰会上,还有宝信软件大数据中心大数据建设运营服务中心主任方亮《数据是怎么炼成的—宝武大数据建设实践》、阿里云智能高级技术专家王磊《数据生产智能—元数据驱动的全链路数据治理最佳实践》以及盒马数据中台负责人李启平《不忘初心,方得始终—盒马数据中台之道》等多个主题演讲,对相关主题感兴趣或关注 2021 云栖大会的同学,可点击观看线上直播

2021 年 10 月 19 日 21:532197

评论

发布
暂无评论
发现更多内容

HarmonyOS开发者的喜讯——华为认证来啦!

科技汇

华云大咖说 | 安超虚拟化平台全“芯”亮点揭秘

华云数据

367W字!京东商城Java架构师设计的亿级高并发秒杀手抄笔记

Java架构追梦

Java 架构 秒杀系统 亿级并发 京东商城

CDH的安装(三)

大数据技术指南

CDH 7月日更

Hive学习笔记(二)

五分钟学大数据

hive 7月日更

KeilC51基础 生成可以下载到单片机的Hex文件

万里无云万里天

IoT 嵌入式 KeilC51

网络攻防学习笔记 Day67

穿过生命散发芬芳

网络攻防 7月日更

接下来的40年,碳中和对我们来说意味着什么?

Geek_987812

iOS工程师如何恍然大悟?

程序员 IT 编程之路 iOS 知识体系

查看Linux端口占用,并关掉相关进程。

学神来啦

云计算 Linux 运维

视频云峰会|“科技 X 艺术” 的颗粒度体验是什么?

阿里云视频云

阿里云 AR 艺术 摄影 vr

BITUAN被Degital Future Pte Ltd收购,即将更名为Degital Future

股市老人币圈新

万字长文,Spark 架构原理和RDD算子详解一网打进!

云祁

大数据 spark 7月日更

KeilC51基础 改变代码的字体大小

万里无云万里天

IoT 嵌入式 KeilC51

两者可兼得,在IDEA中使用Git!

Ayue

git 学习

揭秘版权保护下的视频隐形水印算法(上篇)

拍乐云Pano

Apache ShardingSphere 邀您相约 Open Source Day

SphereEx

BITUAN被Degital Future Pte Ltd收购,即将更名为Degital Future

区块链小八歌

架构实战营作业模块一

五只羊

架构实战营

怎么在linux系统下安装Nginx?一分钟学会!

小桃

Linux 网络安全 系统

简单四步学会在数字孪生可视化场景中创建小地图!

森友小锘

前端 地图 物联网 可视化 数字孪生

FIL币价值与未来, FIL币价值预估

模块八作业

c

架构实战营

KeilC51基础 添加与删除中文时出现问号

万里无云万里天

IoT 嵌入式 KeilC51

虚拟币合约交易平台搭建,永续合约交易系统源码

13823153121

SQL巩固测试题

Flychen

扩展Elasticsearch客户端简化ES查询(.net core/framework)

Spook

KeilC51基础 利用仿真测试代码的运行时间

万里无云万里天

IoT 嵌入式 KeilC51

视频云会议已成未来发展必然趋势

anyRTC开发者

音视频 WebRTC 视频会议 云视频

数字货币这波热潮,各国都舍不得错过

Geek_987812

论文解读丨图神经网络应用于半结构化文档的命名实体识别和关系提取

华为云开发者社区

文档 识别 图神经网络 半结构化文档 关系提取

数据cool谈(第2期)寻找下一代企业级数据库

数据cool谈(第2期)寻找下一代企业级数据库

DataWorks 新品发布:阿里云一站式全链路数据开发与治理平台-InfoQ