收录了 数据架构 频道下的 50 篇内容
快手大数据架构团队组建于2017年,短短三年间已搭建起一个万亿级规模的大数据架构体系。快手的大数据架构是怎样演进的?在春晚红包活动中遇到了哪些挑战,又是如何应对的?在Hadoop的应用上,快手有何经验可供业界参考?
本文借助于《演进式架构》这本书中关于演进式架构体系的描述,探索我们如何在数据这个领域,设计出演进式数据架构。
大数据架构的发展可用三个时代九种架构来做总结,其中前四代是传统数据仓库时代的架构,后面五代是大数据架构模式。
整个数据架构正在发生天翻地覆的变化,并且在未来十年,这个趋势仍会继续,原有的架构会不断被改良甚至颠覆。
Data Mesh 的潜力既令人兴奋又令人生畏,就像从前的微服务架构一样。
本文是酷狗音乐的架构师王劲对酷狗大数据架构重构的总结。酷狗音乐的大数据架构本身很经典,而这篇讲解了对原来的架构上进行重构的工作内容,总共分为重构的原因、新一代的大数据技术架构、踩过的坑、后续持续改进四个部分来给大家谈酷狗音乐大数据平台重构的过程。
本文以作者亲历视角,主要分享数仓型数据架构师的“修炼大法”。
现有数据架构难以支撑现代化应用的实现。
大数据杂谈微信群分享内容。 整个分享分为三个部分: 第一部分,说说我和我的团队眼中的元数据。 第二部分简单介绍如何实现元数据管理的架构。 第三部分,我将通过举例的方式,说明元数据的应用价值。
在上周举行的数据架构2018年峰会上,William McKnight就使用不同的数据平台创建现代数据架构做了主旨演讲。
介绍Lakehouse、Data Fabric 等技术的应用及Data For AI 的展望。
我们到底需要怎样的数据架构?又该如何选择数据库?
本文来自微信京东数科技术说公众号。
本文介绍大数据分析场景需要解决的技术挑战、主流大数据架构模式及其发展。
模型平台可以完全替代数据平台吗?
近期,IFTTT的工程师Anuj Goyal对其数据架构的概况进行了介绍,并分享了在操作数据时的一些经验。本文对这些内容展开详细分析。
平民化。的技术融合已经成为当下重要的发展趋势之一。在各行各业中真正落地,切实提高工作效率已经成为时代新课题。
当前整个 IT 环境已经大规模走向 2.0 版本的云原生化时代,MatrixOne 作为一款新型的完全云原生化的超融合 HSTAP 数据库,将带来一套新型数据架构。
以Hadoop为基础的第一代大数据体系架构已基本建成,但是面向未来的更现代的数据平台架构仍有非常多的疑问还没有得到解答。
如何在物理和虚拟层面整合各个分散的领域和数据“孤岛”;如何使用混合多云平台来管理和处理数据;如何凭借计算和存储可扩展性,应对不断增长的数据量;如何在整个过程中融入安全性、可扩展性和适应能力;以及如何在数据提供者和使用者之间的价值链中实现数据集成、数据工程和数据治理自动化等等,都是数据据架构所关心的问题。