收录了 数据架构设计技术 频道下的 50 篇内容
大数据杂谈微信群分享内容。 整个分享分为三个部分: 第一部分,说说我和我的团队眼中的元数据。 第二部分简单介绍如何实现元数据管理的架构。 第三部分,我将通过举例的方式,说明元数据的应用价值。
在刚刚结束的第12期百度技术沙龙,我们邀请到了百度运维部高级DBA经理王龙和飞信互联网产品首席架构师孙朝晖,分别向大家分享了百度数据库架构演变与设计,以及Mysql HandleSocket在动态数据存储中的应用的技术话题。本文对这次百度技术沙龙内容做简单的回顾与总结。
**在大力发展国产技术的时代背景下,银行业进行数字化转型和对安全可控数据服务的需求日益增长。一款的优秀国产分布式数据库应该具备什么样的表现?
介绍Lakehouse、Data Fabric 等技术的应用及Data For AI 的展望。
Data Mesh 的潜力既令人兴奋又令人生畏,就像从前的微服务架构一样。
如何在物理和虚拟层面整合各个分散的领域和数据“孤岛”;如何使用混合多云平台来管理和处理数据;如何凭借计算和存储可扩展性,应对不断增长的数据量;如何在整个过程中融入安全性、可扩展性和适应能力;以及如何在数据提供者和使用者之间的价值链中实现数据集成、数据工程和数据治理自动化等等,都是数据据架构所关心的问题。
本次分享介绍数据分发平台近几年来所经历的架构演进过程、挑战及踩过的坑。
5G落地、AI持续、Edge已然,这既是挑战也是机遇。
小程序平台是怎么保证商家业务的稳定、健康发展,服务好这些外部商家的呢?这里面非常重要的是我们平台对小程序基本流量的运营与监控。如何不让业务的小程序在线上裸奔?如何帮助业务对自身小程序流量的冲高回落有一种直观的把握和监测?如何基于海量数据指导
阿里云 Quick BI 如何实现从传统 BI 到 AI 驱动的智能 BI 的跨越式进化。
元数据管理是扩展性和性能瓶颈的关键所在。
起初数据的管理方式是文件系统,数据存储在文件中,数据管理和维护都由程序员完成。后来发展出树形结构和网状结构的数据库,七十年代关系数据库理论的提出,以表格形式组织数据,数据之间存在关联关系,具有了良好的结构化和规范化特性,成为主流数据库类型。
Snowflake 换 CEO,不只是人事变动,而是数据架构的时代信号:数仓黄金时代正在谢幕,Agentic Data Stack 正在登场。
涵盖多源异构数据整合、CoT 数据构建及多模态数据应用。
编者按:随着互联网、大数据和人工智能等技术的发展,信息资源得到最大程度的共享,但随之而来的海量文件存取的功能和性能问题也日渐突出。
AI 时代数据治理面临的挑战与机遇。
就在本周五,QCon 上海落地,为你分享下一代 Data for AI 技术架构探索
作为一种新兴架构,湖仓一体在扩展性、事务性以及灵活度上都体现出了独有的优势,也正因如此,无论在技术圈还是资本圈,湖仓一体都受到了前所未有的关注度。
与开放文件格式相比,开放存储 API 屏蔽了底层的文件格式的具体实现,Doris 可以通过自身存储格式中的高级特性,如丰富的索引机制来加速数据访问。