写点什么

数据架构设计技术

收录了 数据架构设计技术 频道下的 50 篇内容

大数据杂谈微课堂|大数据治理技术核心,可扩展的元数据架构设计

大数据杂谈微信群分享内容。 整个分享分为三个部分: 第一部分,说说我和我的团队眼中的元数据。 第二部分简单介绍如何实现元数据管理的架构。 第三部分,我将通过举例的方式,说明元数据的应用价值。

百度技术沙龙第 12 期内容回顾:大型网站数据库架构设计和性能优化

在刚刚结束的第12期百度技术沙龙,我们邀请到了百度运维部高级DBA经理王龙和飞信互联网产品首席架构师孙朝晖,分别向大家分享了百度数据库架构演变与设计,以及Mysql HandleSocket在动态数据存储中的应用的技术话题。本文对这次百度技术沙龙内容做简单的回顾与总结。

金融级分布式数据库架构设计与对接实践 | DBTalk 技术公开课第2期
金融级分布式数据库架构设计与对接实践 | DBTalk 技术公开课第 2 期

**在大力发展国产技术的时代背景下,银行业进行数字化转型和对安全可控数据服务的需求日益增长。一款的优秀国产分布式数据库应该具备什么样的表现?

别再盲目地堆砌技术了!大部份大数据项目的失败,都是因为架构设计没做对!
别再盲目地堆砌技术了!大部份大数据项目的失败,都是因为架构设计没做对!

大数据不是技术堆砌,而是业务驱动的系统工程。需建立数据采集、存储、处理、服务和治理分层架构,遵循业务导向、成熟稳定、可扩展性和团队适配原则进行技术选型。实施应先评估规划,通过试点验证,再全面推广,循序渐进,持续优化,重视数据质量和成本控制。

大数据
架构设计
技术架构
大数据平台
企业数据平台
微信技术分享:揭秘微信后台安全特征数据仓库的架构设计
微信技术分享:揭秘微信后台安全特征数据仓库的架构设计

本文由腾讯技术工程师remyliu分享,原题“微信万亿数据仓库架构设计与实现”,本文收录时有内容修订和重新排版。

网络编程
即时通讯
IM
京东小程序数据中心架构设计与最佳实践 | 京东云技术团队
京东小程序数据中心架构设计与最佳实践 | 京东云技术团队

小程序平台是怎么保证商家业务的稳定、健康发展,服务好这些外部商家的呢?这里面非常重要的是我们平台对小程序基本流量的运营与监控。如何不让业务的小程序在线上裸奔?如何帮助业务对自身小程序流量的冲高回落有一种直观的把握和监测?如何基于海量数据指导

小程序
clickhosue
京东小程序
企业号 8 月 PK 榜
架构师日记-从数据库发展历程到数据结构设计探析 | 京东云技术团队
架构师日记 - 从数据库发展历程到数据结构设计探析 | 京东云技术团队

起初数据的管理方式是文件系统,数据存储在文件中,数据管理和维护都由程序员完成。后来发展出树形结构和网状结构的数据库,七十年代关系数据库理论的提出,以表格形式组织数据,数据之间存在关联关系,具有了良好的结构化和规范化特性,成为主流数据库类型。

数据库
京东云
企业号 5 月 PK 榜
百分点大数据技术团队:可插拔 OSS 架构设计和实战经验

编者按:随着互联网、大数据和人工智能等技术的发展,信息资源得到最大程度的共享,但随之而来的海量文件存取的功能和性能问题也日渐突出。

AI 驱动的新基建:下一代多模态数据湖探索与实践|QCon 上海
AI 驱动的新基建:下一代多模态数据湖探索与实践|QCon 上海

火山引擎新一代数据湖如何解决多模态数据带来的关键问题。

AI原生数据库的思考
AI 原生数据库的思考

对于企业来讲,大模型基础能力是通用的,私有数据和用户行为才是核心资产,如何通过数据库把这些核心资产用好,决定了企业在 AI 时代的核心竞争力。

与资深AI架构师⼀起,解锁传统行业转型的真实挑战与破局思路
与资深 AI 架构师⼀起,解锁传统行业转型的真实挑战与破局思路

全球 AI 技术竞速进入深水区, 正以 “产业变革核心引擎” 的姿态重塑商业格局。

Fluss 湖流一体:Lakehouse 架构实时化演进
Fluss 湖流一体:Lakehouse 架构实时化演进

本文分享了流存储和 LakeHouse 架构割裂的现状下用户面临的问题和挑战,以及目前业界在融合两者上的趋势。并介绍了流存储 Fluss 如何完美地融入进 LakeHouse 架构,无缝地将 LakeHouse 架构进行实时化改造,以及基于 Fluss 来构建实时 LakeHouse 架构的最佳实践。

性能炸裂、成本降低20%,腾讯云TDSQL Boundless如何做到的?| Q推荐
性能炸裂、成本降低 20%,腾讯云 TDSQL Boundless 如何做到的?| Q 推荐

掌握 TDSQL Boundless 架构特性、TDSQL-MySQL 并行查询技术,构建分布式数据库技术认知体系

别怕被淘汰!AI现在是,将来也永远只是人类的助手|独家对话一线架构大佬 Christian Ciceri
别怕被淘汰!AI 现在是,将来也永远只是人类的助手|独家对话一线架构大佬 Christian Ciceri

采访嘉宾|Christian Ciceri,软件架构师,Apiumhub 联合创始人,《软件架构指标》作者

稳,从数据库连接池 testOnBorrow 看架构设计 | 京东云技术团队
稳,从数据库连接池 testOnBorrow 看架构设计 | 京东云技术团队

本文从 Commons DBCP testOnBorrow 的作用机制着手,管中窥豹,从一点去分析数据库连接池获取的过程以及架构分层设计。以下内容会按照每层的作用,贯穿分析整个调用流程。

数据库
架构设计
数据库连接池
企业号 6 月 PK 榜
testOnBorrow
锚定企业AI落地五大挑战,联想凌拓存储产品矩阵再升级
锚定企业 AI 落地五大挑战,联想凌拓存储产品矩阵再升级

在人工智能加速渗透各行各业的2025年,企业如何构建高效、智能的数据基础设施成为核心议题。

AI 时代,软件架构师的角色该如何重新定位
AI 时代,软件架构师的角色该如何重新定位

本文通过“三个回路”模型,探讨架构师如何在效率、治理与责任之间重新定位自身价值。

为何底层数据湖决定了 AI Agent 的上限?
为何底层数据湖决定了 AI Agent 的上限?

“可以说,我们是国内最早引入 Lance 的团队之一。”

从工程实践到底层重构,openGauss Summit 2025 将揭示下一轮技术演进方向
从工程实践到底层重构,openGauss Summit 2025 将揭示下一轮技术演进方向

我们正身处一场由数据形态与业务模式共同驱动的深层变革之中。

数据架构设计技术专题_资料-InfoQ中文网