写点什么

元数据采集

收录了 元数据采集 频道下的 50 篇内容

专业版qData数据中台元数据采集机制解析:从结构识别、变更跟踪到数据资产管理
专业版 qData 数据中台元数据采集机制解析:从结构识别、变更跟踪到数据资产管理

qData 专业版元数据采集通过结构化和非结构化任务识别数据库表、字段及文件信息,配合周期采集、版本记录、变更对比与定版管理,让平台从“能访问数据源”走向“知道里面有什么、结构发生了什么变化”,为数据资产建设提供基础。

数据库
数据中台
数据采集
元数据
qData
qData 开源数据中台:元数据采集模块的技术实现与治理落地实践
qData 开源数据中台:元数据采集模块的技术实现与治理落地实践

qData数据中台开源版提供元数据采集能力,通过采集任务自动识别数据源中的信息,支持自定义采集范围与调度周期,并提供采集实例追踪与最新元数据统一查看。帮助团队快速建立数据底账,让分散的数据资源变为清晰可维护的数据资产,是数据中台建设的第一步。

数据中台
数据治理
开源项目
qData
元数据采集
浅谈元数据采集 | StartDT Tech Lab 10
浅谈元数据采集 | StartDT Tech Lab 10

这是奇点云全新技术专栏「StartDT Tech Lab」的第10期。

大数据杂谈微课堂|大数据治理技术核心,可扩展的元数据架构设计

大数据杂谈微信群分享内容。 整个分享分为三个部分: 第一部分,说说我和我的团队眼中的元数据。 第二部分简单介绍如何实现元数据管理的架构。 第三部分,我将通过举例的方式,说明元数据的应用价值。

华为数据之道:华为数据治理及数据分类管理框架和经验
华为数据之道:华为数据治理及数据分类管理框架和经验

作为一家巨型跨国企业,华为在170多个国家同时开展各种业态的业务,华为的数据底座是支撑华为业务运营的关键。

合理使用元数据工具,解决大数据治理落地难点

元数据并不止存在于数据领域,近年来,元数据管理的范围在不断扩大,从简单的库表,到整个数据平台,再到服务管理,不断突破传统元数据管理的范畴。InfoQ采访了普元软件产品部副总、大数据产品线总经理王轩,了解如下问题:“元数据”和“大数据”之间的异同之处在哪里?大数据环境下的元数据管理有什么特点?元数据元数据驱动的微服务架构有何特点?企业大数据治理难点在哪里?

爱奇艺数据中台的建设实践
爱奇艺数据中台的建设实践

本文将从数据中台的概念、架构、建设理念等角度切入,对关键组成部分进行深入介绍,让大家能够在理解中台的同时,了解到如何通过中台解决问题,帮助业务挖掘数据价值。

美团配送数据治理实践
美团配送数据治理实践

本文介绍美团配送技术团队在数据治理过程中所进行的一些探索和实践。

数据中台:宜信敏捷数据中台建设实践
数据中台:宜信敏捷数据中台建设实践

本文介绍了宜信数据中台顶层设计,从中间件工具到平台及案例分析。

DataMan-美团旅行数据质量监管平台实践
DataMan- 美团旅行数据质量监管平台实践

本文来自美团点评技术文章系列。

四大特点解析华为云智能数据湖“黑科技”
四大特点解析华为云智能数据湖“黑科技”

如果有人问数据湖是什么,我会告诉他们,是“桶装水”的集合。

中国工商银行基于eBPF技术的云原生可观测图谱探索与实践
中国工商银行基于 eBPF 技术的云原生可观测图谱探索与实践

主要可分为内核态指标采集、网络拓扑分析、云上可观测图谱三部分。

奇点云2023数智科技大会:发布自研数据云操作系统及多款数据应用更新
奇点云 2023 数智科技大会:发布自研数据云操作系统及多款数据应用更新

以“Data@Future”为主题,由StartDT(奇点云、GrowingIO)主办的2023 StartDT Day数智科技大会暨数据云操作系统产品发布会于近日召开。

腾讯云⼤数据 TBDS 在私有化场景万节点集群的实践
腾讯云⼤数据 TBDS 在私有化场景万节点集群的实践

本次分享主要分为三个部分展开:第一部分是 Hadoop 体系下存算⼀体存在的问题;第二部分是 TBDS 存算分离架构和三层优化;第三部分是云原⽣环境下计算引擎优化和最佳实践,最后是对本次分享内容的总结。

Linkis数据中间件,打造全面连通融合的金融级大数据平台
Linkis 数据中间件,打造全面连通融合的金融级大数据平台

Linkis 是微众银行开源的一款数据中间件,用于解决前台各种工具、应用,和后台各种计算存储引擎间的连接、访问和复用问题。

打破数据孤岛,Apache Doris 助力纵腾集团快速构建流批一体数仓架构
打破数据孤岛,Apache Doris 助力纵腾集团快速构建流批一体数仓架构

早期基于多套 CDH 大数据架构,已无法满足当下数据分析需求。

华为云DAS2.0版本来袭
华为云 DAS2.0 版本来袭

互联网上每一分钟就产生100TB以上的数据

微服务任务调度平台(SIA-TASK)
微服务任务调度平台(SIA-TASK)

SIA是宜信公司基础开发平台Simple is Awesome的简称,SIA-TASK(微服务任务调度平台)是其中的一项重要产品

从数据库连接开始构建数据中台:qData 开源数据中台数据源接入配置与常见问题分析
从数据库连接开始构建数据中台:qData 开源数据中台数据源接入配置与常见问题分析

qData 开源数据中台支持 MySQL、DM8、Oracle、SQL Server、Kingbase8、Doris 等 8 种数据库连接。配置需按源库版本选择类型,填写地址、端口、账号及数据库/Schema 信息,测试通过后启用,用于数据集成、开发、元数据采集和查询。

数据库
数据中台
开源项目
qData
数据链接
数据治理台账 vs 元数据知识图谱:数据资产如何从文档走向计算化
数据治理台账 vs 元数据知识图谱:数据资产如何从文档走向计算化

元数据知识图谱能够为 Agent 提供可计算的关系上下文,使其在分析、治理和审计场景中更可信、更可解释。

数据治理
数据资产
元数据
全链路数据血缘
数据血缘
元数据采集专题_资料-InfoQ中文网