写点什么
创作场景
- 记录自己日常工作的实践、心得
- 发表对生活和职场的感悟
- 针对感兴趣的事件发表随笔或者杂谈
- 从 0 到 1 详细介绍你掌握的一门语言、一个技术,或者一个兴趣、爱好
- 或者,就直接把你的个人博客、公众号直接搬到这里
登录/注册
收录了 元数据采集 频道下的 50 篇内容

qData 专业版元数据采集通过结构化和非结构化任务识别数据库表、字段及文件信息,配合周期采集、版本记录、变更对比与定版管理,让平台从“能访问数据源”走向“知道里面有什么、结构发生了什么变化”,为数据资产建设提供基础。

qData数据中台开源版提供元数据采集能力,通过采集任务自动识别数据源中的信息,支持自定义采集范围与调度周期,并提供采集实例追踪与最新元数据统一查看。帮助团队快速建立数据底账,让分散的数据资源变为清晰可维护的数据资产,是数据中台建设的第一步。

这是奇点云全新技术专栏「StartDT Tech Lab」的第10期。
大数据杂谈微信群分享内容。 整个分享分为三个部分: 第一部分,说说我和我的团队眼中的元数据。 第二部分简单介绍如何实现元数据管理的架构。 第三部分,我将通过举例的方式,说明元数据的应用价值。

作为一家巨型跨国企业,华为在170多个国家同时开展各种业态的业务,华为的数据底座是支撑华为业务运营的关键。
元数据并不止存在于数据领域,近年来,元数据管理的范围在不断扩大,从简单的库表,到整个数据平台,再到服务管理,不断突破传统元数据管理的范畴。InfoQ采访了普元软件产品部副总、大数据产品线总经理王轩,了解如下问题:“元数据”和“大数据”之间的异同之处在哪里?大数据环境下的元数据管理有什么特点?元数据元数据驱动的微服务架构有何特点?企业大数据治理难点在哪里?

本文将从数据中台的概念、架构、建设理念等角度切入,对关键组成部分进行深入介绍,让大家能够在理解中台的同时,了解到如何通过中台解决问题,帮助业务挖掘数据价值。

本文介绍美团配送技术团队在数据治理过程中所进行的一些探索和实践。

本文介绍了宜信数据中台顶层设计,从中间件工具到平台及案例分析。

本文来自美团点评技术文章系列。

如果有人问数据湖是什么,我会告诉他们,是“桶装水”的集合。

主要可分为内核态指标采集、网络拓扑分析、云上可观测图谱三部分。

以“Data@Future”为主题,由StartDT(奇点云、GrowingIO)主办的2023 StartDT Day数智科技大会暨数据云操作系统产品发布会于近日召开。

本次分享主要分为三个部分展开:第一部分是 Hadoop 体系下存算⼀体存在的问题;第二部分是 TBDS 存算分离架构和三层优化;第三部分是云原⽣环境下计算引擎优化和最佳实践,最后是对本次分享内容的总结。

Linkis 是微众银行开源的一款数据中间件,用于解决前台各种工具、应用,和后台各种计算存储引擎间的连接、访问和复用问题。

早期基于多套 CDH 大数据架构,已无法满足当下数据分析需求。

互联网上每一分钟就产生100TB以上的数据

SIA是宜信公司基础开发平台Simple is Awesome的简称,SIA-TASK(微服务任务调度平台)是其中的一项重要产品

qData 开源数据中台支持 MySQL、DM8、Oracle、SQL Server、Kingbase8、Doris 等 8 种数据库连接。配置需按源库版本选择类型,填写地址、端口、账号及数据库/Schema 信息,测试通过后启用,用于数据集成、开发、元数据采集和查询。

元数据知识图谱能够为 Agent 提供可计算的关系上下文,使其在分析、治理和审计场景中更可信、更可解释。