收录了 通用大数据技术架构 频道下的 50 篇内容
多年来,大数据技术经历了几轮更迭,在计算、存储、大规模落地等层面均取得了不错的进展,并在不断的成长和成熟,整个生态领域也得到了快速发展。
数字经济,已经成为当今经济发展中非常重要的一部分。 与农业经济、工业经济如出一辙,数字经济活动需要土地、劳动力、资本、技术以及相应配套基础设施。
过去 7 年,上汽通用一直在大数据技术方面不断做新的尝试,这个尝试的根本目标之一是解决制造业的传统数据仓库无法支撑海量数据加载、分析的问题。
近年来,随着大数据与人工智能相关技术的迅速发展,新技术逐步在全社会各行各业得到应用。银行业作为一个高度信息化的行业,首当其冲面临着互联网新技术应用的挑战。民生银行在 2013 年开始布局分布式、大数据及人工智能技术等领域,在全行凤凰计划的牵头下,逐步将新技术与我行发展战略业务实施策略进行了深度融合,为金融科技银行的发展奠定了扎实的基础。
这是瓜子大数据技术团队第一次对外技术采访,浅谈大数据架构及对云平台大数据服务选型的思考,有共性也有差异,个中原因值得探讨。
我们知道技术架构应由应用场景的特征来决定,就现状而言,工业大数据还处在产业的初级阶段,对工业大数据应用场景的认知还不太深入,但大数据在互联网的应用已具备成熟的技术体系和应用框架,因此,本文主要通过比较工业应用场景和互联网应用场景的差异性,期望能够修正互联网大数据的相关应用技术框架,以满足工业大数据落地对技术框架的要求。
大数据未来发展的三大方向
第五届数据质量管理国际峰会议程
本文介绍从数仓到数据中台的技术选型实践。
突如其来的革新和质疑?
今天是Hadoop十岁生日。于2006年1月28日诞生的它改变了企业对数据的存储、处理和分析的过程,加速了大数据的发展,形成了自己的极其火爆的技术生态圈,并受到非常广泛的应用。InfoQ策划了一系列文章,为大家梳理Hadoop这十年的变化,以及技术生态圈状况,本文是第一篇。
数据是现代企业的生命线。年湾区一位中等水平的数据工程师的年薪。万元的水平,百万以上比比皆是。这一岗位的热门程度可见一斑。
随着数据湖相关技术的逐渐成熟、湖仓理论的发展,生产环境落地已经非常广泛。
我们今天不讲那些大家耳熟能详的经典应用案例,而是从笔者一个“另类”的大数据体验说起。
本文简述大数据分析的技术挑战,数据架构模式,实现更优的通用大数据架构模式,及可以涵盖的典型数据处理场景。
本文是架构设计实践五部曲系列文章的第五篇,技术架构的战略和战术原则。本篇讲述如何保证在做技术架构时,实现一个稳定、出色的系统。
大数据存储已经走到了一个新的阶段,肯定会有新的革命性技术来替换它。
每个组织的数据平台建设都应该要量体裁衣,且会是个长时间的持续 PDCA,螺旋上升的过程。
在过去这十数年里,开源大数据领域飞速发展,我们见证了多元化技术的兴起和变迁。
有哪些技能值得数据管理专家学习,以及如何建立发展路线图?