阅读数:826 发布于:2020 年 8 月 3 日 10:21

更多 AI、大数据、架构 相关课程,可下载【 极客时间 】App 免费领取 >

评论

发布
暂无评论
  • Apache Flink 进阶(一):Runtime 核心机制剖析

    全面介绍Flink Runtime作业执行的核心机制

    2019 年 9 月 3 日

  • 大数据框架对比:Hadoop、Storm、Samza、Spark 和 Flink

    本文将介绍大数据系统一个最基本组件:处理框架。处理框架负责对系统中的数据进行计算,例如处理从非易失存储中读取的数据,或处理刚刚摄入到系统中的数据。数据的计算则是指从大量单一数据点中提取信息和见解的过程。本文对Hadoop、Storm、Samza、Spark、Flink五种大数据框架进行了介绍和对比。

    2016 年 11 月 19 日

  • 深入浅出 Mesos(三):持久化存储和容错

    在深入浅出Mesos系列的第一篇文章中,我对相关的技术做了简要概述,在第二篇文章中,我深入介绍了Mesos的架构。完成第二篇文章之后,我本想开始着手写一篇Mesos如何处理资源分配的文章。不过,我收到一些读者的反馈,于是决定在谈资源分配之前,先完成这篇关于Mesos持久化存储和容错的文章。

    2015 年 5 月 12 日

  • 你一定不能错过的 Kafka 控制器

    控制器组件,是Apache Kafka的核心组件。今天,我们就来详细说说控制器的原理和内部运行机制。

    2019 年 8 月 1 日

  • 分布式体系结构之集中式结构:一人在上,万人在下

    我以Borg、Kubernetes、Mesos这三款知名的集群管理系统为例,与你分享了集中式架构的原理。

    2019 年 10 月 11 日

  • 使用 spark-submit 提交用户应用程序

    Francisco Oliveira 是 AWS 专业服务团队的顾问客户开始大数据之旅时,通常会需要一些关于如何将用户应用程序提交到 Amazon EMR 的 Spark 方面的指导。

    2019 年 12 月 11 日

  • Oozie 简介

    Oozie是一种框架,它让我们可以把多个Map/Reduce作业组合到一个逻辑工作单元中。本文是对该框架的基本介绍。

    2011 年 8 月 18 日

  • 答疑:在问题中解决问题,在思考中产生思考

    今天,我会对本专栏部分文章的思考题,进行一次集中地汇总和答疑,希望帮你更好地理解和掌握 Kubernetes 项目。

    2018 年 12 月 21 日

  • Myriad 项目: Mesos 和 YARN 协同工作

    Jin Scott有一篇文章《两个集群的故事:Mesos和YARN》描述了在不同的硬件集群上用不同的资源管理器,比如当下最流行的Mesos和YARN,来创建硬件筒仓(hardware silos),并且引入Myriad作为在Mesos上运行YARN的解决方案。

    2015 年 3 月 19 日

  • 为什么我们管 Yarn 叫作资源调度框架?

    在我们开始聊Yarn的实现原理前,有必要看看Yarn发展的过程,这对你理解Yarn的原理以及为什么被称为资源调度框架很有帮助。

    2018 年 11 月 17 日