写点什么

使用 Apache Ambari 管理 Hadoop

2012 年 12 月 21 日

随着 Hadoop 越来越普及,对合适的管理平台的需求成为当前亟待解决的问题。已经有几个商业性的 Hadoop 管理平台,如 Cloudera Enterprise Manager ,但 Apache Ambari 是第一个开源实现。Apache Ambari 是一种基于 Web 的工具,支持 Apache Hadoop 集群的供应、管理和监控。Ambari 目前已支持大多数 Hadoop 组件,包括 HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop 和 Hcatalog 等。

Shaun Connolly 是 Hortonworks 公司负责公司战略的副总裁,他在一篇新的博客文章“ Apache Amabri: Hadoop Operations, Innovtation, and Enterprise Readiness ”中强调,在这一年里,Ambari 主要取得了以下成绩:

  • 通过一步一步的安装向导简化了集群供应。
  • 预先配置好关键的运维指标(metrics),可以直接查看 Hadoop Core(HDFS 和 MapReduce)及相关项目(如 HBase、Hive 和 HCatalog)是否健康。
  • 支持作业与任务执行的可视化与分析,能够更好地查看依赖和性能。
  • 通过一个完整的 RESTful API 把监控信息暴露出来,集成了现有的运维工具。
  • 用户界面非常直观,用户可以轻松有效地查看信息并控制集群。

Ambari 使用 Ganglia 收集度量指标,用 Nagios 支持系统报警,当需要引起管理员的关注时(比如,节点停机或磁盘剩余空间不足等问题),系统将向其发送邮件。

此外,Ambari 能够安装安全的(基于 Kerberos)Hadoop 集群,以此实现了对 Hadoop 安全的支持,提供了基于角色的用户认证、授权和审计功能,并为用户管理集成了 LDAP 和 Active Directory。

Apache Ambari 当前是 6 个顶级的开源 Hadoop 管理工具之一。据 Connolly 介绍,因为“稳定性和易管理性是 Hadoop 企业应用的两个关键需求”,因此 Ambari 是 Hadoop 生态系统中的一个重要部分。

查看英文原文 Managing Hadoop with Apache Ambari

2012 年 12 月 21 日 02:5217313
用户头像
臧秀涛 极客邦科技技术会议负责人

发布了 300 篇内容, 共 114.2 次阅读, 收获喜欢 21 次。

关注

评论

发布
暂无评论
发现更多内容

Week 01 命题作业

卧石漾溪

极客大学架构师训练营

重新定义失败

史方远

个人成长 随笔杂谈

食堂就餐卡系统设计

Z冰红茶

迷宫的生成: DFS与BFS算法的实现

lmymirror

DFS 迷宫 Cocos Creator BFS

架构师训练营第一周总结

Cloud.

极客大学架构师训练营

食堂就餐卡系统设计

赵龙

食堂就餐卡系统设计

wyzwlj

极客大学架构师训练营

架构训练营-食堂就餐卡管理系统

随遇而安的适配器模式 | Spring 中的适配器

海星

Java spring 面试 设计模式 Java 25 周年

ARTS-week3

王钰淇

ARTS 打卡计划

食堂就餐卡系统设计

李广富

机器学习复习-线性回归

JustBuyIt

学习 线性回归

程序员如何破除「迷茫」

顿晓

学习 程序员 架构 迷茫

第01周命题作业-食堂就餐卡系统架构设计

Jaye

极客大学架构师训练营

架构师训练营 第一周 作业 食堂就餐卡系统设计

一雄

极客大学架构师训练营 作业 第一周

架构设计文档学习总结

jason

第三季已经起航,送你一份活动手册吧

赵新龙

写作 社群

01学习总结

赵龙

考虑用静态工厂方法代替构造器

dreamer

Java 互联网 后端 开发

食堂就餐卡系统设计

stardust20

架构训练营-第一课总结

架构师训练营-第一课学习总结

King

学习 感悟 极客大学架构师训练营

C02-商业模式与架构设计

吴传卜

虽则悲欢不尽相同

zhoo299

随笔

架构师0期 | 架构师是怎样炼成的?

刁架构

极客大学架构师训练营

Week 01 学习总结

卧石漾溪

极客大学架构师训练营

架构师训练营 第一周 学习总结

一雄

学习 极客大学架构师训练营 第一周

架构师训练营第一周学习总结

不谈

如何成为一个架构师

_MISSYOURLOVE

极客大学架构师训练营

作业一:食堂就餐卡系统设计

Geek_36d3e5

架构师思维

林昱榕

极客大学架构师训练营

InfoQ 极客传媒开发者生态共创计划线上发布会

InfoQ 极客传媒开发者生态共创计划线上发布会

使用Apache Ambari管理Hadoop-InfoQ