且构网

分享程序员开发的那些事...
且构网 - 分享程序员编程开发的那些事

《Hadoop MapReduce性能优化》一2.4 用Apache Ambari监测Hadoop

更新时间:2022-02-03 18:43:09

本节书摘来异步社区《Hadoop MapReduce性能优化》一书中的第2章,第2.4节,作者: 【法】Khaled Tannir 译者: 范欢动 责编: 杨海玲,更多章节内容可以访问云栖社区“异步社区”公众号查看。

2.4 用Apache Ambari监测Hadoop

Hadoop MapReduce性能优化
Apache Ambari项目 简化了Hadoop管理和集群监测,其主要目标是在多实例环境下简化Hadoop集群的部署与管理。

Ambari提供了一组直观、易用的监测Hadoop集群的工具,隐藏了Hadoop框架的复杂性。它通过向管理员暴露RESTful API来允许与其他系统集成。而且,Ambari依赖Ganglia和Nagios的度量结果,在需要时(如节点故障、磁盘空间不足等)使用报警系统发送电子邮件,以引起管理员的注意。除此之外,Ambari通过安装安全(基于Kerberos)的Hadoop集群,提供基于角色的用户认证、授权、审计,并与LDAP和活动目录(Active Directory)集成进行用户管理,为Hadoop安全提供支持。

如果用Apache Ambari构建Hadoop集群,也可以用它构建监测工具,比如Ganglia或者Nagios。