添加 Hadoop 监视器
自动发现并监控整个 Hadoop 集群,查看性能指标,包括 DFS 使用量、YARN 指标、内存和日志统计信息;并在 DataNode、NameNode 或 YARN 发生故障时收到通知。
前提条件
- 确保在您的 NameNode 中安装了最新版本的 Linux 代理(17.5.0 及以上版本),以监控整个 Hadoop 集群。Site24x7 Hadoop 监控使用 Linux 监控代理从 Hadoop 集群中采集性能数据。
- 确保在设置页面(管理 > 服务器监控 > 设置)中,自动发现服务器上的应用程序选项设置为是。
添加 Hadoop 监视器
请按以下步骤操作:
- 登录 Site24x7,进入服务器 > Hadoop > Hadoop 集群 (+)。
- 使用切换按钮选择以 root 或非 root 用户身份安装代理,以及在安装后以 root 或非 root 用户身份运行代理。
例如:要以 root 用户身份安装代理,并在启用代理时以非 root 用户身份运行代理,请执行以下命令:
bash -c "$(curl -sL https://staticdownloads.site24x7.com/server/Site24x7InstallScript.sh)" readlink -i -key=<device_key> -proxy=user:password@proxyhost:proxyport -s24x7-agent
- 复制粘贴该命令(点击复制到剪贴板),并在特定 NameNode 上执行,以下载并安装 Linux 代理。
在 Hadoop NameNode 中成功执行命令后,Linux 代理将被安装,代理将自动发现并在 Site24x7 Web 客户端中为每个 NameNode、DataNode 和 YARN 添加监视器。您可以在服务器 > Hadoop > 点击 Hadoop 集群名称 > NameNodes 或 DataNodes 或 YARN 下查看这些监视器。
添加阈值和可用性配置文件
成功将 Hadoop 监视器添加至 Site24x7 账户后,添加阈值和可用性配置文件,以帮助告警引擎判断特定资源是否需要被声明为严重或宕机状态。了解更多。
授权许可
每个 Hadoop 监视器都是基本监视器。每个 NameNode、DataNode 和 YARN 将消耗一个基本监视器许可证。
相关文章
- Hadoop 性能指标
- 添加 Linux 监视器 | Linux 性能指标
- 添加: Docker | SMART 磁盘 | 插件
- 服务器监控架构
- 其他支持的操作系统平台: Windows | FreeBSD | OS X
