-
hadoop-hdfs-fsimage-exporter负责将Hadoop HDFS的文件系统内容统计信息导出至Prometheus
资源介绍
Prometheus Hadoop HDFS FSImage导出器
|
将Hadoop HDFS统计信息导出到包括
总数/每个用户/每个组/每个配置的目录路径/每个路径集
目录数
文件数
文件大小和大小分布（可选）
块数
文件复制（总体/每个用户摘要）
导出器使用解析FSImage。 这种方法的优点是
快速（2.6 GB FSImage〜50s）
不会给HDFS NameNode增加额外的负担（没有NameNode查询，您可以在第二个NameNode上运行它）
缺点是
没有实时更新，仅在NameNode写入FSImage时每6小时更新一次。 但是对于大多数情况（长期趋势，检测HDF