json - 使用 Rumen 处理的 JobHistory 日志中的 Cpu 指标

标签 json hadoop metrics

我在 Hadoop 集群中收集了我的作业统计信息。我获取了 JobHistory 日志并使用 Rumen 处理它们。在 json 文件中,对于每个任务尝试,都有一个名为“cpuUsages”的字段。

例子:

"cpuUsages" : [ 6028, 3967, 3597, 3354, 3225, 3454, 3589, 4316, 42632, 102, 103, 103 ]

我需要知道这些数字的计量单位。一些官方或学术引用资料?

最佳答案

Rumen从 MR 作业历史服务器中提取指标。因此指标与 MR 作业历史服务器中的指标相同。

可以看到here MR 作业历史服务器提供 MILLI SECONDS 内的 CPU 使用率。所以测量单位可以是 Wall CPU 使用时间,单位为毫秒。

关于json - 使用 Rumen 处理的 JobHistory 日志中的 Cpu 指标,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/40898045/

相关文章:

json - SQL Server 提示无效的 json

Java json解析异常

javascript - html 表单数组转 JSON

hadoop - 如何将数据从生产集群传输到数据实验室集群进行实时数据分析?

java - 使用独立的本地 spark java 程序读取 GCS 文件

C# 获取 SQL 查询返回的数据大小

戈朗 : gocraft/health package 100% CPU

c# - 看似有效的 JSON Blob 的 JSON.NET 反序列化失败

python - 使用 Spark 的默认 log4j 配置文件 : org/apache/spark/log4j-defaults. 属性将默认日志级别设置为 "WARN"

eclipse - 在 Eclipse 启动时禁用插件