Prometheus jmx 导出器模式匹配属性和项目答案

【问题标题】：Prometheus jmx exporter pattern match for attributes and itemsPrometheus jmx 导出器模式匹配属性和项目
【发布时间】：2020-03-15 05:25:06
【问题描述】：

我正在尝试使用 jmx_exporter java 代理 (https://github.com/prometheus/jmx_exporter) 对 prometheus 指标进行模式匹配和命名。

在处理CompositeType 时，没有太多关于如何对 MBean 属性和这些属性中的项目进行模式匹配的文档。

例如，我达到了我以这种方式进行模式的地步：

rules:
  - pattern: "java.lang<type=Memory><>HeapMemoryUsage"
    name: jmx_jvm_memory_HeapMemoryUsed

但是，如果您在 VisualVM 中查看 HeapMemoryUsed 属性。您还可以在openType 中的Attribute Description 中看到以下内容：

javax.management.openmbean.CompositeType(
    name=java.lang.management.MemoryUsage,
    items=(
            (itemName=committed,itemType=javax.management.openmbean.SimpleType(name=java.lang.Long)),
            (itemName=init,itemType=javax.management.openmbean.SimpleType(name=java.lang.Long)),
            (itemName=max,itemType=javax.management.openmbean.SimpleType(name=java.lang.Long)),
            (itemName=used,itemType=javax.management.openmbean.SimpleType(name=java.lang.Long))
        )
    )

我希望能够根据这些项目命名指标。例如，我想要一个指标，例如：

jmx_jvm_memory_HeapMemoryUsed_used
jmx_jvm_memory_HeapMemoryUsed_max

等等……

谢谢！

【问题讨论】：

标签： jmx prometheus mbeans jmx-exporter mbeanexporter

【解决方案1】：

你说得对，关于这个主题的文档很少。但是，如果您查看源代码，您会发现具有复合数据类型的 bean 被展开为每个属性和值组合的指标 (JMXScraper.java:207-224)。

在您的情况下，您可以使用以下rules 项目达到预期的结果：

rules:
  # ... other rules
  - pattern: 'java.lang<type=Memory><(HeapMemoryUsage>(\w+): (.*)'
    name: jmx_jvm_memory_HeapMemoryUsed_$1
    help: "JVM heap memory $1"
    value: $2
    type: GAUGE

如果您在启用 JMXExporter 代理的情况下启动服务器并查询指标端点，您将看到类似于以下输出的内容

$ curl -s ${server-url}:${jmx-exporter-port}/metrics | grep jmx_jvm
# HELP jmx_jvm_memory_HeapMemoryUsed_committed JVM heap memory committed
# TYPE jmx_jvm_memory_HeapMemoryUsed_committed gauge
jmx_jvm_memory_HeapMemoryUsed_committed 7.7856768E8
# HELP jmx_jvm_memory_HeapMemoryUsed_max JVM heap memory max
# TYPE jmx_jvm_memory_HeapMemoryUsed_max gauge
jmx_jvm_memory_HeapMemoryUsed_max 1.908932608E9
# HELP jmx_jvm_memory_HeapMemoryUsed_init JVM heap memory init
# TYPE jmx_jvm_memory_HeapMemoryUsed_init gauge
jmx_jvm_memory_HeapMemoryUsed_init 2.64241152E8
# HELP jmx_jvm_memory_HeapMemoryUsed_used JVM heap memory used
# TYPE jmx_jvm_memory_HeapMemoryUsed_used gauge
jmx_jvm_memory_HeapMemoryUsed_used 4.7050592E8

注意：正如 Brian 在他的回答中已经说过的那样，对于标准 JMX bean（例如 java.lang 域中的那些）没有必要这样做，因为 JMXExporter 已经在一种标准化的方式。

【讨论】：

【解决方案2】：

如果您查看指标输出中的 HELP，这就是您要匹配的内容。但是，您无需担心任何 java.lang 指标，jmx 导出器 java 代理会在 jvm_ 指标前缀下自动为您提供它们。

【讨论】：

指标输出中的HELP 是什么意思？
@Berni 如果您没有为一组 bean 提供任何模式，则应用默认格式化程序。在默认格式化程序的输出中，# HELP ... 行将包含 JMXExporter 所需的 bean 模式，以匹配括号中的给定 bean。对于标准 JMX bean（例如域 java.lang），您不会看到这一点，因为它们似乎具有 JMXExporter 附带的格式。在您的情况下，这应该是 jvm_memory_bytes_used{area="heap",} 和 jvm_memory_bytes_max{area="heap",}。

【解决方案3】：

对于遇到此问题并遇到困难的任何人。我设法让它工作。

我目前正在将 HBase JMX 指标移植到 Prometheus，并且正在研究如何使用复合值更新指标，让我们来看一个示例：

{
    "name": "java.lang:type=Memory",
    "modelerType": "sun.management.MemoryImpl",
    "ObjectPendingFinalizationCount": 0,
    "Verbose": false,
    "HeapMemoryUsage": {
        "committed": 127729664,
        "init": 132120576,
        "max": 2087452672,
        "used": 26782688
    },
    "NonHeapMemoryUsage": {
        "committed": 50896896,
        "init": 2555904,
        "max": -1,
        "used": 49540216
    },
    "ObjectName": "java.lang:type=Memory"
},

默认情况下，您的指标格式如下：

# HELP java_lang_Memory_HeapMemoryUsage_init java.lang.management.MemoryUsage (java.lang<type=Memory><HeapMemoryUsage>init)
# TYPE java_lang_Memory_HeapMemoryUsage_init untyped
java_lang_Memory_HeapMemoryUsage_init 1.32120576E8

但如果你像我一样，你可能想要这样：

# HELP hbase_heap_usage java.lang.management.MemoryUsage (java.lang<type=Memory><HeapMemoryUsage>committed)
# TYPE hbase_heap_usage untyped
hbase_heap_usage{type="committed",} 1.27729664E8
hbase_heap_usage{type="init",} 1.32120576E8
hbase_heap_usage{type="max",} 2.087452672E9
hbase_heap_usage{type="used",} 2.8101728E7

要做到这一点，文档不是很好，有点倒退，在使用VisualVM时，它会告诉你HeapMemoryUsage是属性，但是在这些复合情况下，键在里面 属性是属性，属性是关键......所以要实现上述目标，您的规则将如下所示：

  - pattern: java.lang<type=Memory><HeapMemoryUsage>(\w+)
    name: hbase_heap_usage
    labels:
      type: $1

【讨论】：