【问题标题】:Monitor AKS container/pod status from pod running in different cluster/context从在不同集群/上下文中运行的 pod 监控 AKS 容器/pod 状态
【发布时间】:2021-05-07 08:28:54
【问题描述】:

我的应用程序在不同的集群中运行,如下所示(例如)

 cluster1 - for scratch work
 cluster2 - as staging env (pods running application )
 cluster3 - as testing env (pods running application )
 cluster4 - monitor app

所有 AKS 集群都连接在网络中,一个监控应用程序在 cluster4 上运行,它具有自定义监控仪表板。我正在尝试将在cluster2 和cluster3 上运行的应用的容器/pod 状态添加到该仪表板。

有没有办法使用 java/REST API/shell 从在cluster4 中运行的应用程序中获取容器/pod 状态。

我遇到了 Kubernetes java 客户端InclusterClientExample。

对于这种情况有没有更好的方法来获取在不同集群上运行的应用程序的容器/pod 状态。

【问题讨论】:

  • 您在使用 AKS 吗?
  • 是 AKS(azure kubernetes 服务)
  • 为什么不能使用天蓝色显示器docs.microsoft.com/en-us/rest/api/monitor
  • 让我检查一下文档,这可能是一种方法。
  • cluster4 上运行的是什么监控应用?当您使用云环境时,最好使用集成监控,但是您也可以使用Prometheus,如this guide。您只想监控所有集群中的所有资源?

标签: azure kubernetes monitoring


【解决方案1】:

使用许多其他选项,尝试了camel-kubernetes 组件。这使用了由 fabric8 管理的 kubernetes-client。

  • 如果使用 minikube,设置并启动应用程序。

  • 使用minikube dashboard 或 kubectl proxy --port=8080 以便可以从主机访问集群。

  • 将camel-core和camel-kubernetes依赖添加到项目中

package com.learning.camel.examples.prog3;

import org.apache.camel.CamelContext;
import org.apache.camel.ProducerTemplate;
import org.apache.camel.impl.DefaultCamelContext;

public class ListPodsInK8s {
    
    public static void main(String[] args) throws Exception {
        
        CamelContext context = new DefaultCamelContext();
        try {
        context.addRoutes(new RouterToAccessK8s());
        context.start();
        
        ProducerTemplate template = context.createProducerTemplate();
        template.start();
        template.sendBody("direct:input1","example");
        Thread.sleep(3000); // sleep 3 seconds
        }finally {
            context.stop();
        }       
    }
}
  • 用于获取数据的代码
package com.learning.camel.examples.prog3;

import java.util.List;
import org.apache.camel.builder.RouteBuilder;
import io.fabric8.kubernetes.api.model.Pod;

public class RouterToAccessK8s  extends RouteBuilder{

    public String host = "http://127.0.0.1:8080"; // use az command to get server url
    public String authToken = "";  // fetch the token using az command in case AKS
    public String certPath = "C:\\Users\\tim\\.minikube\\profiles\\minikube\\client.crt"; //minikube 
    public String certKey = "C:\\Users\\tim\\.minikube\\profiles\\minikube\\client.key"; // minikube
    @Override
    public void configure() throws Exception {
        
        from("direct:input1")
        .toF("kubernetes-pods://%s?clientCertFile=%s&clientKeyFile=%s&namespace=default&operation=listPods", host,certPath,certKey)
        .log("pod size: ${body.size()}")
        .process(exchange -> {
            List<Pod> pods = exchange.getIn().getBody(List.class);
            System.out.println("NameSpace | PodName | Status");
            pods.stream()
            .forEach(pod -> {System.out.println(pod.getMetadata().getNamespace()+ " |  "+ pod.getMetadata().getName()+" | "+pod.getStatus().getPhase());});
        })
        .end();
    }
}

输出:

NameSpace | PodName | Status
default |  ngnix | Succeeded
kube-system |  coredns-74ff55c5b-26drq | Running
kube-system |  etcd-minikube | Running
kube-system |  kube-apiserver-minikube | Running
kube-system |  kube-controller-manager-minikube | Running
kube-system |  kube-proxy-b97ss | Running
kube-system |  kube-scheduler-minikube | Running
kube-system |  storage-provisioner | Running
kubernetes-dashboard |  dashboard-metrics-scraper-c95fcf479-x4bgq | Running

对于 Azure,az aks get-crediential --file - 可用于获取主服务器 url(主机)并访问令牌信息。

【讨论】:

    【解决方案2】:

    另一个选项是启用 Log Analytics API。

    • 创建一个工作区并使用 REST API 来触发查询。下面是如何做到这一点的高水平。

      • 如果设置了 AAD,请获取 TENENT ID 信息。
      • 注册应用,创建服务主体。 (提供应用程序(客户端)ID)
        • 在 SP 中,添加密钥。 (记下来,因为以后看不到)
        • 添加 API 权限,选择 Log Analytics
          • 授予代表权限 (Data.Read) 和应用程序权限 g (Data.Read),就我而言。
      • 在 Log Analytics 工作区的访问控制 (IAM) 中,添加服务主体并提供读者访问权限。 (要注意工作区名称、资源组名称、工作区 ID、订阅 ID)

    根据link。 首先,我们需要使用 SP 和 Tenet id 获取 access_token。此链接中的屏幕截图很少是旧的。

    使用 curl 命令:

    1. 获取令牌
    curl -vX POST -d 'grant_type=client_credentials&client_id=[SP application(client) id]&client_secret=[Client secret created in SP]&resource=https://management.azure.com/' https://login.microsoftonline.com/[TENENT_ID]/oauth2/token
    
    1. 获取日志信息
    curl -vX post -H "Authorization: Bearer [TOKEN-FROM-ABOVE]" -H "Content-Type: application/json" -H "Prefer: response-v1=true"-d @samplequery.json https://api/loganalytics.io/v1/subscriptions/[subscription-id-of-workspace]/resourceGroups/[Resource-group-name-of-workspace]/providers/Microsoft.OperationalInsights/workspaces/<workspace-name>/api/query?api-version=2020-08-01
    

    示例查询文件

    { 
     "query": "Perf | where CounterName == 'Available MBytes' | summarize avg(CounterValue) by bin(TimeGenerated, 1h)",
      "timespan": "PT12H"
    }
    }
    

    输出将是查询的结果。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2018-10-29
      • 1970-01-01
      • 1970-01-01
      • 2020-05-23
      • 1970-01-01
      相关资源
      最近更新 更多