EFK收集Kubernetes应用日志

本节内容：

• EFK介绍
• 安装配置EFK
  • 配置efk-rbac.yaml文件
  • 配置 es-controller.yaml
  • 配置 es-service.yaml
  • 配置 fluentd-es-ds.yaml
  • 配置 kibana-controller.yaml
  • 配置 kibana-service.yaml
  • 给 Node 设置标签
  • 执行定义文件
  • 检查执行结果
• 访问 kibana

 

一、EFK介绍

• Logstash(或者Fluentd)负责收集日志
• Elasticsearch存储日志并提供搜索
• Kibana负责日志查询和展示

官方地址：https://github.com/kubernetes/kubernetes/tree/master/cluster/addons/fluentd-elasticsearch

通过在每台node上部署一个以DaemonSet方式运行的fluentd来收集每台node上的日志。Fluentd将docker日志目录/var/lib/docker/containers和/var/log目录挂载到Pod中，然后Pod会在node节点的/var/log/pods目录中创建新的目录，可以区别不同的容器日志输出，该目录下有一个日志文件链接到/var/lib/docker/contianers目录下的容器日志输出。

 

二、安装配置EFK

1. 配置efk-rbac.yaml文件

EFK服务也需要一个efk-rbac.yaml文件，配置serviceaccount为efk。

[root@node1 opt]# mkdir efk
[root@node1 opt]# cd efk

[root@node1 efk]# cat efk-rbac.yaml 
apiVersion: v1
kind: ServiceAccount
metadata:
  name: efk
  namespace: kube-system

---

kind: ClusterRoleBinding
apiVersion: rbac.authorization.k8s.io/v1beta1
metadata:
  name: efk
subjects:
  - kind: ServiceAccount
    name: efk
    namespace: kube-system
roleRef:
  kind: ClusterRole
  name: cluster-admin
  apiGroup: rbac.authorization.k8s.io

efk-rbac.yaml