【问题标题】:Kubernetes - Unable to connect to Redis Pods from inside Kubernetes ClusterKubernetes - 无法从 Kubernetes 集群内部连接到 Redis Pod
【发布时间】:2020-06-10 18:16:57
【问题描述】:

我正在尝试连接到我的 kubernetes 集群中的一些 redis pod,但我无法使其正常工作。 我通过尝试在连接到 redis 集群 redis-sentinel:26379 的程序中使用服务名称作为我的主机名或使用运行 redis 映像 10.0.10.xxx:26379 的 3 个 pod 的端点的直接列表来调用 redis 服务。我知道 redis 集群可以正常工作,因为我可以完全在 docker/kubernetes 之外运行我的程序,并将 redis-sentinel 服务变成一个 NodePort,它可以连接并运行得很好。但是我无法从 kubernetes 内的其他 pod 连接到这个 redis 集群。

使用 Docker Desktop 作为我的 Kubernetes 环境。

Redis pod 服务:

kind: Service
metadata:
  labels:
    name: sentinel
    role: service
  name: redis-sentinel
spec:
  ports:
    - port: 26379
      targetPort: 26379
  selector:
    redis-sentinel: "true"

Redis-Sentinel ReplicaController:

kind: ReplicationController
metadata:
  name: redis-sentinel
spec:
  replicas: 3
  selector:
    redis-sentinel: "true"
  template:
    metadata:
      labels:
        name: redis-sentinel
        redis-sentinel: "true"
        role: sentinel
    spec:
      containers:
      - name: sentinel
        image: k8s.gcr.io/redis:v1
        env:
          - name: SENTINEL
            value: "true"
        ports:
          - containerPort: 26379

Redis 主副本控制器:

kind: ReplicationController
metadata:
  name: redis
spec:
  replicas: 3
  selector:
    name: redis
  template:
    metadata:
      labels:
        name: redis
        role: master
    spec:
      containers:
      - name: redis
        image: k8s.gcr.io/redis:v1
        ports:
        - containerPort: 6379
        resources:
          limits:
            cpu: "0.1"
        volumeMounts:
        - mountPath: /redis-master-data
          name: data
      volumes:
        - name: data

@Matt,尝试 PING redis-sentinel 超时和 nc redis-sentinel 26379 似乎无济于事。

@FrankYuchengGu 是的,DNS 服务正在运行,但似乎失败了。在运行nslookup redis-sentinel 时运行busybox 图像会返回此内容

** server can't find redis-sentinel.default.svc.cluster.local: NXDOMAIN 

*** Can't find redis-sentinel.svc.cluster.local: No answer 
*** Can't find redis-sentinel.cluster.local: No answer 
*** Can't find redis-sentinel.default.svc.cluster.local: No answer 
*** Can't find redis-sentinel.svc.cluster.local: No answer 
*** Can't find redis-sentinel.cluster.local: No answer

看起来busybox 图像与nslookup 命令有问题。使用 Kubernetes DNS 调试页面中的 dnsutils 映像可以找到该服务

$ kubectl exec -ti dnsutils -- nslookup redis-sentinel
Server:         10.96.0.10
Address:        10.96.0.10#53

Name:   redis-sentinel.default.svc.cluster.local
Address: 10.110.45.31

但是,尝试redis-sentinel.default.svc.cluster.local:26379 或10.110.45.31:26379 似乎也不起作用,我的程序仍然无法找到redis 集群。

【问题讨论】:

  • 端口号在问题23679而不是26379中被转置。只是注意以防这是代码的复制粘贴(或者可能只是q中的错字)
  • 没注意到。我的意思是26379。我的错。
  • 您的集群的 DNS 服务是否正在运行?
  • 是的,您可以从应用程序容器中 ping redis-sentinel 和 nc redis-sentinel 26379
  • 无法连接pod是什么意思?从一个 pod ping 到另一个?

标签: docker kubernetes redis containers


【解决方案1】:

我猜你在 Github 上使用了this tutorial。当我部署您提供的 YAML 时,我遇到了许多无法连接的问题。在上述教程中,您可以找到首先必须创建 Master Pod 的信息。

我们将使用共享网络命名空间来引导我们的 Redis 集群。特别是,第一个哨兵需要知道如何找到主人(后续哨兵只需询问第一个哨兵)。因为 Pod 中的所有容器共享一个网络命名空间,所以哨兵可以简单地查看 $(hostname -i):6379。

然后是Service,然后是redis server。一切设置好后,您只需删除此 pod。可以找到快速部署步骤here

$ kubectl get svc,pods -o wide
NAME                     TYPE        CLUSTER-IP     EXTERNAL-IP   PORT(S)     AGE   SELECTOR
service/kubernetes       ClusterIP   10.97.0.1      <none>        443/TCP     21h   <none>
service/redis-sentinel   ClusterIP   10.97.13.152   <none>        26379/TCP   71m   redis-sentinel=true

NAME                       READY   STATUS    RESTARTS   AGE   IP          NODE                                   NOMINATED NODE   READINESS GATES
pod/redis-6kb5p            1/1     Running   0          71m   10.32.2.7   gke-redis-default-pool-bc40bcaa-08sj   <none>           <none>
pod/redis-sentinel-qf9l8   1/1     Running   0          71m   10.32.1.5   gke-redis-default-pool-bc40bcaa-txmt   <none>           <none>
pod/redis-sentinel-rnsw6   1/1     Running   0          71m   10.32.2.8   gke-redis-default-pool-bc40bcaa-08sj   <none>           <none>
pod/redis-sentinel-sbn8f   1/1     Running   0          71m   10.32.1.7   gke-redis-default-pool-bc40bcaa-txmt   <none>           <none>
pod/redis-sq2g2            1/1     Running   0          71m   10.32.1.6   gke-redis-default-pool-bc40bcaa-txmt   <none>           <none>
pod/redis-wv5q2            1/1     Running   0          71m   10.32.1.8   gke-redis-default-pool-bc40bcaa-txmt   <none>           <none>

$ kubectl get ep
NAME             ENDPOINTS                                         AGE
redis-sentinel   10.32.1.5:26379,10.32.1.7:26379,10.32.2.8:26379   72m

另外,你也可以使用Redis 3.x.查看this教程

如何连接

要运行Redis container,请执行命令

kubectl exec -ti <pod-name> -- redis-cli 

$ kubectl exec -ti redis-6kb5p redis-cli
127.0.0.1:6379> info
# Server
redis_version:2.8.19
redis_git_sha1:00000000
redis_git_dirty:0
redis_build_id:f308ca06a4d63700

要使用 service 连接到 redis,您应该进入 pod。

$ kubectl exec -ti redis-sentinel-qf9l8 /bin/bash

如果您检查此容器内的env,您将能够找到一些 kubernetes 配置。

root@redis-sentinel-qf9l8:/data# env
HOSTNAME=redis-sentinel-qf9l8
REDIS_DOWNLOAD_URL=http://download.redis.io/releases/redis-2.8.19.tar.gz
KUBERNETES_PORT_443_TCP_PORT=443
KUBERNETES_PORT=tcp://10.97.0.1:443
TERM=xterm
KUBERNETES_SERVICE_PORT=443
KUBERNETES_SERVICE_HOST=10.97.0.1
REDIS_SENTINEL_PORT_26379_TCP_ADDR=10.97.13.152
REDIS_SENTINEL_SERVICE_HOST=10.97.13.152

现在基于来自here的脚本

master=$(redis-cli -h ${REDIS_SENTINEL_SERVICE_HOST} -p ${REDIS_SENTINEL_SERVICE_PORT}

您可以使用 Kubernetes 环境连接到服务。

root@redis-sentinel-qf9l8:/data# redis-cli -h ${REDIS_SENTINEL_SERVICE_HOST} -p ${REDIS_SENTINEL_SERVICE_PORT}
10.97.13.152:26379>

或者使用具体信息$ redis-cli -h &lt;service-name&gt; -p &lt;service-port&gt;

root@redis-sentinel-qf9l8:/data# redis-cli -h redis-sentinel -p 26379
redis-sentinel:26379>

作为附加信息。

您不能用ClusterIP ping service,因为它是由kube-proxy 守护进程管理的虚拟地址。更多详情请见in official docs。

【讨论】:

    猜你喜欢
    • 2020-08-15
    • 2019-04-24
    • 2020-12-14
    • 1970-01-01
    • 2020-09-10
    • 2019-06-10
    • 2020-01-31
    • 2017-12-28
    • 2019-06-20
    相关资源
    最近更新 更多