在 k8s 集群上使用 proxy_pass 的 Nginx 和节点部署的随机/间歇性 502 网关错误

Question

我目前的配置如下

裸机集群。 SELINUX 状态为关闭。

1. nginx 部署
2. nodejs 部署

我通过 ngnix 服务提供静态内容，使用节点服务提供动态内容。下面是我的 nginx 配置。

worker_processes  4;

#error_log  logs/error.log  info;
error_log  /dev/stdout  info;

events {
    worker_connections  1024;
}

http {
    include       mime.types;
    default_type  application/octet-stream;

    sendfile        on;
    tcp_nopush      on;

    #keepalive_timeout  0;
    #keepalive_timeout  5;

    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';
    access_log  /dev/stdout  main;


    server {
        listen       1080;
        server_name  localhost $hostname;

        root  /usr/share/nginx/static/;
    
        # static content
        location ~ some-regex {
            alias /usr/share/nginx/static/;
            
            # handle cors see 'NGINX-Cookbook' for production quality
            add_header 'Access-Control-Allow-Origin' '*';
        }

        # forward request to node-service
        location / {
             client_max_body_size 128M;
             proxy_buffer_size 256k;
             proxy_buffers 4 512k;
             proxy_busy_buffers_size 512k;
             proxy_http_version 1.1;
            #  proxy_set_header Connection "";
            #  proxy_http_version 1.1;
             proxy_set_header Upgrade $http_upgrade;
             proxy_set_header Connection keep-alive;
             proxy_set_header Host $http_host;
             proxy_cache_bypass $http_upgrade;
             proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
            #  proxy_socket_keepalive on;
             proxy_pass http://nodeserver:3000;
        }
    }

    include servers/*;
}

在我的入口中，我正在访问 nginx 服务。我能够将我的请求正确转发到节点服务几次并获得正确的响应，但大约 50% 的请求失败并出现 502 bad gateway 错误，我在 nginx pod 日志中看到此错误

[error] 20#20: *187 connect() failed (111: Connection refused) while 连接到上游，客户端：10.44.0.2，服务器：localhost，请求： “GET /path HTTP/1.1”，上游： “http://node-service-clusterip:3000/path”，主机： “我的-nginx-node.example.com”

我尝试了 nginx 文档中的多个指令，但无济于事。任何帮助将不胜感激

Answer 1

我的 kubernetes 标签选择器有一个错误。我在多个部署中使用了相同的选择器，这导致了路由问题。