在 docker 容器中运行 nginx 的性能问题

Question

我正在使用 ApacheBench (ab) 来衡量两个 nginx 在 Linux 上的性能。他们有相同的配置文件。唯一的区别是 nginx 是在 docker 容器中运行的。

主机系统上的 Nginx：

Running: ab -n 50000 -c 1000 http://172.17.0.2:7082/

Concurrency Level:      1000
Time taken for tests:   9.376 seconds
Complete requests:      50000
Failed requests:        0
Total transferred:      8050000 bytes
HTML transferred:       250000 bytes
Requests per second:    5332.94 [#/sec] (mean)
Time per request:       187.514 [ms] (mean)
Time per request:       0.188 [ms] (mean, across all concurrent requests)
Transfer rate:          838.48 [Kbytes/sec] received

Docker 容器中的 Nginx：

Running: ab -n 50000 -c 1000 http://172.17.0.2:6066/

Concurrency Level:      1000
Time taken for tests:   31.274 seconds
Complete requests:      50000
Failed requests:        0
Total transferred:      8050000 bytes
HTML transferred:       250000 bytes
Requests per second:    1598.76 [#/sec] (mean)
Time per request:       625.484 [ms] (mean)
Time per request:       0.625 [ms] (mean, across all concurrent requests)
Transfer rate:          251.37 [Kbytes/sec] received

只是想知道为什么容器一的性能这么差

nginx.conf：

worker_processes  auto;
worker_rlimit_nofile 10240;

events {
    use epoll;
    multi_accept on;
    worker_connections  4096;
}

http {
    include       mime.types;
    default_type  application/octet-stream;

    sendfile        on;
    keepalive_timeout  10;

    client_header_timeout 10;
    client_body_timeout 10;

    send_timeout 10;

    tcp_nopush on;
    tcp_nodelay on;

    server {
        listen       80;
        server_name  localhost;
        location / {
            return 200 'hello';
        }

        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;
        }
    }
}

Answer 1

我想添加到@Andrian Mouat's 答案，这是我刚刚在文档中找到的内容。

写在Docker run reference:

网络：主机

与默认的bridge 模式相比，host 模式显着提供了更好的网络性能，因为它使用主机的本机网络堆栈，而 桥必须经过一层通过 docker 守护进程进行虚拟化。

当容器的网络性能至关重要时，建议在此模式下运行容器，例如生产负载均衡器或高性能 Web 服务器。

---

一些火焰图测试如下：

将主机的本机网络堆栈与 --net=host 一起使用时，系统调用较少，这在以下火焰图中清楚地描述了。详情：

• 系统范围捕获 30 秒：sudo perf record -F 99 -a -g -- sleep 30
• 来自另一台物理机的 ab 测试：ab -n 50000 -c 1000 http://my-host-ip/（在捕获时发生）

有关火焰图的更多信息，请查看 Brendan Gregg 的网站：www.brendangregg.com/

发布端口-p 80:80时的火焰图：

全图here

放大到nginx 部分：

使用--net=host时的火焰图：

全图here

放大到nginx部分：

Answer 2

你是如何运行容器的？是否使用默认的 Docker 桥接网络？如果是这样，请尝试使用 --net=host 运行测试，看看结果如何。