nginx负载均衡器打开的文件太多答案

【问题标题】：nginx loadbalancer Too many open filesnginx负载均衡器打开的文件太多
【发布时间】：2017-09-13 16:07:35
【问题描述】：

我有一个负载均衡器，但我收到了这种错误：

2017/09/12 11:18:38 [crit] 22348#22348: accept4() failed (24: Too many open files)
2017/09/12 11:18:38 [alert] 22348#22348: *4288962 socket() failed (24: Too many open files) while connecting to upstream, client: x.x.x.x, server: example.com, request: "GET /xxx.jpg HTTP/1.1", upstream: "http://y.y.y.y:80/xxx.jpg", host: "example.com", referrer: "https://example.com/some-page"
2017/09/12 11:18:38 [crit] 22348#22348: *4288962 open() "/usr/local/nginx/html/50x.html" failed (24: Too many open files), client: x.x.x.x, server: example.com, request: "GET /xxx.jpg HTTP/1.1", upstream: "http://y.y.y.y:80/xxx.jpg", host: "example.com", referrer: "https://example.com/some-page"

nginx 版本：nginx/1.10.1

操作系统：Debian GNU/Linux 8 (jessie)

有趣的是并不总是出错。大多数情况下，我会收到 30-50 行错误，然后在 5-10 分钟内什么也没有。然后一旦错误再次出现......

这是我的 nginx.conf：

user                    www-data;
pid                     /usr/local/nginx/nginx.pid;
worker_processes        auto;

error_log               /var/log/nginx/error.log;

events {
    worker_connections  30000;
}

http {
    include             mime.types;
    default_type        application/octet-stream;

    fastcgi_buffers 16 16k;
    fastcgi_buffer_size 32k;

    proxy_buffer_size   128k;
    proxy_buffers   4 256k;
    proxy_busy_buffers_size   256k;
    client_max_body_size 500m;
    rewrite_log on;

    log_format          main    '$remote_addr - "$proxy_add_x_forwarded_for" -  [$time_local] "$request" '
                                '$status $body_bytes_sent "$http_referer" '
                                '"$http_user_agent" "$backend" '
                                'rt=$request_time uct="$upstream_connect_time" '
                                'uht="$upstream_header_time" urt="$upstream_response_time"';

    access_log          /var/log/nginx/access.log main;

    sendfile            on;
    tcp_nopush          on;
    tcp_nodelay         on;
    keepalive_timeout   65;

    geoip_country    /etc/nginx/geodb/GeoIP.dat;
    geoip_city       /etc/nginx/geodb/GeoLiteCity.dat;

    include             /etc/nginx/loadbalancer/loadbalancer.conf;

}

还有一些信息：

$ ulimit -Hn
65536
$ ulimit -Sn
65536
$ sysctl fs.file-nr
fs.file-nr = 2848   0   70000

我不知道是否值得，但这个负载均衡器在 cloudflare 后面。

【问题讨论】：

您正在检查的ulimit 可能是针对root 用户的。您以 www-data 的身份运行 nginx workers，因此您需要检查该用户的 ulimits。尝试使用sudo -u www-data bash -c "ulimit"
@TarunLalwani 它说：unlimited
相关：serverfault.com/q/1003364/336629

标签： linux nginx load-balancing

【解决方案1】：

我在 nginx.conf 中添加了以下行：

worker_rlimit_nofile    20000;

现在可以了，修改后我没有收到任何错误。

希望对遇到同样问题的人有所帮助。

【讨论】：