Назад | Перейти на главную страницу

HAProxy -> nginx -> Fast CGI: epoll_wait () сообщил, что клиент преждевременно закрыл соединение

Мне удалось создать быстрое приложение CGI на PHP под управлением nginx. Если я нажму на nginx напрямую, все будет работать, как ожидалось. Однако в производственной среде трафик направляется через экземпляр HAProxy, и я не могу заставить эту конфигурацию работать.

При прохождении HAProxy я получаю 502 Bad Gateway и следующая ошибка от nginx:

[info] 7#7: *1 epoll_wait() reported that client prematurely closed connection, so upstream connection is closed too (104: Connection reset by peer) while reading upstream, client: 172.18.0.6, server: , request: "GET / HTTP/1.1", upstream: "fastcgi://172.18.0.3:9000", host: "localhost:8888"

Конфигурация

Вот мой docker-compose.yml, описывающий стек:

version: '2'
services:
    logger:
        image: colstrom/syslog
    proxy:
        build:
            context: .
            dockerfile: Dockerfile-haproxy
        ports:
            - "8888:12000"
    web:
        build:
            context: .
            dockerfile: Dockerfile-web
        ports:
            - "9999:80"
    php:
        build:
            context: .
            dockerfile: Dockerfile-app

Dockerfile-haproxy:

FROM haproxy:1.7
COPY haproxy.cfg /usr/local/etc/haproxy/haproxy.cfg
EXPOSE 12000

haproxy.cfg

global
    maxconn 4096
    maxpipes 1024
    log logger:514 local2

defaults
    timeout client 50000
    timeout connect 5000
    timeout server 50000

frontend bak
 bind *:12000
 mode http
 option httplog
 log global
 default_backend bak

backend bak
 mode http
 server web web:80

Dockerfile-web:

FROM nginx
COPY site.conf /etc/nginx/conf.d/default.conf
COPY src /var/www/html

site.conf (конфигурация nginx):

server {
    index index.php index.html;
    error_log  /var/log/nginx/error.log info;
    access_log /var/log/nginx/access.log;
    root /var/www/html;

    location / {
        fastcgi_pass php:9000;
        include fastcgi_params;
        fastcgi_param SCRIPT_FILENAME index.php;
    }
}

Полный вывод журнала docker-compose выглядит следующим образом:

php_1      | 172.18.0.2 -  11/Feb/2017:11:09:19 +0000 "GET /" 200
web_1      | 2017/02/11 11:09:19 [info] 7#7: *1 epoll_wait() reported that client prematurely closed connection, so upstream connection is closed too (104: Connection reset by peer) while reading upstream, client: 172.18.0.6, server: , request: "GET / HTTP/1.1", upstream: "fastcgi://172.18.0.3:9000", host: "localhost:8888"
web_1      | 172.18.0.6 - - [11/Feb/2017:11:09:19 +0000] "GET / HTTP/1.1" 200 8005 "-" "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.95 Safari/537.36"
logger_1   | Feb 11 11:09:19 a94d638768c9 user.notice root: <150>Feb 11 11:09:19 haproxy[9]: 172.18.0.1:54508 [11/Feb/2017:11:09:19.285] bak bak/web 0/0/1/-1/37 502 8524 - - PH-- 0/0/0/0/0 0/0 "GET / HTTP/1.1"

Похоже, что в HAProxy или nginx нужна дополнительная настройка, но я не знаю, что именно.

Обновления / вещи, которые я пробовал

Установить nginx fastcgi_ignore_client_abort on; это одно из предлагаемых исправлений, с которыми я столкнулся. Конечный результат такой же, но ошибка nginx немного отличается:

2017/02/11 11:40:35 [info] 7#7: *3 writev() failed (104: Connection reset by peer) while sending to client, client: 172.18.0.5, server: , request: "GET / HTTP/1.1", upstream: "fastcgi://172.18.0.2:9000", host: "localhost:8888"

Установить nginx proxy_buffering on;. Это не имеет значения.


Настройка haproxy mode tcp будет правильно обслуживать страницу. Однако мне нужно mode http потому что я выполняю балансировку нагрузки L7 (не показано в этом тестовом примере). Это заставило меня понять, что журналы HAProxy сообщают PH что, как я понимаю, означает плохой ответ со стороны апстрима.

Есть ли способ получить дополнительную информацию по этому поводу? Если я перейду прямо к nginx, заголовки ответов будут выглядеть нормально, насколько я могу судить:

HTTP/1.1 200 OK
Server: nginx/1.11.9
Date: Sat, 11 Feb 2017 12:05:07 GMT
Content-Type: text/html; charset=utf-8
Transfer-Encoding: chunked
Connection: keep-alive
X-Powered-By: PHP/5.4.45
Expires: Sat, 11 Feb 2017 12:15:07GMT
Cache-Control: public,max-age=600

В PH-- в логах haproxy выявил проблему в итоге. Заголовки ответа HTTP недействительны. Я только что избавился от Date и Expires и теперь все работает отлично.