Назад | Перейти на главную страницу

Nginx - Пустой ответ на странице ошибки с proxy_pass

Задача: конфигурация nginx для обратного прокси в контейнеры докеров с динамическим поиском и кешированием.

Рабочий процесс:

  1. проверить кеш. если найден апстрим - прокси
  2. если не найден - запросить, кеш и прокси
  3. если обнаружен, но кеш недействителен - очистите кеш и запустите снова

Текущая конфигурация (шаблон):

server {
    listen *;
    server_name {{host}};

    set $attempt 0;

    location / {
        try_files '/dev/null' @run;
    }

    location @run {
        internal;
        set $container_name "{{container_name}}";
        set $upstream "";

        rewrite_by_lua '
             local attempt = tonumber(ngx.var.attempt)

             if attempt > 1 then
                ngx.log(ngx.ALERT, "Upstream down")
                ngx.exit(ngx.HTTP_INTERNAL_SERVER_ERROR)
             end

             local routes = ngx.shared.upstream_cache

             if attempt > 0 then
                ngx.log(ngx.ALERT, "Deleteing cache")
                routes:delete(ngx.var.http_host)
             end

             ngx.var.attempt = attempt + 1

             -- try cached route first
             local route = routes:get(ngx.var.http_host)
             if route == nil then
                 ngx.log(ngx.ALERT, "Asking docker about IP of " .. ngx.var.http_host)
                 local handle = io.popen("docker inspect --format \'{{ .NetworkSettings.IPAddress }}\' " .. ngx.var.container_name)
                 local result = handle:read("*a")
                 handle:close()
                 route = result
             end

             if route ~= nil then
                 ngx.var.upstream = route:gsub("^%s*(.-)%s*$", "%1")
                 routes:set(ngx.var.http_host, route)
             else
                 ngx.exit(ngx.HTTP_NOT_FOUND)
             end
        ';

        error_page 504 @run;

        proxy_buffering             off;
        proxy_set_header            Host $host;
        proxy_set_header            X-Real-IP  $remote_addr;
        proxy_set_header            X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_redirect              off;
        proxy_send_timeout          30;
        proxy_read_timeout          30;
        proxy_connect_timeout       2;

        proxy_pass $scheme://$upstream;

    }

}

Почти работает. Все в порядке, кроме сценария, когда кеш недействителен и срабатывает error_page.

В этом случае процесс работает так, как должен, что видно по логу:

[error] 7238#0: *6 upstream timed out (110: Connection timed out) while connecting to upstream
[alert] 7238#0: *6 [lua] [string "rewrite_by_lua"]:12: Deleteing cache
[alert] 7238#0: *6 [lua] [string "rewrite_by_lua"]:21: Asking docker about IP

И это делает правильный запрос к апстриму.

НО ответ пуст!

А при следующем запросе - все нормально, апстрим берется из кеша.

Почему и как это исправить?

Чертовски просто. error_page 504 = @run; вместо error_page 504 @run;