Назад | Перейти на главную страницу

Шаблон балансировщика нагрузки для нескольких центров обработки данных

Я переношу управление существующей установкой с несколькими центрами обработки данных на Ansible, но я не уверен, как лучше всего это смоделировать, поскольку я новичок в этом.

У меня три дата-центра D1, D2 и D3. В каждом одна и та же конфигурация повторяется идентично:

Созданный мной файл hosts выглядит примерно так:

# DC1 -----------
[dc_1_webservers]
10.43.0.10

[dc_1_appservers]
10.43.0.20
10.43.0.21

[dc_1_dbservers]
10.43.0.30

[dc_1:children]
dc_1_webservers
dc_1_appservers
dc_1_dbservers

# DC2 -----------
[dc_2_webservers]
10.43.10.10

[dc_2_appservers]
10.43.10.20
10.43.10.21

[dc_2_dbservers]
10.43.10.30

[dc_2:children]
dc_2_webservers
dc_2_appservers
dc_2_dbservers

# DC3 -----------
[dc_3_webservers]
10.43.20.10

[dc_3_appservers]
10.43.20.20
10.43.20.21

[dc_3_dbservers]
10.43.20.30

[dc_3:children]
dc_3_webservers
dc_3_appservers
dc_3_dbservers

[webservers:children]
dc_1_webservers
dc_2_webservers
dc_3_webservers

[appservers:children]
dc_1_appservers
dc_2_appservers
dc_3_appservers

Я намеренно оставил здесь только IP-адреса, потому что хотел бы понять, как будет работать чистое решение Ansible вместо обращения к DNS.

Проблема заключается в правильном заполнении обратного прокси-сервера nginx в восходящем направлении, так что добавляются только серверы приложений, локальные для каждого DC при запуске роли nginx и копировании шаблона файла конфигурации на машину балансировки нагрузки. В частности, можно ли что-то подобное сделать?

# file /etc/nginx/sites-enabled/loadbalancer.conf in lb.D[n] (i.e. lb.D2)
 upstream backend  {
 # Iterate over the app servers in the current data center (i.e. D2)
 {% for host in [datacenters][current_datacenter][appservers] %}
     # Add each local app server IP to the load balancing pool 
     # (i.e. 10.43.10.20 and 10.43.10.21 for DC2)
     server {{ hostvars[host]['ansible_eth0']['ipv4']['address'] }};
 {% endfor %}
 }

Во-первых, я не уверен, что файл hosts имеет смысл (должен ли я вместо этого добавлять переменные к отдельным записям? В текущей конфигурации я не могу сделать что-то вроде [dc] [3] [appservers], хотя я не уверен вот где решение.)

Большое спасибо!

РЕДАКТИРОВАТЬ 1:

Структура playbook следующая:

main.yml
hosts
vars.yml
servers/
    webservers.yml
    appservers.yml
roles/
   base/
     files/
       ssh/
       newrelic/
     tasks/
       main.yml
     handlers/
       main.yml
   webserver/
     files/
       ssl_certs/
     templates/
       nginx/
          loadbalancer.j2
     tasks/
       main.yml
     handlers/
       main.yml
   appserver/
     files/
       pip/
         requirements.txt
     templates/
       supervisor/
          gunicorn.j2
     tasks/
        main.yml
     handlers/
        main.yml

Точка входа main.yml - это всего две строки:

---
- include: servers/webservers.yml
- include: servers/appservers.yml

webservers.yml собирает факты о серверах приложений (я полагал, что это необходимо для достижения моей цели, хотя я еще не совсем уверен, как именно), а затем сначала вызывает базовую роль, которая просто устанавливает некоторые общие ключи SSH, привязки NewRelic и другие то, что является общим для каждой машины в нашем облаке, затем вызывает фактическую роль веб-сервера.

---
- name: Gather data about appservers
  hosts:  appservers
  gather_facts: yes
  tasks:
    - debug: Gather Facts

- name: Configure all frontend web servers
  hosts: webservers
  sudo: yes
  roles:
    - { role: base }
    - { role: webserver }

Упомянутая роль «веб-сервер» устанавливает nginx, копирует сертификаты SSL, а затем, наконец, копирует шаблон конфигурации jinja2 nginx.

 - name: Install nginx configuration file.
    template: src=files/loadbalancer.j2 dest=/etc/nginx/sites-available/{{ project_name }} backup=yes

Вы можете использовать магические переменные group_names и groups для поиска групп, определенных в вашем инвентаре:

---
- hosts: webservers
  vars:
    dcs: [dc_1, dc_2, dc_3]
  tasks:
  - debug:
      msg: |
        upstream backend {
        {%- for dc in dcs %}
        {%-   if dc in group_names %}
        {%-     for host in groups[dc+'_appservers'] %}
        server {{host}};
        {%-     endfor %}
        {%-   endif %}
        {%- endfor %}
        }

Этот сценарий даст вам следующий результат.

TASK: [debug ]     **************************************************************** 
ok: [10.43.0.10] => {
    "msg": "upstream backend { server 10.43.0.20; server 10.43.0.21;}"
}
ok: [10.43.10.10] => {
    "msg": "upstream backend { server 10.43.10.20; server 10.43.10.21;}"
}
ok: [10.43.20.10] => {
    "msg": "upstream backend { server 10.43.20.20; server 10.43.20.21;}"
}

+ Изменить server {{host}}; как вам нужно.