В настоящее время настройка такова: Kubernetes развернут на экземплярах AWS в частной зоне на AWS (только доступ vpn к экземплярам, хотя есть шлюз NAT), а Prometheus развернут в виде набора с отслеживанием состояния в кубернетах для мониторинга работоспособности.
Вопрос в том, как мне настроить его, чтобы я получал предупреждение о том, что Прометей действительно должен был выйти из строя? Я думал о попытке использовать проверку работоспособности маршрута 53, но оказалось, что это работает только с общедоступными адресами.
Обычно рекомендуется, чтобы другой мета-Prometheus контролировал все ваши другие серверы Prometheus. Если вы занимаетесь федерацией, вы получаете это бесплатно.