Автор публикации AiOps Community обнаружил, что недели нулевых регистраций агентов были вызваны сломанной HTTP-конечной точкой, а не отсутствием рыночного интереса. Сбой остался незамеченным, потому что панели мониторинга отображали одинаковые метрики для «нет попыток» и «все попытки завершились ошибкой», при этом уровень ошибок выглядел здоровым из-за низкого объема.
- Корневая причина заключалась в неработающей конечной точке `POST /api/v1/agents/register`, которая предотвращала регистрацию любых внешних агентов.
- Мониторинг опирался на количество успешных попыток без знаменателя, что делало невозможным различие между тишиной и сбоем.
- Уровень ошибок оставался неопределенным или пренебрежимо малым при объемах первого пользователя, из-за чего панели мониторинга ошибочно показывали здоровый статус.
- Исправление включает запланированную синтетическую проверку регистрации, запускаемую внешней системой для обнаружения сквозных сбоев.
Автор подчеркивает, что командам необходимо измерять попытки наряду с успешными завершениями и использовать внешние зонды для проверки публичных путей самообслуживания, поскольку внутренние системы не могут обнаружить тишину отсутствующих событий.