Собственная система уведомлений о нештатных ситуациях / Алексей Кирпичников (Контур)

Опубликовано 19 ноября 2018, 11:09

Приглашаем на конференцию HighLoad++ 2024, которая пройдет 2 и 3 декабря в Москве!
Программа, подробности и билеты по ссылке: clck.ru/3DD4yb
--------
HighLoad++ Moscow 2018

Тезисы и презентация:
highload.ru/moscow/2018/abstra...

Чему мы научились, пока делали собственную систему уведомлений о нештатных ситуациях.

Иногда искусственный интеллект должен принять решение, от которого зависит здоровье человека. Наверняка вы подумали о беспилотных автомобилях, но наша история проще: мы делаем систему, которая будит людей по ночам.

Представьте, что система мониторинга следит за состоянием десяти сервисов и в какой-то момент понимает, что пропали метрики всех сервисов. Кого нужно разбудить? Админов всех сервисов? Это ошибка. Скорее всего, сломалась сама система мониторинга. А что делать, если пропали метрики пяти сервисов? А если трех?
...

Нашли ошибку в видео? Пишите нам на support@ontico.ru