Круглосуточный мониторинг AI-систем с дежурным инженером и разбором инцидентов
Голосовой агент или видеоаналитика работает ночью и в выходные. Мы ставим алерты на все, что может сломаться, держим дежурного инженера и после каждого инцидента пишем разбор с мерами. От $1 500 в месяц.
Что болит
Агент принимает звонки круглосуточно, а Ваша команда работает днем. Сбой в два часа ночи виден только утром, когда уже есть пропущенные клиенты. Никто не скажет, сколько их было.
Алерты есть, но их так много, что все их игнорируют. Настоящий сбой тонет среди предупреждений, которые ничего не значат. Канал с алертами давно на беззвучном.
После инцидента все починили, но причину не записали. Через месяц то же самое повторяется. Никто не помнит, как это исправляли в прошлый раз.
Что строим
- Метрики сервисов, моделей, очередей и интеграций в Prometheus
- Дашборды Grafana для технической команды и для руководителя
- Логи в Loki с поиском по разговору, звонку или заказу
- Алерты на сбои, задержки, ошибки LLM и окончание баланса у вендоров
- Чистка шума: оставляем алерты, которые требуют действия
- График дежурств с эскалацией в Telegram и звонком
- Разбор каждого серьезного инцидента с причиной и мерами
- Ранбуки: пошаговые инструкции на типовые сбои
Что Вы получаете
- Настроенный мониторинг и алерты с доступом для Вашей команды
- График дежурств и правила эскалации
- Ранбуки на типовые инциденты
- Разборы инцидентов с причинами и мерами
- Ежемесячный отчет о доступности и инцидентах
Как измеряем результат
- Время от сбоя до алерта и до реакции дежурного
- Время восстановления после инцидента
- Доля алертов, которые требовали действия
- Количество повторных инцидентов с той же причиной
Системы и стек
Отрасли
Вопросы
Сколько стоит круглосуточный мониторинг?
От $1 500 в месяц. Цена зависит от количества сервисов и интеграций, нужного времени реакции ночью и того, может ли дежурный исправлять сбой сам. Настройка мониторинга в первый месяц входит в цену.
Кто реагирует на алерт ночью?
Дежурный инженер по графику. Он получает алерт в Telegram, а для критических сбоев еще и звонок. Время реакции на каждый приоритет записано в SLA. Если дежурный не отвечает, алерт эскалируется дальше.
Чем Вы мониторите и можно ли использовать наши инструменты?
Наш стандартный набор Prometheus, Grafana, Loki и Sentry, на нем мы сами держим платформу Happ. Если у Вас уже есть свой мониторинг, подключаемся к нему, а не дублируем. Новые инструменты ставим только тогда, когда старых не хватает.
Как Вы мониторите качество AI, а не только серверы?
Кроме сбоев смотрим на AI-метрики: ошибки и таймауты моделей, долю передач оператору, длину разговоров, расходы на токены. Резкие изменения в этих метриках часто означают проблему раньше ошибок в логах.
Что, если сбой на стороне вендора модели или телефонии?
Дежурный фиксирует это, сообщает Вам и переключает на резервный вариант, если он предусмотрен. Мы можем заранее настроить резервную модель или собственный vLLM, чтобы система не зависела от одного вендора.
Связанные услуги
Другие услуги раздела
Опишите задачу. Ответим в течение рабочего дня, первый звонок с фаундером.
Опишите задачу. Первый звонок с фаундером.
Ответим в течение рабочего дня. 30 минут, чтобы сказать, стоит ли это делать и сколько это стоит.