Слёрм: ИИ-агент IncidentGPT для автоматического разбора алертов
Описание проекта
Четыре компонента. Сбор данных идёт из Prometheus, Kubernetes API, Alertmanager и инфраструктурного мониторинга. Alertmanager шлёт алерт одновременно в Telegram и в сервис обогащения. Data Enricher автоматически собирает контекст: метрики за окно 10–15 минут, состояние подов и нод, недавние деплои и рестарты — через Kubernetes API только на чтение. AI Worker прогоняет обогащённые данные через LLM и публикует гипотезы ответом в тред Telegram. Промпт — 14 строк структурированных правил с явными сигналами вроде node.memory.pressure. Опционально подключается Elasticsearch.
Вендор и технология: Слёрм, собственный агент на Gemini Flash 2.5 через OpenRouter поверх Prometheus и Kubernetes API.
Задача
Инженеры тратили 20–30 минут на ручной сбор контекста инцидента по дашбордам, SSH-сессиям и API-запросам, прежде чем вообще понять причину. MTTA определялся скоростью ручного расследования.
Цели внедрения
-
Сократить MTTA
-
автоматизировать сбор контекста инцидента
-
оставить принятие решения за человеком
-
дать read-only доступ агенту
-
уложиться в минимальный бюджет на LLM
Результаты
-
Результаты
-
MTTA сокращён с 20–30 минут до 1–2 минут, часто до секунд
-
стоимость около 0,20 доллара за несколько недель работы демостенда
-
разработка — 6 месяцев силами одного инженера
-
промпт из 14 строк Финансы
-
Около 0,20 доллара на LLM за несколько недель работы стенда Нагрузка и масштаб
-
Демонстрационный кластер на микросервисах Sock Shop с генерацией живого трафика, решение рассчитано на продакшен-кластеры Kubernetes Сроки
-
6 месяцев разработки одним инженером; публикация 21.08.2026
Стоимость проекта
Около 0,20 доллара на LLM за несколько недель работы стенда