LearnAI
Модуль 6 · Продакшн AI-приложений (Pro) · Урок 5/5
Задача

Мониторинг AI в проде

Что отслеживать у AI-фичи в проде? Верни JSON {"track": [список из 2+ вещей], "why": "кратко"}.

«Не падает» ≠ «отвечает хорошо»
💡 Кусочек теории

«Не падает» не равно «хорошо отвечает». AI может уверенно выдавать чушь, а метрики аптайма этого не видят. Что мониторить: логировать входы и выходы (с учётом приватности) — иначе нечего разбирать; технические метрики (задержка, стоимость, доля ошибок); качество — выборочно просматривать ответы и/или собирать оценку пользователей (палец вверх/вниз); алерты на всплеск ошибок или стоимости. Настоящий сигнал даёт реальный трафик, а не только тесты до релиза. Правило: без логов и обратной связи ты управляешь AI-продуктом вслепую.

Как оценивается · проходной 70

  • 1Валидный JSON без текста вокруг30%
  • 2Есть массив track и why35%
  • 32+ вещи: логи вход/выход, задержка/стоимость/ошибки, качество, отзывы, алерты35%
Твой промптClaude ⌄
🔒

Открой доступ, чтобы отправлять решения на мгновенную AI-проверку.

Открыть полный доступ · $49