LearnAI
Модуль 7 · Оценка качества AI (Pro) · Урок 5/5
Задача

Обратная связь от людей

Как замкнуть петлю обратной связи? Верни JSON {"loop": [список из 2+ шагов], "why": "кратко"}.

Живой трафик = тест-кейсы
💡 Кусочек теории

Реальные пользователи находят то, чего не было в твоих тестах: неожиданные формулировки, краевые случаи, новые темы. Замкни петлю обратной связи: дай простой способ оценить ответ (палец вверх/вниз, репорт); собирай плохие случаи и регулярно добавляй их в eval set; по накопленным провалам правь промпт или поиск и снова проверяйся на наборе. Так продукт учится на настоящем использовании, а не только на догадках разработчика. Правило: живой трафик — лучший генератор тест-кейсов; не собирать его — терять бесплатные данные о качестве.

Как оценивается · проходной 70

  • 1Валидный JSON без текста вокруг30%
  • 2Есть массив loop и why35%
  • 32+ шага: собрать оценку, складывать провалы в eval set, править и перепроверять35%
Твой промптClaude ⌄
🔒

Открой доступ, чтобы отправлять решения на мгновенную AI-проверку.

Открыть полный доступ · $49