← Усі сценаріїЯкість AI / НАВЧАЛЬНИЙ СЦЕНАРІЙ

Чи підтверджує джерело відповідь?

Перевірте чернетку відповіді асистента перед тим, як показати її клієнту.

Відкрити цей запит
01 / КОНТЕКСТ

Єдине джерело: «План Team у вигаданому сервісі «Контур» включає 3 робочі простори та до 50 учасників. Адміністратор може вручну експортувати звіт у CSV. Автоматичні звіти та експорт у PDF у плані Team недоступні». Питання клієнта: «Чи можна в Team налаштувати автоматичні PDF-звіти та необмежені робочі простори?» Чернетка відповіді асистента: «Так, Team підтримує автоматичні PDF-звіти та необмежену кількість робочих просторів». Оцінюйте лише відповідність наведеному джерелу.

02 / ПИТАННЯ
verdictchoice

Як чернетка співвідноситься з джерелом?

  • supportedУсі твердження чернетки підтверджені
  • contradictedПринаймні одне твердження прямо суперечить джерелу
  • insufficientДжерела недостатньо для перевірки, прямої суперечності немає
groundingscore

Яка частка двох ключових тверджень чернетки (автоматичні PDF-звіти; необмежені робочі простори) підтверджена джерелом?

  • 0Жодне з двох
  • 1Одне з двох
  • 2Обидва
contains_contradictionnoul

Чернетка містить твердження, що прямо суперечить наведеному джерелу.

03 / ВАШ ПЕРШИЙ ЗАПУСК

Відредагуйте. Запустіть. Перевірте.

Це оригінальний навчальний приклад із вигаданими обставинами. Готової відповіді тут немає: результат поверне налаштована модель після запуску в Playground. Порівняйте його з правилами контексту та окремо перевірте крайові випадки.

request.json
{
  "state": "Єдине джерело: «План Team у вигаданому сервісі «Контур» включає 3 робочі простори та до 50 учасників. Адміністратор може вручну експортувати звіт у CSV. Автоматичні звіти та експорт у PDF у плані Team недоступні». Питання клієнта: «Чи можна в Team налаштувати автоматичні PDF-звіти та необмежені робочі простори?» Чернетка відповіді асистента: «Так, Team підтримує автоматичні PDF-звіти та необмежену кількість робочих просторів». Оцінюйте лише відповідність наведеному джерелу.",
  "questions": {
    "verdict": {
      "type": "choice",
      "instructions": "Як чернетка співвідноситься з джерелом?",
      "criteria": {
        "supported": "Усі твердження чернетки підтверджені",
        "contradicted": "Принаймні одне твердження прямо суперечить джерелу",
        "insufficient": "Джерела недостатньо для перевірки, прямої суперечності немає"
      }
    },
    "grounding": {
      "type": "score",
      "instructions": "Яка частка двох ключових тверджень чернетки (автоматичні PDF-звіти; необмежені робочі простори) підтверджена джерелом?",
      "criteria": [
        "Жодне з двох",
        "Одне з двох",
        "Обидва"
      ]
    },
    "contains_contradiction": {
      "type": "noul",
      "instructions": "Чернетка містить твердження, що прямо суперечить наведеному джерелу."
    }
  }
}