Специальный промпт, направленный на проверку, оценку или верификацию качества, точности или соответствия результата, сгенерированного основной моделью. Может выполняться той же или другой моделью.
Промпт для оценки результата — это специальная инструкция или набор инструкций, которые передаются большой языковой модели (LLM) с целью анализа и оценки качества ранее сгенерированного ею ответа.
Основная идея заключается в том, чтобы не просто получить ответ от AI, а затем вручную проверить его, а использовать сам AI для этой проверки. Это могут быть промпты, которые просят модель оценить релевантность, полноту, точность, стилистику или даже соответствие корпоративному тону предыдущего ответа.
Такой подход позволяет автоматизировать и масштабировать процесс контроля качества, выявлять «галлюцинации» и неточности, а также обеспечивать более стабильное и предсказуемое поведение AI в различных сценариях. Он критически важен в системах, где требуется высокая степень достоверности и соответствия стандартам, например, в генерации клиентских ответов, статей или отчетов.
Методика особенно полезна в циклах доработки (Refinement Loop), где оценка результата является входным параметром для дальнейшей итерации генерации.