> ## Documentation Index
> Fetch the complete documentation index at: https://docs.befailproof.ai/llms.txt
> Use this file to discover all available pages before exploring further.

# Оценки

> Документация по функции Evaluations в FailproofAI Observability.

Проблемы качества обнаруживаются автоматически, а не из жалоб пользователей. Подключите свой сервис оценки один раз, и FailproofAI Observability будет автоматически выставлять оценки каждому завершённому запуску. Так что падение полезности или всплеск галлюцинаций становятся видны сразу же, ещё до того, как об этом узнает клиент.

<img src="https://mintcdn.com/exosphere/kH8rXaL6tCSRWEFy/agenteye/images/sessions-list.png?fit=max&auto=format&n=kH8rXaL6tCSRWEFy&q=85&s=0c4d38e49a3c0e2b02bba06b2db5a2b2" alt="Сетка Sessions с колонкой оценок: каждый запуск содержит статус оценки и цветные бейджи полезности, фактичности и эффективности использования инструментов" width="3200" height="2000" data-path="agenteye/images/sessions-list.png" />

*Каждый запуск в сетке sessions содержит свои оценки; красные, жёлтые и зелёные бейджи сразу выделяют слабые запуски без необходимости открывать транскрипты.*

## Прекратите проверять запуски вручную

Раньше вы выборочно проверяли несколько запусков и надеялись, что остальные работают нормально. Теперь каждый завершённый сеанс оценивается сразу же после завершения по интересующим вас параметрам: полезность, эффективность использования инструментов, фактичность, безопасность — всё, что определяет ваш стандарт качества. Вы задаёте ключи оценок; FailproofAI Observability сохраняет, отслеживает и отображает всё, что вернёт ваш оценщик. Ни один запуск не остаётся без оценки, и вы не узнаёте о регрессии из письма в поддержку.

Оценки отображаются в сетке sessions по адресу **`/<org-slug>/sessions`** (боковая панель → *observe* → *sessions*), по одному кластеру бейджей на строку. Хотите видеть только запуски, которые не прошли проверку? Отфильтруйте сетку по диапазону оценок, например полезность ниже 0.5, и получите ровно те запуски, которые стоит прочитать. Для просмотра оценок требуется разрешение `evaluations:read`.

## Узнайте, почему запуск получил низкую оценку

Число говорит вам, что запуск слабый; страница сеанса объясняет почему. Откройте любой запуск, и правая панель покажет краткое резюме, а затем для каждого параметра выведет шкалу оценок с обоснованием вашего оценщика, так что вы сможете перейти от «это получило 0.4 по фактичности» к точному утверждению, которое было неправильным, за секунды.

<img src="https://mintcdn.com/exosphere/kH8rXaL6tCSRWEFy/agenteye/images/session-detail.png?fit=max&auto=format&n=kH8rXaL6tCSRWEFy&q=85&s=32faaadcccf4e46964a8d1cfd84889e4" alt="Правая панель сеанса: краткое резюме оценки сверху, затем шкалы оценок для каждого параметра с рассуждениями, рядом с полной временной шкалой событий" width="3200" height="2000" data-path="agenteye/images/session-detail.png" />

*Подробный вид сеанса: резюме, шкалы оценок для каждого параметра и обоснование каждой оценки, прямо рядом с временной шкалой событий запуска.*

Запустили улучшенный оценщик или смотрите на запуск, который завершился до того, как мог быть оценён? Кнопка **re-evaluate** (доступна при наличии разрешения `evaluations:trigger`) переоценивает сеанс на месте и добавляет свежий результат в его временную шкалу, так что предыдущие оценки остаются видны как история. Вы найдёте её по адресу **`/<org-slug>/sessions/<session-id>`**.

## Отслеживайте качество во всём парке запусков

Один низкий запуск — это шум; целая группа, скользящая вниз — это сигнал. Сохранённые панели мониторинга преобразуют ваши оценки в тренд, который вы можете отслеживать с первого взгляда: средняя полезность на этой неделе по сравнению с прошлой, по агенту, по окружению.

<img src="https://mintcdn.com/exosphere/RgxYS1UZshqb4m7m/agenteye/images/dashboard-quality.png?fit=max&auto=format&n=RgxYS1UZshqb4m7m&q=85&s=0cbe5452995b2ff187f72b8978716bb3" alt="Панель мониторинга качества: столбцы среднего значения оценок для каждого параметра оценщика рядом с трендом во времени" width="2880" height="1800" data-path="agenteye/images/dashboard-quality.png" />

*Сохранённая панель мониторинга качества отслеживает ключи оценок, которые вы выбрали, так что медленный тренд становится очевиден задолго до того, как это перерастёт в инцидент.*

Панели мониторинга находятся по адресу **`/<org-slug>/dashboards`** (боковая панель → *analyze* → *dashboards*), общие для всей организации, и каждая карта агрегирует соответствующие сеансы: количество, среднее значение каждой отображаемой оценки и спарклайн тренда. «Open in sessions» переводит вас прямо на предварительно отфильтрованные запуски за любым числом. Для просмотра требуется разрешение `dashboards:read` плюс `evaluations:read`.

## Подключите оценщик один раз

Оценка является опциональной функцией и полностью отключена до тех пор, пока вы не указываете FailproofAI Observability на оценщик. Вы создаёте небольшой HTTP-сервис (Observability поставляется с работающим эталоном, который вы можете скопировать), устанавливаете два значения на своём сервере, и с этого момента каждый запуск будет оцениваться для вас. Полное пошаговое руководство, контракт оценки и SDK находятся в подробном руководстве.

## Связанное

* [Evaluation suite](/ru/agenteye/evaluation-suite): подключение оценщика, контракт оценки и SDK.
* [Sessions](/ru/agenteye/sessions): сетка запусков, где отображаются оценки.
* [Dashboards](/ru/agenteye/dashboards): сохраняйте и делитесь трендами качества со своей организацией.
* [Audits](/ru/agenteye/audits): другая автоматическая функция качества Observability для исследований между сеансами.
