Результаты человеческой разметки

Seychelles · prompt 2.3.10 · raw story classification

F1 сравнивает AI-предсказание пары с человеческой меткой на одной и той же размеченной выборке.

Работает на localhost
← ПроектНовая разметка

Сессии и метрики

Охват оценки

В run учтено 2,565 назначений сюжета из 3,410 записей с исходным relevant=да и непустым текстом: 200 AI-положительных пар из 37,617 возможных и 200 AI-отрицательных пар из 3,250,713 возможных (seed 23102026). Вне выборки: нерелевантные, пустые, ошибочные и ещё не классифицированные записи; исходно нерелевантных записей пропущено 46,669. F1 отражает только эту сбалансированную выборку.

тест 2

Обновлено 19.11.2026, 08:59:53 · 400 групп

Открыть сессию
31.7%F1
26.5%precision
39.6%recall
400размеченных пар в метриках

TP 53 · FP 147 · FN 81 · TN 119 · неопределённых 0

тест

Обновлено 19.11.2026, 08:49:52 · 400 групп

Открыть сессию
72.7%F1
57.1%precision
100.0%recall
11размеченных пар в метриках

TP 4 · FP 3 · FN 0 · TN 4 · неопределённых 0