Каталог · редакция 2026-09
Наборы задач с версионированием, открытой методологией и честными ограничениями. Ранжирование ведётся внутри конкретной версии набора.
Область «Российское право»: 3 набора
Набор · Российское право, Финансы и банкинг, Государственные услуги и бюрократия
Распознавание и понимание российских документов: сканы форм, квитанций, актов; извлечение реквизитов; таблицы
v1.0.0 · 5 задач · 4 метрики · 0 запусков · обновлён 15 августа 2026 г.
Набор · Российское право
Оценка правового рассуждения в юрисдикции РФ: знание нормы, применение нормы к фактам, issue spotting, толкование, расчёт процессуальных сроков, анализ судебных документов, корректный отказ при недостатке данных
v1.0.0 · 5 задач · 5 метрик · 2 запуска · обновлён 15 августа 2026 г.
Набор · Российское право, Государственные услуги и бюрократия, Универсальные знания и рассуждение
Оценка retrieval-augmented систем на русскоязычных корпусах: корректность ответа, полнота и точность retrieval, точность/полнота цитат, верность источнику (faithfulness), доля неподтверждённых утверждений, свежесть и версия документа, устойчивость к prompt injection внутри источника
v1.0.0 · 5 задач · 6 метрик · 1 запуск · обновлён 15 августа 2026 г.