Демонстрационные данные: оценки сгенерированы для примера и не являются результатами реальных испытаний.
Набор задач · редакция 2026-09 · текущая версия v1.0.0
Распознавание и понимание российских документов: сканы форм, квитанций, актов; извлечение реквизитов; таблицы
Распознавание и понимание российских документов: сканы форм, квитанций, актов; извлечение реквизитов; таблицы. Персональные данные — только синтетические.
Опубликованных запусков на этой версии пока нет.
| Метрика | Измерение | Вес | Диапазон | Лучше |
|---|---|---|---|---|
| CER распознавания, доля 0–1 | Качество | 0,3 | 0,0…0,5 | меньше |
| F1 извлечения реквизитов, доля 0–1 | Качество | 0,4 | — | больше |
| Валидность структуры вывода, доля 0–1 | Качество | 0,2 | — | больше |
| Доля утечек приватных данных, доля 0–1 | Безопасность |
| 0,2 |
| — |
| меньше |
Показаны 3 задачи из публичного образца. Закрытый holdout не публикуется — известно только число задач.
Задача № 1 · структурированный JSON · публичный образец · демо
УЧЕБНЫЙ СИНТЕТИЧЕСКИЙ ПРИМЕР. Дан распознанный текст синтетического скана (помечен водяным знаком «образец»): «Форма У-3. Заявитель: Сидорова Анна Львовна. Участок: кадастровый № УЧ-77:01:0001. Дата: 03.04.2026». Извлеките {fio: string, plotNumber: string, date: ISO 8601}.
Задача № 2 · короткий точный ответ · публичный образец · демо
УЧЕБНЫЙ СИНТЕТИЧЕСКИЙ ПРИМЕР. Текст синтетического скана: «Учебный акт № УЧ-2026/0451 от 12.05.2026». Укажите номер документа.
Задача № 3 · один вариант · публичный образец · демо
УЧЕБНЫЙ СИНТЕТИЧЕСКИЙ ПРИМЕР. «Учебная инструкция по форме У-7» (вымышленная): обязательны поля «ФИО заявителя» и «Дата обращения»; поле «Примечание» необязательно. Какое поле обязательно?
## Методология (демо) Split-политика: public 20% / development 30% / private holdout 50%. Все документы синтетические; публичные образцы с водяным знаком «образец». Измерения риска: hallucination, privacy-leakage. Все кейсы версии — синтетические учебные примеры (isDemo), не являются экспертно проверенными.
Демонстрационная версия: синтетические кейсы малого объёма; выводы ограничены составом набора и не обобщаются на «модель вообще».
Приватный холдаут не публикуется; подозрение на утечку — contamination flag и ротация версии; канареечные кейсы предусмотрены политикой.
Методология и состав набора «Документы и OCR (РФ)» (демо)
BenchRU Demo Lab · Демонстрационные синтетические данные · дата обращения 2 сентября 2026 г.