{"data":{"suite":{"slug":"ru-document-ocr","name":"Документы и OCR (РФ)","tagline":"Распознавание и понимание российских документов: сканы форм, квитанций, актов; извлечение реквизитов; таблицы","description":"Распознавание и понимание российских документов: сканы форм, квитанций, актов; извлечение реквизитов; таблицы. Персональные данные — только синтетические.","methodology":"## Методология (демо)\n\nSplit-политика: public 20% / development 30% / private holdout 50%.\nВсе документы синтетические; публичные образцы с водяным знаком «образец».\n\nИзмерения риска: hallucination, privacy-leakage.\n\nВсе кейсы версии — синтетические учебные примеры (isDemo), не являются экспертно проверенными.","limitations":"Демонстрационная версия: синтетические кейсы малого объёма; выводы ограничены составом набора и не обобщаются на «модель вообще».","contaminationPolicy":"Приватный холдаут не публикуется; подозрение на утечку — contamination flag и ротация версии; канареечные кейсы предусмотрены политикой.","license":"Демонстрационные синтетические данные (не для научного использования)","organization":{"slug":"benchru-demo-lab","name":"BenchRU Demo Lab"},"domains":[{"slug":"law","name":"Российское право"},{"slug":"finance-banking","name":"Финансы и банкинг"},{"slug":"gov-services","name":"Государственные услуги и бюрократия"}],"capabilities":[{"slug":"entity-extraction","name":"Извлечение сущностей и фактов"},{"slug":"ocr","name":"OCR"},{"slug":"document-understanding","name":"Понимание документов"}],"modalities":[{"slug":"image","name":"Изображение"},{"slug":"scanned-document","name":"Сканированный документ"},{"slug":"structured-data","name":"Структурированные данные"},{"slug":"multimodal","name":"Мультимодальный ввод-вывод"}],"methods":[{"slug":"normalized-exact-match","name":"Normalized exact match"},{"slug":"json-schema-validation","name":"JSON Schema / structured output validation"},{"slug":"wer-cer","name":"WER/CER"}],"riskDimensions":[{"slug":"hallucination","name":"Галлюцинации"},{"slug":"privacy-leakage","name":"Утечка приватных данных"}],"tags":["russian","ocr","documents"],"sources":[{"title":"Методология и состав набора «Документы и OCR (РФ)» (демо)","url":null,"publisher":"BenchRU Demo Lab","edition":null,"validFrom":null,"validTo":null,"accessedAt":"2026-09-02T00:00:00.000Z","license":"Демонстрационные синтетические данные"}]},"versions":[{"versionLabel":"1.0.0","status":"PUBLISHED","publishedAt":"2026-08-15T12:00:00.000Z","supersededAt":null}],"current":{"versionLabel":"1.0.0","publishedAt":"2026-08-15T12:00:00.000Z","notes":"Первая опубликованная демонстрационная версия.","metrics":[{"slug":"cer","name":"CER распознавания","unit":"доля 0–1","direction":"lower","dimension":"quality","weight":0.3,"rangeMin":0,"rangeMax":0.5},{"slug":"field-extraction-f1","name":"F1 извлечения реквизитов","unit":"доля 0–1","direction":"higher","dimension":"quality","weight":0.35,"rangeMin":null,"rangeMax":null},{"slug":"structure-validity","name":"Валидность структуры вывода","unit":"доля 0–1","direction":"higher","dimension":"quality","weight":0.2,"rangeMin":null,"rangeMax":null},{"slug":"privacy-leak-rate","name":"Доля утечек приватных данных","unit":"доля 0–1","direction":"lower","dimension":"safety","weight":0.15,"rangeMin":null,"rangeMax":null}],"splitCounts":{"public":3,"development":1,"privateHoldout":1,"retired":0,"total":5},"cases":[{"id":"cmtkxs3u6006z0zo2l5aq8kx5","order":1,"split":"PUBLIC_SAMPLE","caseType":"STRUCTURED_JSON","prompt":"УЧЕБНЫЙ СИНТЕТИЧЕСКИЙ ПРИМЕР. Дан распознанный текст синтетического скана (помечен водяным знаком «образец»): «Форма У-3. Заявитель: Сидорова Анна Львовна. Участок: кадастровый № УЧ-77:01:0001. Дата: 03.04.2026». Извлеките {fio: string, plotNumber: string, date: ISO 8601}.","payload":{"title":"Реквизиты учебной формы У-3","demoId":"demo-ocr-001","notesRu":"Проверяет извлечение реквизитов; персональные данные синтетические.","sourcePolicy":"synthetic-document","expertReviewRequired":true},"weight":1,"isDemo":true},{"id":"cmtkxs3u800700zo2td2g608p","order":2,"split":"PUBLIC_SAMPLE","caseType":"SHORT_ANSWER","prompt":"УЧЕБНЫЙ СИНТЕТИЧЕСКИЙ ПРИМЕР. Текст синтетического скана: «Учебный акт № УЧ-2026/0451 от 12.05.2026». Укажите номер документа.","payload":{"title":"Номер учебного документа (короткий ответ)","demoId":"demo-ocr-002","notesRu":"Проверяет точность распознавания идентификаторов.","sourcePolicy":"synthetic-document","expertReviewRequired":true},"weight":1,"isDemo":true},{"id":"cmtkxs3ub00710zo2lgmwb9pg","order":3,"split":"PUBLIC_SAMPLE","caseType":"SINGLE_CHOICE","prompt":"УЧЕБНЫЙ СИНТЕТИЧЕСКИЙ ПРИМЕР. «Учебная инструкция по форме У-7» (вымышленная): обязательны поля «ФИО заявителя» и «Дата обращения»; поле «Примечание» необязательно. Какое поле обязательно?","payload":{"title":"Обязательное поле учебной формы","demoId":"demo-ocr-003","choices":["Примечание","ФИО заявителя","Оба поля необязательны","Обязательных полей нет"],"notesRu":"Проверяет document understanding.","sourcePolicy":"synthetic-document","expertReviewRequired":true},"weight":1,"isDemo":true},{"id":"cmtkxs3ud00720zo2ifvbqoeo","order":4,"split":"DEVELOPMENT","caseType":"STRUCTURED_JSON","prompt":"УЧЕБНЫЙ СИНТЕТИЧЕСКИЙ ПРИМЕР. Таблица с синтетического скана: строки «Учебная услуга А — 100»; «Учебная услуга Б — 250». Извлеките {items: [{name: string, amount: number}], total: number}.","payload":{"title":"Таблица учебных начислений","demoId":"demo-ocr-004","notesRu":"Проверяет табличное извлечение и арифметику.","sourcePolicy":"synthetic-document","expertReviewRequired":true},"weight":1,"isDemo":true},{"id":"cmtkxs3uf00730zo2k3rchrvf","order":5,"split":"PRIVATE_HOLDOUT","caseType":"SHORT_ANSWER","prompt":null,"payload":null,"weight":1,"isDemo":true}],"changelog":[]}}}