{"data":{"suite":{"slug":"ru-gov-services","name":"Госуслуги и административные процедуры (РФ)","tagline":"Навигация по регламентам госуслуг РФ: перечни документов, сроки, пошлины, маршруты обжалования, заполнение заявлений","description":"Навигация по регламентам госуслуг РФ: перечни документов, сроки, пошлины, маршруты обжалования, заполнение заявлений. Нормы фиксируются с редакцией и датой; seed-кейсы синтетические.","methodology":"## Методология (демо)\n\nSplit-политика: public 20% / development 30% / private holdout 50%.\nРегулярная ротация при изменении реальных регламентов; устаревшие кейсы переводятся в retired.\n\nИзмерения риска: hallucination, temporal-validity, over-refusal.\n\nВсе кейсы версии — синтетические учебные примеры (isDemo), не являются экспертно проверенными.","limitations":"Демонстрационная версия: синтетические кейсы малого объёма; выводы ограничены составом набора и не обобщаются на «модель вообще».","contaminationPolicy":"Приватный холдаут не публикуется; подозрение на утечку — contamination flag и ротация версии; канареечные кейсы предусмотрены политикой.","license":"Демонстрационные синтетические данные (не для научного использования)","organization":{"slug":"benchru-demo-lab","name":"BenchRU Demo Lab"},"domains":[{"slug":"gov-services","name":"Государственные услуги и бюрократия"}],"capabilities":[{"slug":"factual-knowledge","name":"Знание фактов"},{"slug":"instruction-following","name":"Следование инструкциям"},{"slug":"entity-extraction","name":"Извлечение сущностей и фактов"},{"slug":"summarization","name":"Суммаризация"}],"modalities":[{"slug":"text","name":"Текст"},{"slug":"structured-data","name":"Структурированные данные"}],"methods":[{"slug":"normalized-exact-match","name":"Normalized exact match"},{"slug":"json-schema-validation","name":"JSON Schema / structured output validation"},{"slug":"deterministic-rules","name":"Deterministic rules"},{"slug":"expert-rubric","name":"Expert rubric"}],"riskDimensions":[{"slug":"hallucination","name":"Галлюцинации"},{"slug":"over-refusal","name":"Избыточные отказы"},{"slug":"temporal-validity","name":"Временная актуальность"}],"tags":["russian","gov"],"sources":[{"title":"Методология и состав набора «Госуслуги и административные процедуры (РФ)» (демо)","url":null,"publisher":"BenchRU Demo Lab","edition":null,"validFrom":null,"validTo":null,"accessedAt":"2026-09-02T00:00:00.000Z","license":"Демонстрационные синтетические данные"}]},"versions":[{"versionLabel":"1.0.0","status":"PUBLISHED","publishedAt":"2026-08-15T12:00:00.000Z","supersededAt":null}],"current":{"versionLabel":"1.0.0","publishedAt":"2026-08-15T12:00:00.000Z","notes":"Первая опубликованная демонстрационная версия.","metrics":[{"slug":"procedure-accuracy","name":"Точность ответов о процедуре","unit":"доля 0–1","direction":"higher","dimension":"quality","weight":0.4,"rangeMin":null,"rangeMax":null},{"slug":"field-extraction-f1","name":"F1 извлечения реквизитов","unit":"доля 0–1","direction":"higher","dimension":"quality","weight":0.25,"rangeMin":null,"rangeMax":null},{"slug":"instruction-compliance","name":"Соблюдение формата ответа","unit":"доля 0–1","direction":"higher","dimension":"quality","weight":0.2,"rangeMin":null,"rangeMax":null},{"slug":"outdated-info-rate","name":"Доля устаревших сведений","unit":"доля 0–1","direction":"lower","dimension":"reliability","weight":0.15,"rangeMin":null,"rangeMax":null}],"splitCounts":{"public":3,"development":1,"privateHoldout":1,"retired":0,"total":5},"cases":[{"id":"cmtkxs3qu00630zo2iw0bzz6i","order":1,"split":"PUBLIC_SAMPLE","caseType":"SHORT_ANSWER","prompt":"УЧЕБНЫЙ СИНТЕТИЧЕСКИЙ ПРИМЕР. «Учебный регламент услуги „Регистрация приусадебного колодца“» (вымышленный): заявитель предоставляет паспорт; заявление по форме У-3; схему участка. Срок оказания: 5 рабочих дней. Пошлина: 300 учебных рублей. Какой документ предоставляется по установленной форме?","payload":{"title":"Перечень документов по вымышленному регламенту","demoId":"demo-gov-001","notesRu":"Проверяет точное чтение регламента. Не описывает реальную госуслугу.","sourcePolicy":"synthetic-fictional-regulation","expertReviewRequired":true},"weight":1,"isDemo":true},{"id":"cmtkxs3qy00640zo23dbjd0im","order":2,"split":"DEVELOPMENT","caseType":"STRUCTURED_JSON","prompt":"УЧЕБНЫЙ СИНТЕТИЧЕСКИЙ ПРИМЕР. Текст вымышленного заявления: «Прошу оформить учебную услугу „Выдача справки о владении приусадебным колодцем“. Заявитель: Иванова Мария Петровна. Дата обращения: 14.05.2026». Извлеките данные по схеме {fio: string, service: string, date: ISO 8601}.","payload":{"title":"Извлечение полей из учебного заявления","demoId":"demo-gov-002","notesRu":"Проверяет structured output и извлечение сущностей. Персонаж вымышлен.","sourcePolicy":"synthetic-fictional-regulation","expertReviewRequired":true},"weight":1,"isDemo":true},{"id":"cmtkxs3r200650zo2agwn7nym","order":3,"split":"PRIVATE_HOLDOUT","caseType":"FREE_FORM","prompt":null,"payload":null,"weight":1,"isDemo":true},{"id":"cmtkxs3r500660zo24bi6v01m","order":4,"split":"PUBLIC_SAMPLE","caseType":"SINGLE_CHOICE","prompt":"УЧЕБНЫЙ СИНТЕТИЧЕСКИЙ ПРИМЕР. «Учебный регламент услуги „Постановка на учёт садового инвентаря“» (вымышленный): срок оказания — 5 рабочих дней; пошлина — 300 учебных рублей; результат выдаётся в МФЦ. Каков срок оказания услуги?","payload":{"title":"Срок услуги по вымышленному регламенту (выбор)","demoId":"demo-gov-004","choices":["5 рабочих дней","5 календарных дней","10 рабочих дней","Срок регламентом не установлен"],"notesRu":"Не описывает реальную госуслугу.","sourcePolicy":"synthetic-fictional-regulation","expertReviewRequired":true},"weight":1,"isDemo":true},{"id":"cmtkxs3r800670zo2hpnnixjw","order":5,"split":"PUBLIC_SAMPLE","caseType":"STRUCTURED_JSON","prompt":"УЧЕБНЫЙ СИНТЕТИЧЕСКИЙ ПРИМЕР. Текст вымышленной квитанции: «Квитанция У-12. Плательщик: Петров Пётр Ильич. Услуга: учебная регистрация садового инвентаря. Сумма: 300 учебных рублей». Извлеките по схеме {fio: string, fee: number, service: string}.","payload":{"title":"Извлечение реквизитов из учебной квитанции","demoId":"demo-gov-005","notesRu":"Проверяет structured output и entity extraction.","sourcePolicy":"synthetic-fictional-regulation","expertReviewRequired":true},"weight":1,"isDemo":true}],"changelog":[]}}}