{"data":{"suite":{"slug":"ifeval","name":"IFEval","tagline":"Точность следования инструкции","description":"Точность следования инструкции","methodology":"Инструкции переводятся на русский с сохранением проверяемого ограничения (число слов, формат, запрет символов). Ограничения, неприменимые к русскому языку, из прогона исключаются, и это указывается в версии набора. Проверка автоматическая, судья не участвует.","limitations":"Прогоняется подмножество оригинала, а не весь набор: число задач указано рядом с результатом, и сравнивать наши числа с публикуемыми авторами напрямую нельзя. Приватного холдаута у адаптации нет. Часть ограничений оригинала завязана на английскую орфографию и при переводе теряет смысл, поэтому набор задач отличается от авторского.","contaminationPolicy":"Набор проверяет форму ответа, а не знание, поэтому запоминание помогает мало. Отдельных мер не принимается.","adaptationNote":"перевод на русский · часть ограничений неприменима","license":"apache-2.0","organization":{"slug":"google","name":"Google"},"domains":[{"slug":"general-reasoning","name":"Универсальные знания и рассуждение"}],"capabilities":[{"slug":"instruction-following","name":"Следование инструкциям"}],"modalities":[{"slug":"text","name":"Текст"}],"methods":[],"riskDimensions":[],"tags":[],"sources":[{"title":"Hugging Face — google/IFEval","url":"https://huggingface.co/datasets/google/IFEval","publisher":"google","edition":null,"validFrom":null,"validTo":null,"accessedAt":"2026-09-03T00:00:00.000Z","license":"apache-2.0"}]},"versions":[],"current":null}}