Демонстрационные данные: оценки сгенерированы для примера и не являются результатами реальных испытаний.
ПРОТОКОЛ · испытание
Набор «Генерация и отладка кода (RU)», версия 1.0.0. Неизменяемый отпечаток запуска: f03fbdce35d8…
| Измерение | Балл (0–100) | 95% ДИ | Покрытие | Оценено задач |
|---|---|---|---|---|
| Качество | 78,7 | 65,6–91,8 | 100 % | 5 |
| Эффективность | 49,3 | 40,6–58,1 | 100 % | 5 |
| Покрытие | 74,3 | 63,1–85,5 | 100 % | 5 |
ДИ — 95% доверительный интервал среднего по задачам (t-интервал Стьюдента); не показывается, когда задач недостаточно для оценки. Скрытые задачи holdout входят в агрегаты, но не публикуются поштучно: ниже — только публичные и отладочные split'ы.
УЧЕБНАЯ ЗАДАЧА. Реализуйте на Python функцию format_tax_id(digits: str) -> str: принимает строку из 12 цифр и возвращает её в формате «XXXX XXXX XXXX»; для любой другой строки выбрасывает ValueError. Примеры: «123456789012» → «1234 5678 9012».
Демонстрационный синтетический ответ (не реальный вывод модели) на учебный кейс «Форматирование учебного идентификатора».
УЧЕБНАЯ ЗАДАЧА. Функция discount(amount, tier) должна давать: tier 1 → 5%, tier 2 → 10%, tier 3 → 15%; границы по сумме: от 1000 уч. руб. — tier 2, от 5000 — tier 3. Текущий код ошибочно включает 1000 в tier 1 (off-by-one). Найдите и исправьте дефект.
Локальный vLLM (демо)
локальная среда
Журнал запуска (демо)
log · text/plain
Файл хранится во внутреннем архиве
sha256: bec51cd07d3d65212cbcaf9f40d44602fcac0760927e12c8f1126646c2f58580
Снимок конфигурации (демо)
config · application/json
Файл хранится во внутреннем архиве
sha256: 4566227d8275f4ae978a7b04a733a7a2d8fea9f22b91ccd95be7acfe029d99f8
Рецензий пока не проводилось.
Неизменяемый отпечаток запуска:
f03fbdce35d85e61e3ce6096fef3ba4133187a7eafb78ee780fad16b92cf766d
Демонстрационный запуск: ответы и баллы синтетические, сгенерированы детерминированно для иллюстрации платформы; не являются реальным измерением.
Демонстрационный синтетический ответ (не реальный вывод модели) на учебный кейс «Отладка учебного расчёта скидки».
УЧЕБНАЯ ЗАДАЧА. Реализуйте на Python функцию parse_ru_date(text: str) -> str: принимает дату в формате «ДД.ММ.ГГГГ» и возвращает ISO 8601 «ГГГГ-ММ-ДД»; для некорректной строки выбрасывает ValueError. Пример: «05.09.2026» → «2026-09-05».
Демонстрационный синтетический ответ (не реальный вывод модели) на учебный кейс «Парсинг учебной даты».
УЧЕБНАЯ ЗАДАЧА. Реализуйте функцию plural(n: int, forms: tuple[str, str, str]) -> str для русских счётных форм: forms = («задача», «задачи», «задач»); правила: 1 → «задача», 2–4 → «задачи», 5–20 → «задач», исключения 11–14 → «задач». Пример: plural(3, forms) → «задачи».
Демонстрационный синтетический ответ (не реальный вывод модели) на учебный кейс «Учебная функция склонения счётных форм».