Knowledge
Точно объясняет механизм, границы применимости, источники.
Как мы учим и проверяем
Освоить тему — значит уметь её объяснить, применить, решить задачу самостоятельно, найти ошибку и обосновать решение. Под каждое из этих действий есть свой способ проверки, а переход на следующий уровень открывает практический экзамен — гейт.
Чем проверяем
| Инструмент | Что проверяет | Как |
|---|---|---|
| DX Диагностика | стартовый уровень, право зачесть L2–L3 | тест + практическое задание |
| Q Квиз | знания | 8–15 вопросов, в том числе «найди ошибку в рассуждении»; порог 70 % |
| P Практическое задание | применение | короткий артефакт, проверка ментором по чек-листу |
| C Coding-задача | инженерию | автотесты + ревью кода |
| D Debugging-задача | диагностику | система с подброшенными дефектами: найти и закрыть тестом |
| AR Architecture review | обоснование решений | ADR + устная защита 15 минут |
| SR Security review | безопасность | threat model + демонстрация атак и защит |
| PA Оценка проекта | интеграцию | рубрика 8 измерений, с L7 — плюс ревью однокурсников |
| GX Гейт-экзамен | готовность к следующему уровню | практика с ограничением времени + устная часть |
| FX Финальная защита | уровень Global Elite | защита итогового проекта перед комиссией, один эксперт — внешний |
Рубрика из восьми измерений
Каждый проект оценивается по восьми измерениям от 0 до 4. Ноль — измерения нет, два — работает на «счастливом пути», четыре — обрабатывает краевые случаи и сравнено с альтернативами. На ранних уровнях вес у знания и применения, на поздних — у архитектуры и оценки качества.
Application
Решение работает на краевых случаях, а не только на демо.
Engineering
Воспроизводимость: запустил → получил те же числа → проверил; тесты, типизация, структура.
Architecture
Решения зафиксированы в ADR с альтернативами и компромиссами.
Security
Threat model, демонстрация атак и защит, остаточные риски названы.
Evaluation
Метрики релевантны, наборы воспроизводимы, улучшения подтверждены числом.
Cost
Стоимость посчитана, оптимизации подтверждены замером без потери качества.
Documentation
Пакет документации полный, ограничения названы честно.
Гейты
Pass достаточно
Средняя оценка от 2,5 из 4, ни одно измерение не ниже двух, ключевые компетенции уровня — на применимом уровне. Distinction (от 3,4) — отличие, но для перехода не нужно: перфекционизм не должен останавливать движение.
Пересдача
Не больше двух попыток подряд. После второй неудачи — диагностика пробелов по конкретным компетенциям, назначенный блок повторения, затем третья попытка.
Зачёт уровней
L2 и L3 можно зачесть, сдав их экзамен без прохождения модулей. Для L4 и выше — ревью портфолио с защитой, равной гейту. Для разработчиков есть Fast Track.
Что именно сдаётся на каждом уровне — на страницах уровней в программе.
Критические ошибки
Любая из них закрывает гейт при любых баллах. Ошибку исправляют и сдают затронутую часть повторно.
| Код | Ошибка | С уровня |
|---|---|---|
| CE-01 | Секреты (ключи, пароли) в репозитории или промптах | L2 |
| CE-02 | Отправка конфиденциальных или персональных данных во внешнюю модель без основания | L1 |
| CE-03 | Не может объяснить собственный код, сданный в гейт, в том числе сгенерированный AI | L3 |
| CE-04 | Результаты не воспроизводятся по README | L3 |
| CE-05 | Заявление об улучшении без измерения: «стало лучше» | L4 |
| CE-06 | Вывод модели исполняется или передаётся в SQL, HTML или shell без проверки | L5 |
| CE-07 | Production-проект без оценки качества или наблюдаемости | L6 |
| CE-08 | Известная непрочная защита от prompt injection выдаётся за надёжную; нет threat model | L6 |
| CE-09 | Персональные данные в логах и трассах | L6 |
| CE-10 | Использование модели или данных с нарушением лицензии | L6 |
| CE-11 | Агенту даны права на необратимые действия без подтверждения или ограничений | L7 |
| CE-12 | Фундаментальная ошибка в понимании: «LLM хранит факты как БД», «fine-tuning, чтобы добавить знания», «RAG = векторная БД» | L4 |
| CE-13 | Фабрикация результатов экспериментов или источников | любой |
AI-тьютор
В архитектуре программы заложен AI-тьютор — система, построенная по тем же правилам, которым учит курс: RAG по материалам с цитатами, модель знаний ученика, проверка кода в песочнице. Сейчас он проектируется. Главное правило уже определено: тьютор не выдаёт решение сразу.
- H1Подсказка. наводящий вопрос, ссылка на нужную компетенцию или раздел
- H2Разбор рассуждения. шаги рассуждения, каждый из которых ученик делает сам
- H3Частичное решение. фрагмент решения или исправление одного дефекта с объяснением — после двух неудачных попыток
- H4Полное решение. только для учебных упражнений после дедлайна или по решению ментора; никогда — для экзаменов и проектов в период сдачи
Решения о гейтах принимает человек: тьютор только рекомендует, ментор может переопределить его оценку.
Диагностика уровня
С какого уровня начать?
Оставьте контакты — свяжемся, зададим несколько вопросов об опыте и целях и подскажем уровень входа: с нуля, с середины программы или через Fast Track для разработчиков.
Или напишите: hello@superint.ru