За методикой стоит диссертационное исследование, а не набор приёмов. Здесь лежит его аппарат: теоретическая рамка с указанием, откуда взято каждое положение, расширенные аннотации пяти статей и собственное исследование на первичных данных. Всё, что утверждается на других страницах сайта, должно прослеживаться сюда.
Автор методики и депонент — Актуганов Антон Николаевич. Научное руководство исследованием — Блинов Владимир Игоревич, доктор педагогических наук, профессор. Профиль научной специальности — 5.8.7.
Научный раздел отличается от рекламного тем, что в нём заранее объявлено, чего в нём не будет. Четыре правила ниже действуют без исключений.
Если первоисточник найти не удалось, показатель снимается — даже если он выглядит выигрышно. Часть международных сопоставлений, которые ходят по отрасли, отсюда убрана именно по этой причине.
Анкета, где человек сам ставит себе балл до и после, измеряет самооценку, а не компетенцию. Собственная методика утверждает, что самооценка систематически завышена, поэтому свои же анкетные цифры мы подписываем честно.
До выхода в журнале публикуется расширенная аннотация: задача, метод, результат и перечень источников. Выложенный полный текст редакции считают предварительной публикацией и снимают статью с рассмотрения.
В исследованиях публикуются распределения ответов, а не люди. Имена, должности и места работы участников опросов и интервью не раскрываются.
Пять статей закрывают четыре положения исследования: триадная модель факторов, система принципов управляемости, технология проектирования и метод оценки. Шестой материал — собственный опрос, с которого начиналась эмпирика.
Первичные данные: 580 анкет сотрудников колледжей. 59,3% относят себя к начинающим, 154 человека не используют ИИ в работе вообще.
Опрос измеряет декларируемый уровень, а не фактический. Ценность этих данных в том, что они задают верхнюю границу самооценки, с которой затем сравнивается уровень, подтверждаемый следами деятельности.
Методика не выведена из практики задним числом. Каждая теория в рамке выполняет определённую функцию: одна объясняет механизм, другая — направление, третья — как измерять. Ниже — что именно делает каждая и где это можно прочитать.
Отвечает на вопрос, почему профессиональное сознание нельзя изменить напрямую, убеждением или приказом, и что именно его меняет.
Отвечает на вопрос, почему возврат к участнику через три месяца — штатный этап работы, а не добрая воля исполнителя.
Шкала прикладывается к каждой нашей работе и к каждому утверждению об эффекте — см. раздел «Что чем доказано» ниже.
Отвечает на вопрос, на каком основании разнородные показатели сворачиваются в одно число Индекса Цифровой Зрелости. Дисциплина отечественная, что для профиля 5.8.7 удобнее западных шкал.
Шкала Киркпатрика разводит четыре разных утверждения, которые в отрасли принято смешивать. Высокая оценка участников означает «понравилось», а не «подействовало»: программа может иметь отличную реакцию и нулевой эффект. Поэтому у каждой нашей работы указан уровень, на котором результат подтверждён, — включая те случаи, где он подтверждён слабо.
| Уровень | Что проверяется | Чем и когда | Есть ли данные |
|---|---|---|---|
| 1. Реакция | Как участники оценили работу | опрос участников, в том числе NPS. Это мнение о сессии, а не её эффектв день сессии | есть |
| 2. Научение | Изменилась ли готовность решать задачи нового типа | анкета до и после: участник сам оценивает свою готовность по шкале. Это самооценка, а не аттестация и не внешний замер компетенцийв день сессии | есть |
| 3. Поведение | Применяет ли участник инструменты в реальной работе | отложенный опрос из четырёх вопросов и продукты деятельности за этот период. Ключевой вопрос — назвать инструмент из сессии, не подглядываяокно 60–180 дней, целевая точка — 90-й день | нет |
| 4. Результат | Что организация стала делать лучше | артефактно-следовая оценка по четырём осям, включая ось времениот полугода | частично |
Прирост, который участник ставит себе сам в анкете до и после, корректно читается так: «средняя самооценка готовности выросла с такого-то значения до такого-то», а не «компетенции выросли на столько-то процентов». Разница принципиальная: собственная методика доказывает, что самооценка систематически превышает уровень, подтверждаемый следами деятельности. Значит, и свои цифры самооценки надо называть своим именем.
Ни один отложенный замер третьего уровня пока не завершён: контур описан, окно по ряду работ открыто, данных нет. Пока их нет, ни одна работа не объявляется доказанной на уровне поведения. Количественные показатели статей — величина разрыва между самооценкой и артефактно подтверждённым уровнем, временные лаги между факторами — на сайте не публикуются, пока не завершена обработка полного массива.
Результат не считается доказанным, пока не указано, чем именно он закрыт — впечатлением участников или их поведением через три месяца.
Раздел не декоративный. Триада задаёт, что вообще считать трансформацией; артефактно-следовая оценка — чем подтверждается результат в каждой работе; двухконтурная модель объясняет, почему сопротивление коллектива чаще оказывается отставанием, а не отказом. Проверить это можно на самих работах.
