Восьминедельный классный протокол с контрольной группой листа ожидания для самостоятельного изучения английского языка студентами университетов

Краткое содержание

В данной статье по методологии описывается 8-недельный классный протокол с контрольной группой из списка ожидания для внедрения, мониторинга и оценки саморегулируемого изучения английского языка студентами университетов.

Аннотация

Саморегулируемое обучение является важным компонентом успешного изучения языка, однако вмешательства в условиях класса часто трудно воспроизвести, если недостаточно подробно описаны учебные мероприятия, результаты работы студентов, контрольные условия, процедуры обеспечения точности выполнения и правила оценки. В данной статье по методологии представлен 8-недельный протокол обучения в классе с использованием контрольного списка ожидания для внедрения и оценки саморегулируемого изучения английского языка студентами университетов. Студенты распределяются либо в группу по протоколу структурированного саморегулируемого изучения английского языка, либо в группу обычного обучения английскому языку с отложенным доступом к материалам вмешательства. Хотя каждая неделя имеет определенную учебную направленность, протокол неоднократно включает циклический процесс саморегулируемого обучения, состоящий из пересмотра целей, использования стратегий, мониторинга, рефлексии и корректировки. Еженедельные мероприятия включают самодиагностику, постановку измеримых целей, стратегическое планирование, практику использования лексических стратегий и стратегий чтения, пересмотр письменных работ, ведение дневников обучения, взаимную обратную связь и итоговое планирование переноса навыков. Каждое занятие предполагает создание предопределенного студенческого продукта, что позволяет документировать точность выполнения, посещаемость, заполнение рабочих листов, соблюдение протокола, отклонения от него и процедуры контроля контаминации. Протокол сочетает результаты анкетирования с показателями успеваемости, включая достижения в английском языке и качество письменных работ, а также определяет базовую оценку, стратифицированную блоковую рандомизацию, «слепое» оценивание письменных работ, процедуры параллельного тестирования, правила обработки пропущенных данных и скорректированный статистический анализ. Репрезентативные результаты демонстрируют, как данный протокол может быть реализован, контролируем и проанализирован в условиях класса. Эти результаты представлены как иллюстративные данные по внедрению и исходам, а не как обобщаемые доказательства эффективности вмешательства. Данный протокол подходит для исследователей и преподавателей, которым требуется практическая, этически приемлемая и воспроизводимая процедура изучения саморегулируемого изучения английского языка в высшем образовании.

Введение

Саморегулируемое обучение стало важной основой для понимания того, почему учащиеся, находящиеся в схожих условиях обучения, часто демонстрируют разные траектории обучения. В рамках этого подхода учащиеся рассматриваются не как пассивные получатели инструкций, а как активные участники, которые ставят цели, выбирают стратегии, следят за своим прогрессом и корректируют свое поведение при изменении условий обучения. Зиммерман описал саморегулируемых учащихся как студентов, которые активно используют предварительное планирование, контроль исполнения и саморефлексию для управления процессом обучения, а не полагаются исключительно на внешнее руководство¹. Пинтрич далее подчеркнул, что саморегуляция включает мониторинг и контроль когнитивных процессов, мотивации, поведения и контекста, что делает этот конструкт особенно актуальным для изучения языков в условиях классного обучения, где учащиеся должны координировать свои усилия, время, использование стратегий и обратную связь².

Значимость саморегуляции особенно очевидна при изучении английского языка в университете. Многие студенты осознают необходимость расширения словарного запаса, улучшения навыков чтения, письма или общения, однако их действия в процессе обучения остаются разрозненными. Студент может намереваться «учиться усерднее», но это намерение часто не превращается в измеримую цель, запланированную задачу, контролируемое учебное поведение или скорректированную стратегию после получения обратной связи. Исследования стратегий изучения языков давно показали, что учащиеся различаются не только объемом затрачиваемых усилий, но и тем, как они выбирают, комбинируют и оценивают стратегии при выполнении различных заданий³. Однако языковые курсы не всегда предоставляют воспроизводимую структуру, посредством которой использование таких стратегий можно было бы преподавать, наблюдать, документировать и сравнивать с обычным классным обучением. Это создает методологическую проблему: исследователи могут заявлять об изучении саморегулируемого обучения, но сама процедура обучения может остаться слишком общей для воспроизведения в другом классе.

В существующих исследованиях была разъяснена значимость измерения и обучения саморегулируемому изучению языка. Валидированные работы по измерению стратегий саморегулируемого изучения иностранного языка показали, что данный конструкт может быть организован в виде идентифицируемых измерений стратегий, а не рассматриваться как одна неопределенная привычка к обучению⁴. Исследования письма на втором языке также продемонстрировали, что обучение саморегулируемым стратегиям может способствовать развитию навыков письма, делая этапы планирования, составления черновика, редактирования и рефлексии более явными в рамках классной практики⁵. Исследования вмешательств в системе высшего образования дополнительно указывают на то, что эффект поддержки саморегулируемого обучения зависит от того, как именно реализуется вмешательство, а не только от наличия термина «саморегулируемое обучение» в программе курса⁶. Следовательно, протокол проведения занятий должен четко определять, что именно делают студенты, когда они это делают, какие результаты они получают, чем отличается контрольная группа и каким образом исследователи подтверждают, что процедура была реализована в соответствии с замыслом.

В исследованиях саморегулируемого обучения в условиях класса сохраняется ряд ограничений. Некоторые работы в значительной степени опираются на послеинтервенционные опросники, которые могут демонстрировать субъективно воспринимаемые изменения, но дают ограниченную информацию о еженедельном поведении в процессе обучения, которое привело к этим изменениям. В других работах описывается обучение стратегиям, однако приводится недостаточно сведений о распределении времени на уроках, структуре рабочих листов, действиях контрольной группы, мониторинге точности реализации, порогах соблюдения протокола или мерах по предотвращению взаимного влияния групп. В контексте изучения языков эта проблема особенно актуальна, поскольку использование стратегий, мотивация, уровень тревожности, навыки письма и успеваемость могут меняться с разной скоростью. Обзоры саморегулируемого обучения в онлайн-среде и в системе высшего образования подчеркнули необходимость более тесного согласования между дизайном интервенции, доказательствами процесса обучения и измерением результатов⁷. Без такого согласования трудно определить, является ли слабый или противоречивый результат следствием неэффективного теоретического подхода, некачественной реализации, неадекватного измерения или взаимного влияния групп исследования.

Данная статья по методам призвана восполнить этот пробел, представляя самостоятельное изучение английского языка в виде 8-недельного протокола классного обучения с контрольной группой листа ожидания и заранее определенными еженедельными результатами. Протокол организован не как единая линейная последовательность, в которой учащиеся завершают одну фазу саморегуляции и затем окончательно переходят к следующей. Вместо этого каждая неделя имеет основной учебный акцент при сохранении повторяющегося цикла самостоятельного обучения: учащиеся пересматривают или уточняют цель, применяют стратегию к заданию по изучению английского языка, контролируют свои успехи, размышляют о результате и вносят коррективы для следующего учебного мероприятия. Такая структура основана на практическом применении обучения стратегиям саморегуляции: учащимся необходимы повторяющиеся возможности для установления связи между целью, стратегией, действием, обратной связью и пересмотром⁸. Еженедельный акцент постепенно смещается от самодиагностики и постановки целей к планированию, использованию стратегий, редактированию письменных работ, мониторингу, использованию обратной связи и самостоятельному переносу навыков, однако лежащий в основе цикл повторяется на протяжении всего 8-недельного периода.

Протокол включает контрольное условие с использованием списка ожидания для обеспечения этичного и методологически интерпретируемого внедрения в учебном процессе. Учащиеся в контрольной группе продолжают обычное изучение английского языка в течение 8-недельного периода и получают доступ к рабочим листам по саморегулируемому обучению после проведения итогового тестирования. Такой дизайн позволяет сравнить структурированный протокол с обычным обучением, снижая при этом этические риски, связанные с ограничением доступа к потенциально полезным учебным материалам. Поскольку участники могут быть распределены случайным образом внутри одного и того же класса, протокол включает процедуры контроля контаминации, в том числе раздельные периоды активности или рабочие зоны, ограниченное распределение рабочих листов, еженедельные журналы содержания контрольных классов и отложенный выпуск материалов вмешательства. Эти процедуры не устраняют полностью риск неформального общения между учащимися, но делают контаминацию явной и документируемой при интерпретации репрезентативных результатов.

В данном протоколе используются как результаты самоотчетов, так и показатели успеваемости. Саморегулируемое обучение, самоэффективность, мотивация и тревожность оцениваются с помощью структурированных опросников, в то время как успеваемость по английскому языку и результаты письменных работ служат практическим подтверждением изменений в процессе обучения. Такое сочетание выбрано намеренно. Самоэффективность тесно связана с готовностью студентов инициировать и поддерживать учебное поведение, однако одна лишь уверенность в себе не тождественна улучшению успеваемости⁹. Анализ письменных работ также полезен, поскольку он требует от студентов планирования, организации идей, выбора языковых средств, исправления ошибок и соответствия требованиям задания. Исследования обучения стратегиям письма в условиях колледжа показали, что саморегуляция может быть интегрирована в процессы планирования и редактирования, а не рассматриваться как отдельный урок по развитию навыков обучения¹⁰. Таким образом, настоящий протокол связывает мероприятия по саморегулируемому обучению с наблюдаемыми задачами по изучению английского языка.

Данный метод повышает воспроизводимость за счет процедурного контроля. Базовая оценка проводится до рандомизации. Распределение стратифицировано по классу и исходному уровню подготовки. Группа вмешательства получает стандартный еженедельный пакет рабочих листов, в то время как контрольная группа списка ожидания продолжает обычное обучение без доступа к структурированным материалам по саморегулируемому обучению до проведения итогового теста. Письменные работы оцениваются в «слепом» режиме. На протяжении 8-недельного периода фиксируются показатели точности выполнения (fidelity), посещаемости, заполнения рабочих листов, ведения дневников, отклонения от протокола и показатели контроля контаминации. Эти элементы соответствуют общим требованиям к отчетности по рандомизированным исследованиям, согласно которым поток участников, распределение, последующее наблюдение и аналитический отбор должны быть прозрачными¹¹. В рамках школьных исследований такие контроли имеют не только административное значение. Они помогают отличить применение структурированного протокола обучения от обычного итогового анализа учителя, мотивации учащихся или неформального обмена материалами между группами.

Общая цель данной статьи — представить воспроизводимый классный протокол для внедрения, мониторинга и оценки самостоятельного обучения английскому языку среди студентов университетов. Протокол предназначен для исследователей и преподавателей, которым необходим практический метод, который может быть этично внедрен в реальных группах с получением интерпретируемых данных о реализации и результатах. Он наиболее подходит для университетских курсов английского языка, в рамках которых студенты могут еженедельно заполнять рабочие листы, проходить вводные и итоговые опросники, тесты на уровень владения английским языком и выполнять письменные задания. Протокол также может быть адаптирован для смешанного или онлайн-обучения при условии обеспечения доступа к рабочим листам, соблюдения сроков, мониторинга точности выполнения, контроля контаминации и безопасности данных. Современные данные о самостоятельном изучении языка с использованием технологий свидетельствуют о растущем интересе к таким адаптивным процедурам, но также указывают на необходимость в более четких структурах вмешательства и более последовательной отчетности о результатах¹².

Протокол

Практическое применение в учебном классе, описанное в данной статье, было рассмотрено и одобрено Комитетом по этике иностранных языков Университета Чжэнчжоу Шэнди (номер одобрения 20260606) 3 июня 2026 года. Перед сбором данных от всех участников было получено письменное информированное согласие. Участие было добровольным, и студенты могли прекратить участие в любое время без влияния на их оценки по курсу. Контрольная группа из списка ожидания получила доступ к материалам по самостоятельному обучению после проведения итогового тестирования. Преподаватель, выставляющий оценки по курсу, не имел доступа к индивидуальным ответам на вопросники, записям в дневниках, решениям о согласии или исследовательским данным на уровне отдельных участников до окончательного выставления оценок по курсу.

1. Подготовка к классному эксперименту

1. Выберите курсы английского языка для студентов бакалавриата с сопоставимыми учебными программами, графиками обучения, форматами оценки, еженедельным временем контактных занятий, требованиями к домашним заданиям и академическими календарями. Определите дизайн исследования как рандомизированный протокол обучения в классе с контрольной группой из списка ожидания на индивидуальном уровне для студентов университетов, зачисленных на курсы изучения английского языка.
2. Используйте диаграмму потоков участников для планирования скрининга, получения согласия, исходной оценки, рандомизации, проведения вмешательства, итогового тестирования и критериев включения в анализ до начала набора участников (Рисунок 1).
3. Организуйте 8-недельный протокол на основе повторяющегося цикла саморегулируемого обучения. Каждую неделю студенты пересматривают или уточняют цель, применяют стратегию к заданию по изучению английского языка, контролируют выполнение, анализируют результат и фиксируют корректировку для следующего задания. Основывайте последовательность на циклических моделях саморегулируемого обучения, в которых учащиеся последовательно проходят этапы предварительного обдумывания, мониторинга выполнения и саморефлексии13,14.
   КРИТИЧЕСКИЙ ЭТАП: Не проводите протокол как единую линейную последовательность, в которой каждая фаза саморегуляции выполняется только один раз. Еженедельная тема может меняться, но пересмотр целей, использование стратегий, мониторинг, рефлексия и корректировка должны повторяться на протяжении всего 8-недельного периода.
4. Рассчитайте размер выборки до начала набора, используя основной показатель исхода, ожидаемый размер эффекта, двусторонний уровень α 0,05, мощность 0,80 и ожидаемый процент отсева. Для репрезентативной реализации наберите 160 студентов.
5. До начала набора подготовьте информационный листок участника, форму согласия, демографическую форму, пакет опросников, тесты на уровень владения английским языком, задания по письму, критерии оценки письменных работ, еженедельные рабочие листы, дневник обучения, контрольный список соответствия протоколу, журнал посещаемости, журнал содержания занятий в контрольном классе, журнал контроля контаминации, список рандомизации, кодификатор и статистический скрипт.
6. Подготовьте пакет опросников, используя выбранные или адаптированные пункты из опубликованных инструментов оценки саморегулируемого обучения, стратегий изучения иностранного языка, самоэффективности, мотивации и тревожности при изучении языка15,16. Используйте опросник по саморегулируемому изучению английского языка из 24 пунктов с оценкой по 5-балльной шкале Лайкерта, охватывающий постановку целей, стратегическое планирование, использование стратегий, мониторинг и рефлексию. Используйте 8-пунктовые шкалы самоэффективности в английском языке, мотивации и тревожности при обучении с тем же форматом оценки от 1 до 5. Определите пункты с обратной кодировкой до сбора данных и рассчитайте показатели шкалы путем усреднения ответов на валидные пункты.
   ПРИМЕЧАНИЕ: Метод оценки саморегулируемого обучения должен фиксировать постановку целей, планирование, использование стратегий, мониторинг и рефлексию, а не только общее отношение к обучению.
7. Попросите двух специалистов по преподаванию английского языка проверить адаптированные пункты опросника на ясность формулировок, соответствие конструкту и пригодность для студентов университетов, изучающих английский язык.
8. Подготовьте один исходный тест на уровень владения английским языком и одну параллельную форму итогового теста. Приведите обе формы в соответствие с одной и той же учебной программой курса и планом оценки. Сопоставьте формы по типу заданий, количеству пунктов, охвату навыков, общему баллу, ограничению по времени и ожидаемой сложности. Оценивайте каждую форму по шкале от 0 до 100.
9. Подготовьте два параллельных задания по письму на английском языке для предварительного и итогового тестирования. Сопоставьте задания по жанру, знакомству с темой, ожидаемому объему, времени ответа, когнитивной нагрузке и критериям оценки. Используйте разные задания при исходном и итоговом тестировании.
10. Попросите двух преподавателей английского языка, не участвующих в оценивании, проверить тесты на уровень владения языком и задания по письму на полноту охвата содержания, уровень языка, знакомство с темой и сложность заданий.
    КРИТИЧЕСКИЙ ЭТАП: Не используйте один и тот же тест или задание по письму при исходном и итоговом тестировании. Используйте параллельные формы, чтобы снизить эффект привыкания, сохраняя при этом сопоставимый уровень сложности.
11. Подготовьте аналитическую рубрику оценки письма по шкале 0–20, охватывающую релевантность содержания, организацию, использование лексики, грамматическую точность и полноту выполнения задания. Обучите двух независимых экспертов по оценке письма, используя рубрику, опорные образцы, примеры оценивания, дескрипторы уровней владения и правила разрешения разногласий.
12. Проведите инструктаж преподавателя по протоколу или ассистента исследователя, используя еженедельный сценарий урока, требования к результатам работы студентов, правила распределения времени, контрольный список соответствия протоколу, процедуру контроля контаминации и журнал отклонений от протокола. Назначьте оценку соответствия протоколу обученному ассистенту исследователя, который не отвечает за обычное оценивание успеваемости по курсу. Используйте один и тот же контрольный список соответствия для всех 8 сессий.
13. Подготовьте условия для контрольной группы из списка ожидания до начала набора. Студенты контрольной группы получают обычное обучение английскому языку, обычные домашние задания и обычную обратную связь от преподавателя в течение 8-недельного периода, но не получают структурированных рабочих листов по саморегулируемому обучению, дневников обучения, карточек целей, контрольных списков стратегий или шаблонов рефлексии до проведения итогового тестирования.
14. Подготовьте все материалы исследования, перечисленные в Таблице материалов, и следуйте графику зачисления, вмешательства и оценки, представленному в Таблице 1.
15. Храните формы согласия, списки кодов участников, опросники, файлы письменных работ, файлы тестов, записи о соответствии протоколу, записи о соблюдении режима, журналы содержания занятий в контрольном классе, журналы контроля контаминации, журналы отклонений от протокола и анонимизированные наборы данных в отдельных защищенных папках.
    ТОЧКА ПРИОСТАНОВКИ: Протокол может быть приостановлен после подготовки материалов и возобновлен после получения этического одобрения, завершения обучения преподавателя, обучения экспертов по оценке и создания папок для безопасности данных.
16. Храните файл с идентификационными данными участников отдельно от всех данных об исходах. Ограничьте доступ к идентифицирующим данным только главным исследователем или уполномоченным персоналом исследования.

2. Набор участников и получение согласия

1. Представьте исследование во время обычного занятия перед проведением исходной оценки. Пригласите студентов в возрасте 18 лет и старше, зачисленных на выбранный курс английского языка, способных выполнять письменные задания на английском языке и заполнять опросники, а также готовых предоставить информированное согласие.
2. Исключите студентов, которые не дали согласия, отозвали его до проведения исходной оценки, не могут пройти весь 8-недельный период исследования или не способны выполнить как оценку на основе опросников, так и оценку успеваемости.
3. По возможности поручите распространение и сбор форм согласия ассистенту исследователя, а не преподавателю, выставляющему оценки за курс.
4. Разъясните, что участие является добровольным, ответы в опросниках конфиденциальны, а участие в исследовании не влияет на официальный балл за курс. Соберите подписанные формы согласия перед использованием любых инструментов исследования и присвойте каждому давшему согласие студенту уникальный идентификационный код участника, например, SRL001, SRL002 и SRL003.
5. Занесите в журнал регистрации код участника, группу, возраст, пол, специальность, курс обучения, предыдущий опыт изучения английского языка и категорию исходного уровня владения английским языком. Исключите студентов, не давших согласия, из сбора исследовательских данных, при этом позвольте им продолжать обычную учебную деятельность.

3. Проведение базовой оценки

1. Проведите исходную оценку до рандомизации и до предоставления любого контента для самостоятельного обучения. Попросите студентов указывать на всех формах, тестах и листах для письма только свой идентификационный код участника.
2. Заполните демографическую форму, анкету по самостоятельному изучению английского языка, шкалу самоэффективности в английском языке, шкалу мотивации и шкалу тревожности при обучении за один сеанс, используя единообразные инструкции по ответам и шкалу ответов от 1 до 5.
3. Проведите исходный тест на уровень владения английским языком с фиксированным ограничением по времени — 45 мин. Сразу после теста на уровень владения английским языком дайте исходное задание по письму, используя первое предложение к письму; ожидаемый объем текста составляет 120–180 слов, фиксированное время выполнения — 20 мин.
4. Соберите все формы и листы с заданиями сразу после завершения. Перед тем как студенты покинут помещение, проверьте идентификационные коды участников, статус заполнения и наличие явных дубликатов записей. Отметьте отсутствующих студентов в журнале посещаемости на этапе исходной оценки и исключите из рандомизации студентов, по которым нет исходных данных.
5. Введите исходные данные в общую базу данных, используя только идентификационные коды участников. Перепроверьте не менее 10% введенных записей по оригиналам форм и исправьте все ошибки ввода перед рандомизацией.
6. Заблокируйте набор исходных данных перед формированием списка рандомизации.
   КРИТИЧЕСКИЙ ЭТАП: Завершите исходную оценку и блокировку набора данных до начала рандомизации, чтобы распределение по группам не повлияло на сбор исходных данных или их ввод.

4. Рандомизация участников и скрытие распределения

1. Сгенерируйте список рандомизации после очистки исходных данных. Проведите стратифицированную рандомизацию по классам и категориям исходного уровня владения английским языком.
2. Распределите участников в соотношении 1:1 в группу протокола саморегулируемого обучения или в контрольную группу списка ожидания. Используйте блочную рандомизацию внутри каждого класса и страты владения языком. Зафиксируйте размер блока, начальное число (random seed) и программное обеспечение, использованное для создания списка распределения.
3. Храните файл рандомизации отдельно от файлов с исходными данными и результатами послетеста. Проинформируйте учащихся о расписании назначенных им занятий в классе, не обсуждая ожидаемую разницу в результатах.
4. Используйте рандомизацию на индивидуальном уровне, если количество доступных классных групп слишком мало для проведения рандомизации на уровне классов. Зафиксируйте этот выбор дизайна в журнале исследования.
   ПРИМЕЧАНИЕ: Рандомизация внутри одного класса может привести к контаминации, если учащиеся будут обсуждать учебные материалы. Используйте разные периоды активности или рабочие пространства, отложенный выпуск рабочих листов и журналы контаминации для документирования этого риска.
5. По возможности поддерживайте сопоставимость стандартного учебного плана, обычного содержания обучения, графика аттестации курса и общих требований к домашним заданиям между группами. Обеспечьте «ослепление» экспертов, оценивающих письменные работы, в отношении распределения по группам и временных точек, удалив метки групп и аттестаций из всех файлов с работами перед оцениванием.
6. Обеспечьте «ослепление» основного аналитика данных в отношении меток групп до завершения кодирования переменных, определения правил обработки пропущенных данных и окончательного плана основного анализа.
7. Проводите структурированные занятия по саморегулируемому обучению в отдельные периоды активности, в малых группах или в онлайн-рабочих пространствах. Не загружайте рабочие листы интервенции, дневники обучения, карточки целей, контрольные списки стратегий или шаблоны рефлексии в общие группы курса до завершения послетестовой оценки.
8. Попросите участников не обмениваться рабочими листами интервенции или структурированными шаблонами обучения с учащимися контрольной группы списка ожидания до проведения послетестовой оценки. Регистрируйте предполагаемые случаи контаминации, включая преждевременный обмен рабочими листами или доступ контрольной группы к материалам интервенции.
9. Занесите данные об окончательном распределении, воздействии интервенции, завершении послетеста и включении в анализ в диаграмму потока участников после завершения сбора данных17.

5. Реализация протокола самостоятельного изучения английского языка

1. Проводите по одному 30–45-минутному структурированному занятию по самостоятельному регулируемому обучению в неделю в течение 8 недель подряд в рамках или параллельно с обычным курсом английского языка.
2. Соблюдайте еженедельный рабочий процесс в классе, показанный на Рисунке 2, и используйте пакет рабочих листов, представленный в Дополнительной таблице 1.
3. Каждое еженедельное занятие должно включать обзор или уточнение целей, отработку стратегий, мониторинг, краткую рефлексию и корректировку следующих шагов.
   КРИТИЧЕСКИЙ ЭТАП: Еженедельно собирайте заранее определенные результаты работы учащихся. Эти результаты необходимы для мониторинга соблюдения режима, оценки точности выполнения и воспроизводимости протокола.
4. Неделя 1: Ориентация, самодиагностика и первая цель обучения. Объясните концепцию самостоятельно регулируемого изучения английского языка как повторяющегося цикла постановки целей, выбора стратегий, мониторинга, рефлексии и корректировки. Попросите студентов проанализировать свои привычки в изучении английского языка, сильные стороны, трудности, препятствия и опыт использования стратегий. Каждый студент заполняет профиль обучения, указывая одну целевую проблему обучения и одну предварительную стратегию.
5. Неделя 2: Постановка целей и метод проверки достижения целей. Рассмотрите целевую проблему и предварительную стратегию первой недели. Попросите студентов преобразовать одну общую цель изучения английского языка в измеримую еженедельную цель. Каждая карточка цели должна включать целевое задание, время обучения, ожидаемый результат, крайний срок, метод проверки и план корректировки.
6. Неделя 3: Стратегическое планирование, тайм-менеджмент и реагирование на препятствия. Рассмотрите карточку цели второй недели. Попросите студентов разделить еженедельную цель на три-пять более мелких задач, закрепить за каждой задачей день и временной интервал, включить практику изучения лексики, чтения или аудирования, а также письма или говорения, и определить одно препятствие, способ реагирования и корректировку.
7. Неделя 4: Отработка стратегий изучения лексики и чтения. Рассмотрите план обучения третьей недели. Продемонстрируйте методы активного воспроизведения (retrieval practice), интервального повторения и аннотирования текста, используя короткий список слов и короткий абзац на английском языке. Студенты представляют образец аннотированного чтения и один план стратегии.
8. Неделя 5: Цикл стратегий письма. Рассмотрите план стратегий четвертой недели. Представьте цикл письма: планирование — черновик — редактирование — рефлексия. Студенты планируют короткий абзац, пишут черновик, редактируют его, используя аналитический критерий оценивания письма, и пишут одну рефлексию, в которой указывают полезную стратегию, повторяющуюся проблему при письме и одну цель для редактирования.
9. Неделя 6: Мониторинг и саморегистрация. Рассмотрите цель редактирования пятой недели. Студенты фиксируют ежедневное время обучения, выполнение задач, используемую стратегию, возникшие препятствия и внесенные коррективы. Потребуйте наличия как минимум трех записей в дневнике, разрешив студентам опустить любые личные записи, которыми они не желают делиться.
10. Неделя 7: Использование обратной связи и взаимная калибровка. Рассмотрите записи в дневниках шестой недели. Студенты используют критерии оценивания письма для оценки тренировочного абзаца, обсуждают различия в баллах, предоставляют одноклассникам обратную связь на основе критериев, редактируют одно предложение или абзац и пишут одно заявление об использовании обратной связи.
11. Неделя 8: Рефлексия, планирование переноса навыков и завершение. Студенты анализируют свои профили обучения, карточки целей, планы обучения, листы стратегий, правки в текстах, записи в дневниках, записи обратной связи от сверстников и предыдущие корректировки. Они определяют одну эффективную стратегию, одну неэффективную стратегию, одно стойкое препятствие, одну будущую цель обучения и один планируемый метод мониторинга.
12. Соберите все итоговые учебные материалы перед проведением итогового тестирования (posttest) и предоставьте контрольной группе из списка ожидания доступ к полному пакету рабочих листов только после завершения сбора данных итогового тестирования.

6. Проведение контрольного условия с листом ожидания

1. Продолжайте обычное обучение английскому языку для контрольной группы списка ожидания в течение 8-недельного периода исследования. Следите за тем, чтобы учебная программа, еженедельное содержание занятий, требования к домашним заданиям, формат обратной связи от преподавателя и график оценивания были сопоставимы с обычными учебными мероприятиями, которые проходят участники основной группы.
2. Не предоставляйте контрольной группе списка ожидания структурированные рабочие листы по саморегулируемому обучению, дневники обучения, карточки целей, контрольные списки стратегий, шаблоны для взаимного оценивания или листы рефлексии до проведения итогового тестирования.
3. Регистрируйте еженедельное содержание занятий в контрольном классе, домашние задания, посещаемость, формат обратной связи от преподавателя и любые случаи ознакомления с материалами по саморегулируемому обучению в журнале содержания контрольного класса.
4. Избегайте загрузки материалов интервенции в общие группы курса до проведения итогового тестирования. Регистрируйте любые случаи преждевременного ознакомления или предполагаемого обмена материалами в журнале контроля контаминации.
   КРИТИЧЕСКИЙ ШАГ: Поддерживайте условия для контрольной группы как обычное обучение английскому языку, а не как неструктурированное или пассивное состояние. Это позволяет сравнивать основную группу с обычной классной практикой, сохраняя при этом возможность отложенного доступа к материалам для студентов контрольной группы.
5. Предоставьте полный пакет рабочих листов по саморегулируемому обучению контрольной группе списка ожидания только после сбора всех данных итогового тестирования.

7. Проведение итоговой оценки

1. Проведите итоговое тестирование на 8-й неделе после завершения последнего сеанса по протоколу.
2. Проведите итоговое тестирование в обеих группах в течение одной недели, используя тот же порядок инструментов, инструкции, временные ограничения, правила в классе и формат ответов, что и при исходном тестировании.
3. Заполните опросник по самостоятельному изучению английского языка, шкалу самоэффективности в английском языке, шкалу мотивации, шкалу тревожности при обучении, параллельный тест успеваемости по английскому языку и итоговое задание по письму.
4. Для итогового письма используйте вторую тему задания. Сохраняйте жанр, ожидаемую длину, время ответа, критерии оценивания и сложность задания сопоставимыми с исходным заданием по письму.
   КРИТИЧЕСКИЙ ШАГ: Используйте параллельную форму итогового теста успеваемости и вторую соответствующую тему письма, а не повторяйте исходный тест или исходную тему.
5. Зафиксируйте учащихся, отсутствовавших при итоговом тестировании, и отметьте соответствующие результаты как отсутствующие. Не заменяйте отсутствующие значения итогового теста искусственными значениями.
6. Соберите все материалы итогового тестирования, проверьте коды участников и статус завершения, и сохраните все файлы по идентификационному коду участника.
7. Заблокируйте набор данных итогового тестирования после проверки полноты данных и перед проведением анализа сравнения групп.

8. Оценка результатов и обработка данных

1. Оцените все результаты в соответствии с определениями, диапазонами баллов, правилами подсчета и временем, указанными в таблице 2.
2. Рассчитайте баллы по результатам опросников, вычислив среднее значение допустимых ответов на вопросы внутри каждой шкалы. Применяйте обратное кодирование пунктов только в тех случаях, когда это указано в документации к шкале.
3. Рассчитывайте итоговый балл по шкале только в том случае, если допустимыми являются ответы как минимум на 80% пунктов данной шкалы. Помечайте балл по шкале как отсутствующий, если более 20% ответов на пункты отсутствуют.
4. Оцените тесты по уровню владения английским языком по шкале от 0 до 100, используя заранее определенный ключ к ответам и руководство по оцениванию.
5. Удалите метки групп из всех файлов с письменными работами перед началом оценивания. Переименуйте файлы работ, используя кодированные идентификаторы, которые не раскрывают распределение по группам.
6. Обучите двух независимых экспертов-оценивателей, используя аналитический рубрикатор для письменных работ, опорные образцы, примеры оценивания и правила разрешения разногласий перед началом официального оценивания.
7. Попросите обоих оценивателей независимо оценить все образцы письменных работ, используя аналитический рубрикатор с диапазоном от 0 до 20. Зафиксируйте баллы по категориям: релевантность содержания, организация, использование лексики, грамматическая точность и выполнение задания.
8. Рассчитайте надежность межэкспертной оценки, используя двухфакторный коэффициент внутриклассовой корреляции со случайными эффектами для абсолютного согласия. Укажите надежность для общего балла за письменную работу и проверьте согласие на уровне отдельных категорий.
9. Разрешайте расхождения в общем балле, превышающие 3 балла, путем обсуждения или вынесения решения третьим оценивателем. После разрешения расхождений используйте среднее значение баллов двух оценивателей в качестве окончательного балла за письменную работу.
   КРИТИЧЕСКИЙ ЭТАП: Не допускайте оценивания письменных работ одним преподавателем, знающим распределение групп. Используйте независимое оценивание и сообщайте о надежности межэкспертной оценки.
10. Перед проведением анализа сверьте все баллы по опросникам, тестам, письменным работам, точности воспроизведения, соблюдению протокола и процессам на соответствие допустимым диапазонам.

9. Мониторинг точности выполнения, соблюдения и отклонений от протокола

1. Заполняйте один контрольный список соответствия протоколу после каждого сеанса вмешательства. Список должен заполняться подготовленным ассистентом исследователя, который не отвечает за выставление оценок в рамках обычного курса обучения.
2. Отмечайте, были ли выполнены запланированная еженедельная цель, объяснение преподавателя, активность учащихся, результат работы учащихся, требования по времени и процедура сбора данных.
3. Оценивайте каждый сеанс по 5-балльной шкале соответствия, где 1 означает очень низкое соответствие, а 5 — полное выполнение всех запланированных компонентов.
4. Еженедельно регистрируйте посещаемость, заполнение рабочих листов, ведение дневников, заполнение листов обратной связи, выполнение итоговой рефлексии, случаи контаминации и отклонения от протокола.
5. Рассчитывайте посещаемость как количество посещенных сеансов из 8. Рассчитывайте уровень заполнения дневников как отношение количества фактически заполненных записей в дневнике к ожидаемому количеству записей.
6. Для проведения анализа чувствительности по протоколу (per-protocol sensitivity analysis) определите адекватный уровень воздействия вмешательства как посещение минимум 6 из 8 сеансов.
7. Фиксируйте отклонения от протокола сразу после каждого сеанса, включая отмену занятия, сокращение времени сеанса, отсутствие рабочего листа, замену преподавателя, технический сбой, непредвиденное нарушение порядка в классе или преждевременное ознакомление с материалом.
8. Регистрируйте показатели соответствия и соблюдения протокола, используя критерии, представленные в Таблице 3.

10. Формирование аналитического набора данных

1. Создайте по одной строке для каждого рандомизированного участника.
2. Укажите код участника, класс, блок рандомизации, распределение по группам, возраст, пол, специализацию, категорию исходного уровня владения английским языком и статус завершения итогового тестирования.
3. Укажите переменные воздействия и процесса, включая посещаемость, заполнение рабочих листов, частоту ведения дневника, оценку точности соблюдения протокола, статус контаминации и статус отклонения от протокола.
4. Укажите баллы предварительного и итогового тестирования по таким показателям, как самостоятельное изучение английского языка, самоэффективность в английском языке, мотивация, тревожность при обучении, успеваемость по английскому языку и навыки письма.
5. Для описательного анализа создайте переменные изменения показателей, вычитая баллы предварительного тестирования из баллов итогового тестирования.
6. Создайте общий набор данных по всем рандомизированным участникам, включающий каждого рандомизированного субъекта, и основной набор данных для анализа доступных случаев, включающий участников с валидными исходными и итоговыми значениями для анализируемого результата.
   ПРИМЕЧАНИЕ: Не описывайте первичный анализ доступных случаев как полный анализ исходя из назначенного лечения (intention-to-treat analysis). Используйте общий набор рандомизированных данных для описания распределения, последующего наблюдения, пропусков данных и анализа чувствительности.
7. Создайте набор данных per-protocol, включающий участников, прошедших итоговое тестирование и достигших заданного порога воздействия.
8. Сохраните окончательный анонимизированный набор данных в форматах электронных таблиц и статистического программного обеспечения. Сохраните кодовую книгу с определением каждой переменной, правил кодирования, диапазонов баллов, правил обработки пропущенных значений и аналитических ролей.
9. Ведите контрольный список готовности к анализу, документирующий дату фиксации набора данных, обзор пропущенных данных, проверку диапазонов, результаты надежности оценивания, резюме по точности соблюдения протокола, обзор журнала контаминации и окончательные названия переменных.

11. Анализ данных

1. Обобщите данные о потоке участников, исходных характеристиках, воздействии вмешательства, завершении итогового тестирования, наличии пропусков и включении в анализ.
2. Представьте исходные характеристики по группам, не опираясь на проверку значимости исходных различий как на основное доказательство качества рандомизации.
3. Проанализируйте первичный исход, используя ковариационный анализ, где зависимой переменной будет балл по самостоятельному обучению английскому языку в итоговом тесте, независимой переменной — группа, а ковариатой — балл по самостоятельному обучению английскому языку в исходном тесте.
4. Включите класс в качестве фиксированного эффекта в основную модель для учета контекста учебного класса. Используйте модель со смешанными эффектами в качестве анализа чувствительности, если количество классов достаточно для поддержки случайных эффектов на уровне класса¹⁸.
5. Проанализируйте вторичные исходы, используя тот же скорректированный подход. Постройте отдельные модели для показателей самоэффективности в английском языке, мотивации, тревожности при обучении, баллов за письмо и баллов за успеваемость по английскому языку в итоговом тесте.
6. Перед интерпретацией результатов ANCOVA оцените линейность между исходными и итоговыми баллами, однородность наклонов регрессии, распределение остатков, гомоскедастичность, влияние значимых наблюдений и соответствие модели.
   КРИТИЧЕСКИЙ ШАГ: Проверьте взаимодействие группы и исходного балла перед окончательной интерпретацией ANCOVA. Значимое взаимодействие указывает на то, что допущение об однородности наклонов регрессии может не соблюдаться.
7. Укажите скорректированную среднюю разность, 95% доверительный интервал, значение p и размер эффекта для каждого исхода. Проведите описательный анализ изменения баллов, указав средний балл до теста, средний балл после теста, среднее изменение и стандартное отклонение изменения по группам.
8. Проведите основной анализ с участием лиц, имеющих достоверные данные исходного и итогового тестирования по анализируемому исходу. Если доля пропущенных данных в итоговом тесте превышает 5%, проведите анализ чувствительности с использованием множественного импутирования при допущении о случайном характере пропусков, включив в модель импутирования группу, класс, исходный балл, демографические переменные и доступные переменные исхода.
9. Проведите анализ чувствительности per-protocol, используя участников, которые соответствуют предопределенному порогу воздействия.
10. В качестве предварительных данных о процессе исследуйте связи между показателями приверженности и улучшением самостоятельного обучения внутри протокольной группы. Не интерпретируйте связи приверженности как причинно-следственные эффекты, так как приверженность не была рандомизирована.
11. Используйте двусторонние тесты и установите уровень значимости 0,05 для первичного исхода. Интерпретируйте вторичные исходы как поддерживающие, а не подтверждающие конечные точки.

12. Управление отзывом, конфиденциальностью и отложенным доступом

1. Разрешите студентам выйти из исследования в любое время без каких-либо академических санкций. Записывайте случаи отказа от участия, отсутствия, дискомфорта или прекращения участия в журнале исследования.
2. Прекратите участие в исследовании любого студента, который отзывает свое согласие. Сохраняйте ранее собранные анонимизированные данные только в том случае, если такая процедура указана в форме согласия и одобрена комитетом по этике.
3. Удалите все прямые идентификаторы из аналитического набора данных и храните список кодов участников отдельно от данных опросников, письменных работ, дневников и тестов. Предоставьте группе контроля из листа ожидания отложенный доступ к полному пакету материалов по саморегулируемому обучению после проведения итогового тестирования.
4. Архивируйте анонимизированные наборы данных, кодовые книги, рубрики оценивания, контрольные списки точности выполнения (fidelity checklists), журналы контроля загрязнения выборки, журналы отклонений от протокола и статистические скрипты в качестве дополнительных файлов, если это разрешено этическим одобрением и политикой журнала.

Результаты

Поток участников, исходные характеристики и завершение послетестирования

Репрезентативный набор данных включал 180 студентов, прошедших оценку на соответствие критериям отбора. Двадцать студентов были исключены до рандомизации: 8 не соответствовали критериям включения, 9 отказались от участия и 3 были недоступны для полного 8-недельного периода последующего наблюдения. Итоговая рандомизированная выборка составила 160 студентов, из которых 80 были распределены в группу протокола саморегулируемого обучения и 80 — в контрольную группу списка ожидания. Постотестовая оценка была завершена 76 студентами в группе протокола и 75 студентами в контрольной группе списка ожидания, что составило аналитическую выборку из доступных случаев в размере 151 студента, или 94,4% от рандомизированной выборки. Доля пропущенных данных после тестирования составила 5,0% в группе протокола и 6,3% в контрольной группе списка ожидания. В группе протокола 72 студента посетили как минимум 6 из 8 сессий и были включены в выборку анализа чувствительности по протоколу (Рисунок 1).

Исходные характеристики в группах были схожими. Средний возраст составил 20,1 ± 1,2 года в основной группе и 20,0 ± 1,1 года в контрольной группе списка ожидания. Доля студенток составила 58,8% и 57,5% в двух группах соответственно. Исходный уровень владения английским языком также был распределен аналогично: 22,5% студентов в основной группе были классифицированы как A2, 53,8% как B1 и 23,8% как B2; соответствующие доли в контрольной группе списка ожидания составили 23,8%, 52,5% и 23,8%. Исходные показатели саморегулируемого обучения английскому языку составили 3,12 ± 0,44 и 3,10 ± 0,45, исходные показатели успеваемости по английскому языку — 68,4 ± 8,7 и 68,7 ± 8,5, а исходные показатели навыков письма — 12,6 ± 2,1 и 12,7 ± 2,0 в основной группе и контрольной группе списка ожидания соответственно (Таблица 4).

Точность выполнения протокола, соблюдение инструкций и мониторинг контрольных условий

В группе протокола были проведены все 8 запланированных еженедельных занятий. Средний показатель точности соблюдения протокола составил 4,5 ± 0,3 из 5, при этом все занятия получили оценку точности 4 или выше. Средняя посещаемость составила 7,1 ± 1,0 занятия из 8, и 72 студента (90,0% группы протокола) достигли заранее определенного порога участия. Среднее количество заполненных рабочих листов составило 6,8 ± 1,2 из 8. Показатели заполнения составили: 97,5% для профиля обучения 1-й недели, 95,0% для карты целей 2-й недели, 92,5% для рабочего листа по планированию обучения 3-й недели, 91,3% для листа стратегий чтения и работы со словарем 4-й недели, 90,0% для рабочего листа по циклу письма 5-й недели, 87,5% для дневника обучения 6-й недели, 88,8% для листа взаимного рецензирования 7-й недели и 87,5% для листа итоговой рефлексии 8-й недели.

Контрольная группа списка ожидания в течение 8-недельного периода получала обычное обучение английскому языку, обычные домашние задания и обычную обратную связь от преподавателя. Журнал содержания занятий контрольного класса подтвердил, что структурированные рабочие листы по саморегулируемому обучению, дневники обучения, карточки целей, контрольные списки стратегий, шаблоны взаимного оценивания и листы рефлексии не предоставлялись контрольной группе до проведения итогового тестирования. В журнале контроля загрязнения данных были зафиксированы две неформальные межгрупповые дискуссии о привычках в учебе, однако преждевременного выпуска рабочих листов, обмена шаблонами или доступа контрольной группы к материалам вмешательства подтверждено не было. Отложенный доступ к полному пакету материалов по саморегулируемому обучению был предоставлен после сбора данных итогового тестирования (Таблица 5).

Результаты на основе анкетирования

В данном репрезентативном наборе данных показатель самостоятельного обучения английскому языку увеличился с 3.12 ± 0.44 до 3.68 ± 0.42 в основной группе и с 3.10 ± 0.45 до 3.16 ± 0.44 в контрольной группе списка ожидания. После поправки на исходный балл и класс межгрупповая разница в показателе самостоятельного обучения английскому языку по результатам итогового тестирования составила 0.49 с 95% доверительным интервалом от 0.36 до 0.62 и значением p < 0.001 (Таблица 6). Самоэффективность в английском языке увеличилась с 3.18 ± 0.48 до 3.54 ± 0.46 в основной группе и с 3.20 ± 0.47 до 3.31 ± 0.45 в контрольной группе списка ожидания. Скорректированная межгрупповая разница составила 0.24 с 95% доверительным интервалом от 0.10 до 0.38 и значением p равным 0.001. Мотивация к изучению английского языка увеличилась с 3.42 ± 0.46 до 3.62 ± 0.43 в основной группе и с 3.40 ± 0.45 до 3.45 ± 0.44 в контрольной группе списка ожидания. Скорректированная межгрупповая разница составила 0.14 с 95% доверительным интервалом от 0.02 до 0.26 и значением p равным 0.023. Тревожность при изучении английского языка снизилась с 3.01 ± 0.52 до 2.72 ± 0.49 в основной группе и с 3.00 ± 0.50 до 2.99 ± 0.51 в контрольной группе списка ожидания. Скорректированная межгрупповая разница составила −0.26 с 95% доверительным интервалом от −0.41 до −0.11 и значением p равным 0.001 (Таблица 6).

Результаты, основанные на эффективности

Показатели успеваемости по английскому языку увеличились с 68,4 ± 8,7 до 77,3 ± 8,1 в основной группе и с 68,7 ± 8,5 до 71,9 ± 8,3 в контрольной группе списка ожидания. Скорректированная межгрупповая разница при итоговом тестировании составила 5,3 балла с 95% доверительным интервалом от 3,1 до 7,5 и значением p < 0,001. Показатели навыков письма увеличились с 12,6 ± 2,1 до 14,8 ± 2,0 в основной группе и с 12,7 ± 2,0 до 13,2 ± 2,1 в контрольной группе списка ожидания. Скорректированная межгрупповая разница при итоговом тестировании составила 1,5 балла с 95% доверительным интервалом от 0,8 до 2,2 и значением p < 0,001 (Таблица 6). Изменения показателей, основанных на анкетировании и выполнении заданий, от предварительного к итоговому тестированию обобщены на Рисунке 3A–F.

Анализ качества данных, надежности оценки и чувствительности

Образцы письменных работ оценивали два независимых эксперта, которые не знали о распределении участников по группам и временной точке оценки. Коэффициент внутриклассовой корреляции составил 0.86 для общего балла за письмо, 0.82 для релевантности содержания, 0.80 для организации, 0.78 для использования лексики, 0.84 для грамматической точности и 0.81 для полноты выполнения задания. Было выявлено одиннадцать расхождений в общих баллах более чем на 3 балла по шкале от 0 до 20, в том числе 6 в группе протокола и 5 в контрольной группе списка ожидания. Все расхождения были устранены до окончательного расчета баллов. Проверки модели не выявили серьезных нарушений допущений ANCOVA. Связь между исходными и итоговыми баллами была приблизительно линейной, графики остатков не показали выраженной гетероскедастичности, и ни одно влиятельное наблюдение не изменило направление скорректированной оценки группы. Взаимодействие группы и исходного балла в основной модели не было статистически значимым (p = 0.42).

Основной анализ доступных случаев включал 151 студента с валидными данными исходного и итогового тестирования. Поскольку общая доля пропущенных данных итогового теста превысила 5%, был проведен анализ чувствительности с использованием множественной импутации при допущении о случайном характере пропусков. Импутированная оценка скорректированной межгрупповой разницы в самостоятельном изучении английского языка составила 0,47 с 95% доверительным интервалом от 0,34 до 0,60. Анализ чувствительности per-protocol показал скорректированную межгрупповую разницу 0,52 с 95% доверительным интервалом от 0,38 до 0,66. До блокировки набора данных было выявлено пять ошибок проверки диапазона, в том числе 3 в группе протокола и 2 в контрольной группе списка ожидания. Все они были исправлены в соответствии с исходными записями. Отклонений от протокола, влияющих на оценку результатов, зафиксировано не было, а также не было зарегистрировано ни одного случая выбывания участников из-за дискомфорта (Таблица 7).

Рисунок 1: Схема распределения участников в рамках рандомизированного протокола в классе. На блок-схеме показаны этапы отбора участников, получение информированного согласия, исходная оценка, рандомизация, распределение в группу протокола саморегулируемого обучения или в контрольную группу списка ожидания, прохождение итогового тестирования и включение в анализ. Контрольная группа списка ожидания продолжала стандартное обучение английскому языку в течение 8-недельного периода и получила отложенный доступ к учебным материалам после проведения итогового тестирования. Пожалуйста, нажмите здесь, чтобы просмотреть этот рисунок в большем размере.

Рисунок 2: Схема восьминедельного курса по самостоятельному изучению английского языка в классе. На схеме представлены этапы исходной оценки, рандомизации, еженедельного выполнения протокола, итоговой оценки и отложенного доступа для контрольной группы списка ожидания. 8-недельный цикл включает ориентацию и самодиагностику, постановку целей, стратегическое планирование, отработку стратегий расширения словарного запаса и чтения, отработку стратегий письма, мониторинг и саморегистрацию, калибровку обратной связи от сверстников и итоговую рефлексию. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этого рисунка.

Рисунок 3: Изменения показателей от пре-теста к пост-тесту для репрезентативных результатов на основе опросников и оценки успеваемости. (A) Саморегулируемое изучение английского языка. (B) Самоэффективность в английском языке. (C) Мотивация к изучению английского языка. (D) Тревожность при изучении английского языка. (E) Успеваемость по английскому языку. (F) Качество письменных работ. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этого рисунка.

Таблица 1: График набора участников, проведения вмешательства, контрольных условий и оценки. В этой таблице обобщены сроки, продолжительность, основная процедура, воздействие на группы, основные записи и ответственное лицо или группа для каждого этапа рандомизированного протокола в классе. Пожалуйста, нажмите здесь, чтобы скачать эту таблицу.

Таблица 2: Определения исходов, правила подсчета баллов и переменные набора данных. В этой таблице определены первичный и вторичные исходы, области критериев оценивания письменных работ, показатели процесса, переменные полноты данных, названия переменных набора данных, правила подсчета баллов, правила обработки пропущенных данных и источники данных. Пожалуйста, нажмите здесь, чтобы скачать эту таблицу.

Таблица 3: Показатели точности выполнения, соблюдения протокола, контроля контаминации, качества данных и готовности к анализу. В этой таблице определены показатели, используемые для мониторинга выполнения протокола, степени вовлеченности студентов, заполнения рабочих листов, целостности контрольных условий, риска контаминации, надежности оценки письменных работ, очистки данных, проверки допущений ANCOVA, отклонений от протокола, этического мониторинга и воспроизводимости. Пожалуйста, нажмите здесь, чтобы скачать эту таблицу.

Таблица 4: Исходные характеристики рандомизированных участников. В данной таблице представлены демографические характеристики, категории исходного уровня владения английским языком и исходные показатели результатов для участников, распределенных в группу протокола самостоятельного обучения и в контрольную группу списка ожидания. Значения представлены в виде среднего ± SD или n (%). Самостоятельное изучение английского языка, самоэффективность, мотивация и тревожность оценивались по шкале от 1 до 5. Успеваемость по английскому языку оценивалась по шкале от 0 до 100. Качество письменных работ оценивалось от 0 до 20. Пожалуйста, нажмите здесь, чтобы скачать эту таблицу.

Таблица 5: Показатели точности соблюдения протокола, приверженности, целостности контрольной группы и безопасности. В этой таблице обобщены данные о проведении сессий, рейтингах точности соблюдения протокола, посещаемости, заполнении рабочих листов, ведении дневников, обычном обучении в контрольной группе списка ожидания, статусе контроля контаминации, отложенном доступе, отклонениях от протокола и выбывании участников из-за дискомфорта. Точность соблюдения оценивалась по шкале от 1 до 5, где более высокие баллы указывали на более строгое соблюдение протокола проведения. Посещаемость в контрольной группе списка ожидания относится к посещаемости обычных занятий по английскому языку. Структурированные рабочие листы по самостоятельному регулируемому обучению, учебные дневники, карточки целей, контрольные списки стратегий, шаблоны взаимной оценки и листы рефлексии не предоставлялись контрольной группе списка ожидания до проведения итогового тестирования. Пожалуйста, нажмите здесь, чтобы скачать эту таблицу.

Таблица 6: Репрезентативные результаты предварительного и итогового тестирования и скорректированные межгрупповые различия. В этой таблице представлены баллы за предварительное тестирование, баллы за итоговое тестирование, средние изменения, скорректированные межгрупповые различия, 95% доверительные интервалы, стандартизированные величины эффекта и значения p для первичных и вторичных исходов. Скорректированные межгрупповые различия оценивались с помощью ковариационного анализа, где в качестве ковариат использовали соответствующий исходный балл и класс. Положительные значения свидетельствуют в пользу группы протокола в отношении самостоятельного изучения английского языка, самоэффективности, мотивации, успеваемости по английскому языку и качества письма. Отрицательные значения для тревожности указывают на более низкий уровень тревожности при итоговом тестировании в группе протокола. Пожалуйста, нажмите здесь, чтобы скачать эту таблицу.

Таблица 7: Показатели качества данных, завершения послетестирования и анализа чувствительности. В этой таблице обобщены данные о завершении послетестирования, включении случаев в анализ доступных данных, пропусках в послетестировании, включении в выборку анализа чувствительности согласно протоколу, согласии оценивающих по баллам за письменную работу, разрешении расхождений, исправлении по результатам проверки диапазона, проверке допущений ANCOVA, оценках анализа чувствительности, отклонениях от протокола, влияющих на оценку результатов, и выбывании из исследования из-за дискомфорта. Завершенные компоненты послетестирования включали батарею послетестовых опросников, параллельный тест на уровень владения английским языком и задание по письму после тестирования. Анализ доступных случаев включал участников с достоверными исходными данными и данными послетестирования для первичного исхода. Выборка анализа чувствительности согласно протоколу включала участников протокольной группы, которые прошли послетестовую оценку и посетили не менее 6 из 8 сессий. ICC означает коэффициент внутриклассовой корреляции. Прочерки указывают на показатели, обобщенные на уровне всего набора данных или модели, а не отдельно по группам. Пожалуйста, нажмите здесь, чтобы скачать эту таблицу.

Дополнительная таблица 1: Пакет еженедельных рабочих листов по самостоятельному обучению.В этой дополнительной таблице указаны код рабочего листа, неделя, компонент протокола, результат студента, обязательные поля, правило заполнения и запись об обучении для каждой недели 8-недельного протокола самостоятельного обучения. Пакет рабочих листов использовался только в группе протокола самостоятельного обучения до проведения итогового тестирования. Контрольная группа списка ожидания получила полный пакет рабочих листов после сбора данных итогового тестирования. Записи о заполнении использовались для мониторинга соблюдения протокола и классификации чувствительности согласно протоколу.Пожалуйста, нажмите здесь, чтобы скачать этот файл.

Обсуждение

В данной статье по методологии представлен воспроизводимый протокол для учебных аудиторий по внедрению саморегулируемого изучения английского языка студентами университетов в рандомизированных условиях с контрольной группой листа ожидания. Протокол переводит концепцию саморегулируемого обучения из широкого теоретического конструкта в наблюдаемые действия в аудитории, преобразуя постановку целей, стратегическое планирование, использование стратегий, мониторинг, восприятие обратной связи и рефлексию в еженедельные результаты работы студентов. Такая структура важна, поскольку исследования вмешательств в учебном процессе требуют наглядных доказательств того, что студенты фактически делали во время обучения, а не только опоры на отчеты студентов о собственных действиях после завершения вмешательства. Современные данные в области высшего образования свидетельствуют о том, что результаты вмешательств по саморегулируемому обучению интерпретируются легче, если содержание вмешательства, процесс внедрения и стратегия измерения эксплицитно согласованы^19,20,21.

8-недельная последовательность представляет собой повторяющийся цикл саморегулируемого обучения, а не разовый урок по развитию навыков обучения. На начальных занятиях формируется осознанность в обучении и навык постановки измеримых целей; на средних этапах цели преобразуются в график заданий по изучению английского языка, практику применения стратегий, пересмотр письменных работ и мониторинг; заключительные занятия сосредоточены на использовании обратной связи, рефлексии и планировании переноса навыков. Такой порядок позволяет основывать рефлексию на реальных доказательствах обучения, а использование стратегий — связывать с конкретной целью, действием и корректировкой. Таким образом, еженедельные рабочие листы служат одновременно и вспомогательными учебными материалами, и записями процесса. Данный дизайн соответствует исследованиям в области саморегулируемого изучения иностранных языков, в которых подчеркивается важность многократной практики стратегий, поддержки преподавателя и возможности учащихся самостоятельно отслеживать свой прогресс²².

Представленные результаты показывают, что данный протокол может быть реализован и задокументирован в университетском классе по английскому языку. Все запланированные еженедельные занятия были проведены, показатели точности выполнения протокола были высокими, посещаемость оставалась стабильной, а уровень заполнения рабочих листов поддерживался на протяжении всего периода вмешательства. Условия контрольной группы списка ожидания также были задокументированы с помощью обычных журналов инструктажа, записей о выдаче рабочих листов, записей об отложенном доступе и мониторинга контроля контаминации. Характер результатов следует интерпретировать как репрезентативный выход протокола, а не как окончательное доказательство обобщаемой эффективности вмешательства. В данном наборе данных группа протокола продемонстрировала более значимые скорректированные показатели прироста по итогам итогового тестирования в области саморегулируемого изучения английского языка, при этом аналогичные направленные закономерности наблюдались для самоэффективности, мотивации, успеваемости по английскому языку и качества письменных работ, в то время как тревожность при изучении английского языка снизилась. Эти результаты демонстрируют, как в рандомизированном классном протоколе могут быть представлены данные о реализации, подсчете баллов, пропущенных значениях, скорректированном анализе и проверках на чувствительность. Использование исходной оценки перед рандомизацией, стратифицированного распределения, слепого оценивания письменных работ, защищенных материалов для списка ожидания и прозрачного включения данных в анализ соответствует общим принципам отчетности по рандомизированным исследованиям²³.

Для репликации исследования ключевое значение имеют несколько процедурных элементов. Базовая оценка должна быть завершена до рандомизации, а список рандомизации следует формировать только после очистки и фиксации базовых данных. Образцы письменных работ должны быть обезличены перед оцениванием, поскольку оценка письма в большей степени подвержена влиянию ожиданий эксперта, чем тестирование с фиксированным ответом. Условие контрольной группы списка ожидания также требует активной защиты: карточки целей, дневники обучения, контрольные списки стратегий, шаблоны взаимного рецензирования и листы рефлексии не должны передаваться студентам контрольной группы до проведения итогового тестирования. Протокол может быть адаптирован для более коротких, ориентированных на письмо, смешанных или онлайн-курсов, однако основной цикл постановки целей, использования стратегий, мониторинга, обратной связи, рефлексии и корректировки должен быть сохранен. Протокол не следует сводить к единичному мероприятию по постановке целей, поскольку повторные напоминания, возможности мониторинга и структурированная обратная связь являются центральными элементами поддержки саморегулируемого обучения²⁴.

Данный протокол имеет определенные ограничения. Рандомизация на индивидуальном уровне внутри одного учебного класса может повысить риск контаминации, особенно в случаях, когда студенты общаются в неформальных группах курса. Контролируемое распределение рабочих листов, организация отдельных мероприятий (где это возможно) и ведение журналов контроля контаминации снижают этот риск, однако они не могут полностью исключить общение между сверстниками. В условиях, когда разделение невозможно, более подходящей может оказаться рандомизация на уровне классов, хотя такая схема требует иных процедур отчетности и анализа, поскольку студенты сгруппированы внутри преподавательских групп²⁵. Еще одним ограничением является измерение. Баллы по опросникам отражают сообщаемые студентами показатели саморегулируемого обучения, самоэффективности, мотивации и тревожности, однако эти конструкты нельзя полностью оценить только на основе самоотчетов. По этой причине в протоколе опросники сочетаются с показателями успеваемости по английскому языку, баллами за письменные работы, посещаемостью, степенью заполнения рабочих листов и дневников, оценками точности соблюдения протокола и индикаторами качества данных. При адаптации метода следует сохранить основной цикл саморегулируемого обучения, корректируя материалы в соответствии с уровнем владения языком учащихся, продолжительностью курса и контекстом обучения²⁶.

Основным вкладом данного протокола является его воспроизводимая структура организации учебного процесса. Он предлагает практический способ объединить теорию саморегулируемого обучения, еженедельные занятия по изучению английского языка, мониторинг процесса, документирование контрольной группы и оценку результатов. Дизайн с использованием списка ожидания также обеспечивает осуществимость в условиях класса, позволяя контрольной группе получать обычное обучение в течение периода исследования и предоставляя ей доступ к структурированным материалам после проведения итогового тестирования. В будущем еженедельные рабочие листы могут быть связаны с аналитикой обучения, записями обратной связи от преподавателей, портфолио письменных работ или данными системы управления обучением. Индикаторы соблюдения протокола также могут быть использованы для изучения того, связана ли завершенность мероприятий по мониторингу и рефлексии с более выраженными изменениями в обучении, хотя такие анализы должны оставаться предварительными, поскольку соблюдение протокола не рандомизировано. Современные исследования в области высшего образования и изучения языков с применением технологий продолжают подчеркивать необходимость в более четких процедурах и более последовательных измерениях в различных контекстах, и данный протокол предоставляет структурированный рабочий процесс для этой цели^27,28.

Материалы

Список материалов, использованных в этой статье

Имя	Компания	Каталожный номер	Комментарии
Название позиции	Источник / ответственное подразделение	Спецификация	Назначение в протоколе
Критерии оценивания аналитического письма	Исследовательская группа	Общий балл 0–20; пять областей по 0–4 балла	Используются для оценки релевантности содержания, организации, использования словарного запаса, грамматической точности и полноты выполнения задания.
Входные и итоговые тесты по уровню владения английским языком	Исследовательская группа или преподавательский состав курса	Два параллельных теста по 40–50 мин; оценка от 0 до 100	Используются для оценки достижений по английскому языку в соответствии с программой курса. Форма итогового теста соответствует форме входного теста по типу заданий, объему, охвату тем и ожидаемой сложности.
Задания для входного и итогового письменного тестирования	Исследовательская группа	Два параллельных задания по письму на 20 мин; ожидаемый объем 120–180 слов	Используются для оценки навыков письма. Задание итогового теста не повторяет задание входного, но предполагает тот же жанр, время ответа и ожидаемую сложность.
Обезличенная папка с образцами письменных работ	Исследовательская группа	Файлы с работами, помеченные только ID участника и временной точкой	Используется для хранения образцов письменных работ до и после тестирования без указания групп перед независимым оцениванием.
Журналы контрольной группы и контроля контаминации	Исследовательская группа	Журнал содержания занятий контрольного класса, журнал распределения рабочих листов и журнал контроля контаминации	Используются для документирования стандартного обучения в контрольной группе списка ожидания, отложенного доступа, ограниченного распределения рабочих листов и возможного взаимодействия между группами.
Шаблон набора данных для ввода и анализа	Исследовательская группа / менеджер по данным	Электронная таблица с фиксированными именами переменных, допустимыми диапазонами, правилами кодирования и правилами обработки пропущенных значений	Используется для ввода данных, проверки диапазонов, подсчета баллов по шкалам, анализа пропущенных данных и формирования аналитического набора данных.
Демографическая анкета	Исследовательская группа	Форма на основе кода участника	Используется для сбора данных о возрасте, поле, специальности, курсе обучения, ID класса, предыдущем опыте изучения английского языка и категории базового уровня владения английским языком.
Пакет рабочих листов по саморегулируемому обучению на восемь недель	Исследовательская группа	W1: профиль обучения, W2: карточка целей, W3: план обучения, W4: лист стратегий чтения/словарного запаса, W5: рабочий лист цикла письма, W6: дневник обучения, W7: лист взаимного рецензирования, W8: лист итоговой рефлексии	Используется для реализации структурированного протокола саморегулируемого обучения и получения еженедельных результатов студентов для мониторинга соблюдения режима.
Форма проверки соответствия критериям и зачисления	Исследовательская группа	Запись о скрининге и зачислении	Используется для подтверждения соответствия критериям, статуса согласия, класса, демографических характеристик, категории базового уровня владения языком и идентификационного кода участника.
Шкала тревожности при изучении английского языка	Исследовательская группа; адаптирована из методик измерения тревожности при изучении языков	8 пунктов; шкала Лайкерта 1–5	Используется для оценки тревожности при изучении английского языка. Обратно кодируемые пункты определяются до сбора данных; более высокие итоговые баллы указывают на более высокую тревожность.
Шкала мотивации к изучению английского языка	Исследовательская группа; адаптирована из методик измерения мотивации к обучению	8 пунктов; шкала Лайкерта 1–5	Используется для оценки усилий, настойчивости, воспринимаемой ценности и желания продолжать изучение английского языка.
Шкала самоэффективности в английском языке	Исследовательская группа; адаптирована из методик измерения самоэффективности при изучении английского языка	8 пунктов; шкала Лайкерта 1–5	Используется для оценки уверенности в изучении словарного запаса, понимании прочитанного, письме, выполнении заданий и самостоятельном изучении английского языка.
Формы мониторинга точности выполнения и соблюдения протокола	Исследовательская группа	Контрольный список точности, журнал посещаемости, запись о заполнении рабочих листов и запись о ведении дневника	Используются для фиксации точности проведения сессий, посещаемости, заполнения рабочих листов, ведения дневников, уровня воздействия и соответствия критериям согласно протоколу.
Информационный листок участника и форма письменного согласия	Исследовательская группа	Одобренные этическим комитетом информационные документы об исследовании и формы согласия	Используются перед сбором данных для разъяснения целей исследования, добровольности участия, конфиденциальности, права на отказ, отложенного доступа и заявления о том, что участие не влияет на оценки по курсу.
Журналы отклонений от протокола и заполнения итоговых тестов	Исследовательская группа	Запись об отклонениях и запись о заполнении итоговых тестов	Используются для документирования отклонений, корректирующих действий, заполнения итоговой анкеты, прохождения итогового теста достижений и выполнения итогового задания по письму.
Список рандомизации	Статистик / менеджер по данным	Стратифицированная блочная рандомизация по классу и категории базового уровня владения языком	Используется для распределения участников в соотношении 1:1 в группу протокола саморегулируемого обучения или контрольную группу списка ожидания после очистки базовых данных.
Пакет материалов для обучения экспертов	Исследовательская группа	Критерии оценивания, руководство по подсчету баллов, эталонные образцы, примеры баллов и правила разрешения разногласий	Используется для обучения независимых экспертов по письму перед формальным оцениванием и для обеспечения согласованности оценки письменных работ.
Защищенное электронное хранилище	Учреждение	Зашифрованная институциональная папка проекта	Используется для хранения форм согласия, ограниченных файлов с кодами участников, необработанных данных, анонимизированных данных, образцов письменных работ, файлов оценивания, журналов, статистических скриптов и архивных материалов для воспроизводимости.
Анкета по саморегулируемому изучению английского языка	Исследовательская группа; адаптирована из опубликованных инструментов по саморегулируемому обучению	24 пункта; шкала Лайкерта 1–5	Используется для оценки постановки целей, стратегического планирования, использования стратегий, мониторинга и рефлексии. Баллы по шкале рассчитываются как среднее значение валидных ответов на пункты.
Статистические пакеты	Набор пакетов R	tidyverse, emmeans, effectsize, mice, lme4, psych, irr, gtsummary или flextable	Используются для управления данными, расчета скорректированных средних значений групп, размеров эффекта, множественной импутации, анализа чувствительности смешанных эффектов, расчета ICC и генерации таблиц для статьи.
Статистическое программное обеспечение	R Foundation for Statistical Computing	R версия 4.4.2 или более поздняя	Используется для описательной статистики, анализа надежности, ANCOVA, анализа чувствительности, множественной импутации и экспорта таблиц.
Пакет сценариев еженедельных занятий	Исследовательская группа	Сценарии восьми еженедельных занятий	Используется для стандартизации целей сессии, тайминга, объяснений инструктора, заданий студентов, требуемых результатов и мониторинга точности выполнения в течение недель 1–8.