Структурированный рабочий процесс для скрининга, оценки и визуализации данных опроса о благополучии студентов бакалавриата

Краткое содержание

В данном протоколе представлен структурированный и поддающийся аудиту рабочий процесс обработки анонимизированных данных опросов студентов бакалавриата о благополучии: от первичного экспорта и скрининга ответов до подсчета баллов по шкалам, проверки надежности, регрессионной диагностики, верификации источников данных для рисунков и подготовки аналитических результатов для визуализации.

Аннотация

Исследования на основе анкетирования широко используются для изучения благополучия студентов, однако процедурный путь от необработанных ответов до анализируемых переменных, статистических таблиц и визуальных результатов часто документируется недостаточно. В данном протоколе представлен структурированный и проверяемый рабочий процесс обработки анонимизированных данных анкет о благополучии студентов бакалавриата, собранных с помощью нескольких разделов на основе шкал типа Лайкерта. Рабочий процесс начинается с получения этического одобрения, документирования согласия, настройки анкеты и экспорта необработанных данных, после чего следуют этапы скрининга ответов, проверки дубликатов, обработки пропущенных данных, кодирования пунктов, присвоения обратных баллов, оценки надежности, описательного анализа, корреляционного анализа, контрастивного сравнения групп, регрессионного моделирования, диагностической проверки и подготовки источников для визуализации. В примере анкеты используются документированные и адаптированные для исследования разделы шкал, основанные на Depression Anxiety Stress Scales-21, шкале прокрастинации Такмана (Tuckman Procrastination Scale), шкале психологического чувства принадлежности к школе (Psychological Sense of School Membership Scale), литературе по измерению мышления высшего порядка и документации по шкалам субъективного благополучия. Отрицательные эмоции, академическая прокрастинация, чувство принадлежности к учебному заведению, мышление высшего порядка и субъективное благополучие используются в качестве примеров переменных на уровне шкал, чтобы показать, как ответы на уровне отдельных пунктов могут быть преобразованы в прослеживаемые аналитические результаты. Типичные результаты включают таблицу потока скрининга, демографическую сводку, описательную статистику и статистику проверки диапазонов, оценки внутренней согласованности, корреляционную матрицу, результаты контрастивного сравнения, коэффициенты регрессии, диагностику остатков и влияния, а также файлы источников для рисунков. В протоколе особое внимание уделяется заранее определенным правилам принятия решений, связанной карте шкал, логу скрининга перед анализом, проверке присвоения обратных баллов и верификации числовых источников для графиков. Вместо предложения новой психометрической шкалы, валидации измерительной модели или установления причинно-следственных связей, данный метод предоставляет практическую и проверяемую процедуру для исследователей, которым необходимо проводить скрининг, подсчет баллов, анализ и визуализацию данных о благополучии студентов бакалавриата, полученных с помощью анкетирования. Этот рабочий процесс может быть адаптирован для смежных исследований на основе анкетирования при условии, что карта шкал, этическое одобрение, правила подсчета баллов, пороги скрининга ответов и файлы источников для визуализации определены до начала анализа.

Введение

Субъективное благополучие является важным показателем в исследованиях студентов, поскольку оно отражает то, как учащиеся оценивают свою жизнь, эмоциональный опыт, социальные отношения и повседневное функционирование в образовательной среде. В высшем образовании благополучие студентов носит многомерный характер и не ограничивается лишь удовлетворенностью жизнью или психологическим дистрессом¹. Таким образом, данные анкетирования остаются полезными, когда исследователям необходимо изучить эмоциональный, поведенческий, социальный, когнитивный опыт и аспекты благополучия в рамках единой аналитической структуры.

Ценность данных анкетирования зависит не только от выбранных конструктов, но и от того, как необработанные ответы преобразуются в аналитические переменные. Во многих исследованиях приводятся баллы по шкалам, корреляционные матрицы, сравнения групп или регрессионные модели без описания промежуточных решений, связывающих первичные записи с итоговыми таблицами и рисунками. Пропущенные ответы могут обрабатываться непоследовательно, пункты с обратной шкалой могут быть закодированы неправильно, дубликаты ответов могут остаться в наборе данных, а невнимательные ответы могут быть приняты за достоверные наблюдения. Поэтому решения по обработке пропущенных данных должны планироваться, документироваться и описываться, а не рассматриваться как невидимый этап post hoc². Данные онлайн-анкетирования также требуют четких правил оценки качества ответов, поскольку слишком высокая скорость заполнения, выбор одного и того же варианта ответа во всех пунктах («straight-lining»), противоречивые ответы и другие паттерны низкого качества могут исказить дескриптивную статистику, оценки надежности и наблюдаемые взаимосвязи³.

Новизна данного протокола заключается в создании связанного контрольного журнала (audit trail), который позволяет проследить путь от исходного экспорта данных опросника до конечных статистических и визуальных результатов. В частности, рабочий процесс включает в себя заполненную карту шкал, журнал предварительного отсева (скрининга) перед анализом, контрольную точку для обратного кодирования, журнал проверки подсчета баллов, проверку числовых источников для графиков и контрольный след, связывающий каждую таблицу или рисунок с исходным файлом. Это отличает данный метод от стандартных практик очистки данных опросов, подсчета баллов по шкалам, тестирования надежности или визуализации. Вместо того чтобы просто констатировать факт очистки и анализа данных опросника, протокол точно определяет, какой файл заблокирован, какой файл проходит скрининг, какие правила применяются, какие баллы по шкалам вычисляются и какая проверенная числовая таблица используется для создания каждого визуального результата.

Рабочий процесс продемонстрирован на примере анонимизированных данных опроса студентов колледжа, содержащих пять переменных шкального уровня: негативные эмоции, академическую прокрастинацию, чувство принадлежности к учебному заведению, мышление высокого порядка и субъективное благополучие. Эти конструкты были выбраны для того, чтобы представить эмоциональные, поведенческие, контекстуальные (школьные), когнитивные и результативные примеры в рамках одного структурированного и проверяемого рабочего процесса. Академическая прокрастинация была связана с последующими проблемами с психическим здоровьем у студентов университетов, включая депрессию, тревожность и стрессовые состояния⁴. Чувство принадлежности к учебному заведению и субъективное благополучие также тесно взаимосвязаны в студенческой среде, что обосновывает включение показателей принадлежности и благополучия в одну систему обработки данных опроса⁵. Однако в данном протоколе эти конструкты используются для демонстрации рабочего процесса, а не для установления причинно-следственной психологической модели.

Центральной особенностью данного протокола является отделение решений по обработке данных от содержательной интерпретации. Карта шкал подготавливается до начала анализа, критерии качества ответов фиксируются до присвоения баллов по шкалам, проверка обратного кодирования завершается до статистического тестирования, а рисунки создаются только после проверки соответствующих исходных численных таблиц. Такая последовательность важна, поскольку шкалы ответов типа Ликерта требуют тщательного согласования формулировок пунктов, опорных точек ответов, направления кодирования и статистической обработки⁶. Протокол также отдает приоритет прозрачной предварительной обработке и проверке кодирования перед сложностью моделей. Прогностические или многофакторные модели могут быть полезны в студенческих исследованиях⁷, а графические сводки могут улучшить интерпретацию, если они остаются привязанными к проверенным численным матрицам⁸, однако и то, и другое зависит от прозрачной подготовки входных переменных. По этой причине в рабочем процессе корреляционный анализ, контрастивное сравнение групп, регрессионное моделирование, диагностическая проверка и визуализация используются в качестве примеров модулей, а не как обязательные содержательные утверждения.

Данный протокол предназначен для исследователей, которым необходим практический рабочий процесс обработки анкет с анонимизированными данными о благополучии студентов. Он применим в случаях, когда ответы на вопросы анкеты экспортируются с онлайн-платформы, необходимо вычислить переменные на уровне шкал на основе пунктов типа Ликерта, а целью является получение прозрачных результатов для дескриптивного, корреляционного, группового, регрессионного и диагностического анализа, а также данных для визуализации. Протокол не предназначен для установления причинно-следственных связей, валидации новых шкал, замены конфирматорного факторного анализа, тестирования инвариантности измерений или замены моделирования с использованием теорииResponses (IRT) или моделирования латентных переменных. Его вклад заключается в процедурном аспекте: он делает путь от записей анкет к представленным таблицам и рисункам наглядным, воспроизводимым и проверяемым. Такой подход соответствует современным требованиям к качеству данных онлайн-опросов⁹, проверке регрессии и влиятельных значений¹⁰, а также к аудируемым рабочим процессам анализа на основе анкетирования¹¹.

Протокол

Данное исследование с участием людей было рассмотрено и одобрено Комитетом по этике Колледжа авиации Университета Гуйчжоу (регистрационный номер GZOU-EDU-2024-015). Комитет определил, что исследование подлежит освобождению от этического контроля, поскольку в нем использовались процедуры анонимного добровольного анкетирования, которые не представляли для участников более чем минимального риска. Все участники предоставили электронное информированное согласие перед заполнением анкеты и могли прекратить ответы в любое время без каких-либо последствий. Поскольку ряд пунктов касались отрицательных эмоций, стресса, одиночества, беспомощности, неудовлетворенности или сопутствующего состояния благополучия, на странице согласия и на финальной странице анкеты была указана контактная информация исследователя и учреждения для участников, ощутивших дискомфорт. Набор данных, использованный в данном протоколе, был анонимизирован перед проведением скрининга, подсчетом баллов, анализом и визуализацией. Полный текст анкеты представлен в Дополнительном файле 1.

1. Подготовка опросника, материалов по этике и артефактов рабочего процесса

1. Определите подходящую популяцию, условия исследования, конструкты опросника и планируемые результаты анализа перед программированием опросника.
2. Подготовьте заявку на этическую экспертизу, охватывающую целевую популяцию, каналы рекрутинга, содержание опросника, расчетное время заполнения, защиту анонимности, хранение данных, процедуру отказа от участия, информацию по поддержке участников и планируемый анализ.
3. Сохраните документ об этическом одобрении или освобождении от него, формулировку согласия, текст для рекрутинга, версию опросника, информацию по поддержке участников и планируемый рабочий процесс в папке проекта до начала сбора данных.
4. Определите целевую популяцию как студентов бакалавриата очной формы обучения в возрасте не менее 18 лет, в настоящее время зачисленных в высшее учебное заведение, способных понять содержание опросника и предоставить информированное согласие.
5. Определите критерии исключения до начала рекрутинга. Исключайте респондентов, которые отклонили согласие, не соответствуют определению целевой популяции, отправили дублирующие ответы, превысили порог пропущенных данных или соответствуют комбинированным критериям недействительных ответов, описанным в шаге 1.4.
6. Разместите форму информированное согласие в начале опросника. Укажите цель исследования, добровольный характер участия, приблизительное время заполнения (12 min), защиту анонимности, право на отзыв согласия, план использования данных, контактную информацию исследователя и информацию по поддержке.
7. Не собирайте информацию, позволяющую напрямую идентифицировать личность, включая идентификационные номера студентов, государственные идентификационные номера, номера мобильных телефонов, личные адреса электронной почты, адреса общежитий или другие персональные идентификаторы.
8. Расположите разделы опросника в следующем порядке: информированное согласие, демографическая информация, пункты по негативным эмоциям, пункты по академической прокрастинации, пункты по чувству принадлежности к учебному заведению, пункты по мышлению высокого порядка и пункты по субъективному благополучию.
9. Выберите исходные инструменты до программирования опросника. В данном протоколе негативные эмоции оценивались с помощью шкалы Depression Anxiety Stress Scales-21 (21 пункт), академическая прокрастинация — с помощью шкалы Tuckman Procrastination Scale (16 пунктов), чувство принадлежности к учебному заведению — с помощью шкалы Psychological Sense of School Membership Scale (18 пунктов), мышление высокого порядка — с помощью набора из 20 пунктов, адаптированного из опубликованной литературы по измерению мышления высокого порядка, а субъективное благополучие — с помощью 20-пунктовой шкалы субъективного благополучия для исследований студентов колледжей^{12,13,14,15,16}.
10. Подготовьте утвержденную карту шкал перед программированием опросника. Включите название конструкта, исходное название шкалы, исходную цитату, языковую версию, статус разрешения или авторизации, процедуру перевода или адаптации, код пункта, формулировку пункта, диапазон ответов, якоря ответов, направление подсчета баллов, статус пункта с обратной шкалой, итоговую переменную уровня шкалы и правило подсчета баллов.
11. Описывайте набор пунктов как валидированную шкалу только в том случае, если задокументированы исходный инструмент, цитата, доказательства валидации и статус адаптации или перевода. Укажите любые наборы пунктов, разработанные автором или специально для данного исследования, в Table 1 и Supplementary File 1.
12. Утвердите систему измерений до начала сбора данных. Для переведенных или адаптированных инструментов завершите перевод, рецензирование, согласование и пилотную проверку до начала рекрутинга.
13. Подготовьте пакет аудита рабочего процесса, который включает утвержденный файл опросника, карту шкал, контрольный список экспорта необработанных данных, журнал скрининга, журнал верификации подсчета баллов, журнал анализа, шаблон таблицы источников рисунков, а также файл синтаксиса или скрипт анализа.
14. Используйте версии в именах файлов для всех артефактов рабочего процесса.
15. Определите необходимые столбцы для каждого файла аудита.
    1. Журнал скрининга включает ID записи, критерий скрининга, статус флага, статус исключения, причину исключения, дату принятия решения и инициалы рецензента.
    2. Карта шкал включает название конструкта, источник шкалы, код пункта, формулировку пункта, диапазон ответов, якоря ответов, статус обратного подсчета, название итоговой переменной, правило подсчета баллов и статус разрешения или адаптации.
    3. Журнал верификации подсчета баллов включает код пункта, исходный диапазон значений, перекодированный диапазон значений, формулу обратного подсчета, результат проверки диапазона, статус расхождения, внесенную правку и дату правки.
    4. Таблица источников рисунков включает номер рисунка, номер панели, исходную таблицу, построенные переменные, отображаемую статистику, размер выборки и статус верификации.
16. Определите аналитический рабочий процесс до программирования опросника: проведение опроса, экспорт необработанных данных, скрининг ответов, подсчет баллов по шкалам, оценка надежности, дескриптивный анализ, корреляционный анализ, сравнение групп с высокими и низкими показателями, регрессионное моделирование, диагностические проверки и подготовка визуализации¹⁷.
17. Структурируйте протокол вокруг решений, операций и результатов верификации, а не путей в меню программного обеспечения.
18. Предоставьте ресурсы рабочего процесса, если это разрешено политикой учреждения и журнала, включая файл опросника, карту шкал, шаблон журнала скрининга, шаблон журнала подсчета баллов, файл синтаксиса или скрипт анализа и таблицы источников рисунков.
    ПРИМЕЧАНИЕ: На Figure 1 показан путь от подготовки опросника до экспорта необработанных данных, скрининга ответов, подсчета баллов по шкалам, статистического анализа, диагностических проверок и получения результатов визуализации. В Table 1 приведены исходный инструмент, количество пунктов, диапазон ответов, система подсчета баллов, правило обратного подсчета, статус разрешения или адаптации и итоговая переменная уровня шкалы для каждого конструкта.

2. Настройка и распространение опросника

1. Убедитесь, что платформа для анкетирования поддерживает ограничение доступа до получения согласия, обязательные для заполнения пункты, проверку на повторную подачу заявок, фиксацию временных меток и запись продолжительности заполнения ответов.
2. Создайте анкету с помощью платформы для онлайн-опросов, указанной в Таблице материалов. Спрограммируйте анкету в соответствии с утвержденной картой шкал.
3. Перед публикацией ссылки на опрос проведите построчный сравнительный анализ запрограммированной анкеты и утвержденной карты шкал. Запишите все внесенные корректировки в журнал исследования.
4. Установите пункт об информированном согласии в качестве первого обязательного пункта. Настройте автоматическое прекращение анкетирования, если участник выбирает вариант «Я не согласен на участие».
5. Спрограммируйте разделы демографических данных и психологических шкал в порядке, зафиксированном на этапе 1.8. Используйте коды пунктов, соответствующие карте шкал.
6. Устанавливайте пункты психологических шкал как обязательные только в тех случаях, когда это разрешено этическим одобрением или исключением, и когда участники могут отказаться от участия без каких-либо санкций. Если принудительные ответы не разрешены, зафиксируйте правило обработки пропущенных данных до начала сбора данных.
7. Отображайте опорные значения ответов перед каждым разделом шкалы и соблюдайте единообразие опорных значений внутри каждой шкалы¹⁸.
8. Отключите возможность повторной подачи ответов, если платформа для опросов предоставляет такую функцию. Сохраняйте любые анонимные идентификаторы устройства, браузера, платформы или отправки, необходимые для анализа дубликатов ответов.
9. Включите автоматическую запись времени отправки и продолжительности заполнения.
10. Установите период работы анкеты в 7 календарных дней или используйте окно сбора данных, утвержденное комитетом по этике.
11. Отправьте ссылку на анкету через утвержденный институциональный канал рекрутинга. Предоставьте всем участникам одинаковые письменные инструкции.
12. Закройте доступ к анкете после завершения заранее определенного окна сбора данных.
    ПРИМЕЧАНИЕ: Сохраните в журнале исследования текст приглашения, ссылку на анкету, даты открытия и закрытия, настройки платформы, текст согласия, финальную версию анкеты и настройки экспорта данных из платформы.

3. Экспорт и сохранение исходных данных

1. Сразу после закрытия окна сбора данных экспортируйте ответы из заполненного опросника в файл электронной таблицы.
2. Сохраните первый экспортированный файл в качестве заблокированного набора исходных данных. Не редактируйте этот файл.
3. Создайте одну рабочую копию для скрининга, подсчета баллов и анализа. Назовите файл, указав дату, номер версии и идентификатор проекта.
4. Убедитесь, что экспортированный файл содержит по одной строке на каждого респондента и по одному столбцу на каждую демографическую переменную, пункт опросника, переменную временной метки, переменную платформы или производное поле платформы.
5. Храните заблокированный набор исходных данных, рабочую копию, карту шкал, файл опросника, журнал исследования, журнал скрининга, журнал проверки подсчета баллов, журнал анализа, таблицы-источники рисунков, а также файл синтаксиса или скрипта в папке проекта, защищенной паролем.
6. Проверьте, не содержит ли набор данных информации, позволяющей напрямую идентифицировать личность. Перед началом анализа удалите из рабочей копии любые неожиданно появившиеся идентифицирующие поля и зафиксируйте в журнале исследования название поля, причину удаления, дату удаления и данные ответственного рецензента.
7. Перед совместным использованием или публикацией данных на уровне участников проверьте возможность косвенной идентификации. Проанализируйте малые демографические группы, сформированные комбинациями пола, возраста, курса обучения, категории учебного заведения и категории академической специальности. Если группа содержит менее пяти респондентов, объедините категории, скройте данные по этой группе или предоставьте только агрегированные данные.
8. Зафиксируйте статус доступности данных в журнале исследования, включая информацию о том, доступны ли данные на уровне участников, ограничены ли они требованиями этики или конфиденциальности или заменены агрегированным набором данных рабочего процесса.
9. Перед очисткой данных создайте журнал скрининга. Зафиксируйте исходный размер выборки, критерий скрининга, количество отмеченных записей, количество удаленных записей, количество сохраненных записей, причину исключения, дату принятия решения и инициалы рецензента.
10. Перед проведением статистического анализа создайте файл трассировки анализа. Зафиксируйте название программного обеспечения, версию ПО, операционную систему, имена файлов, версию данных, версию скрипта или синтаксиса, а также дату каждого запуска анализа.
    ПРИМЕЧАНИЕ: Используйте заблокированный набор исходных данных только для верификации. Весь скрининг, подсчет баллов и анализ проводите с использованием рабочей копии.

4. Скрининг ответов и формирование аналитического набора данных

1. Примените заранее определенные правила исключения и контроля качества перед расчетом любого балла на уровне шкалы.
2. Примените правила скрининга к рабочей копии в следующем порядке: статус согласия, соответствие критериям включения, дубликаты заявок, пропущенные данные, продолжительность ответа, однообразные ответы (straight-line responding), значения вне допустимого диапазона и комбинированные показатели качества ответов.
3. После каждой операции скрининга фиксируйте в журнале скрининга количество помеченных, удаленных и сохраненных записей. Не перезаписывайте предыдущие версии рабочего файла.
4. Удалите все записи, в которых пункт об информированном согласии отмечен как «Нет» или остался без ответа.
5. Удалите все записи, которые не соответствуют критериям включения, определенным на шаге 1.4.
6. Проведите проверку на наличие дубликатов заявок, используя анонимные идентификаторы ответов, время подачи, флаги платформы о дублировании заявок и повторяющиеся паттерны ответов.
7. При обнаружении дубликатов сохраняйте первую полную заявку, если только документально подтвержденная причина не обосновывает сохранение более позднего полного ответа.
8. Исправьте все ошибки, связанные с правилами качества ответов, перед расчетом баллов по шкалам. В Таблице 2 обобщены пороги исключения, пороги маркировки, обоснование, литературная поддержка и план анализа чувствительности, используемые в рабочем процессе.
9. Проведите проверку на наличие пропущенных данных. Исключите респондента, если пропущено более 20% всех пунктов шкалы. Замените единичный пропущенный пункт средним баллом респондента по этой же шкале только в том случае, если заполнено не менее 80% данной шкалы. Не проводите импутацию демографических переменных, за исключением случаев, когда переменная не используется ни в одном анализе.
10. Зафиксируйте количество респондентов, исключенных из-за пропуска более 20% пунктов шкалы, и количество респондентов, для которых была проведена импутация средним значением внутри шкалы. В текущем наборе данных 4 респондента были исключены из-за пропуска более 20% пунктов шкалы, и для 21 респондента была проведена импутация средним значением внутри шкалы для 37 единичных пропущенных пунктов.
11. Проведите проверку продолжительности ответа. Пометьте ответы, завершенные менее чем за 180 s. Рассматривайте это значение как флаг слишком быстрого заполнения (speeding flag), а не как автоматическое правило исключения.
12. Проведите проверку на однообразные ответы. Пометьте ответ, если один и тот же вариант выбран более чем в 90% всех пунктов шкалы Лайкерта. Рассматривайте это значение как флаг паттерна ответов, а не как автоматическое правило исключения.
13. Проверьте дополнительные индикаторы низкого качества усилий, включая признаки дублирования заявок, невозможные временные метки, повторяющиеся строки ответов в разных заявках или противоречия между метаданными платформы и содержанием анкеты.
14. Удаляйте помеченный ответ только в том случае, если как минимум два индикатора контроля качества указывают на недостоверность ответов, например, крайне короткое время заполнения в сочетании с однообразными ответами, признаки дублирования заявок или невозможные метаданные платформы¹⁹.
15. Регистрируйте все помеченные записи, даже если они сохранены. В текущем наборе данных 19 ответов были помечены из-за продолжительности заполнения < 180 s, 8 ответов — из-за однообразных ответов >90%, и 13 записей были исключены, так как они соответствовали двум или более индикаторам качества ответов.
16. Проверьте значения на выход за пределы допустимого диапазона. Подтвердите, что пункты по отрицательным эмоциям находятся в диапазоне 1–4, пункты по академической прокрастинации, чувству принадлежности к школе и мышлению высокого порядка — в диапазоне 1–5, а пункты по субъективному благополучию — в диапазоне 1–6.
17. Исправляйте значение только в том случае, если исходный экспорт четко указывает на ошибку форматирования. Не изменяйте достоверные психологические баллы только потому, что они кажутся необычно высокими или низкими.
18. Создайте таблицу потока скрининга, в которой будут указаны: поданные анкеты, исключения по согласию и соответствию критериям, исключения дубликатов, исключения из-за пропущенных данных, флаги качества ответов, комбинированные исключения по контролю качества, импутации единичных пунктов, сохраненные аналитические случаи и итоговый размер аналитической выборки.
19. Заполните таблицу потока скрининга, используя заблокированный журнал скрининга, и сохраните экспортированную аудиторскую запись о решениях по скринингу. В текущем наборе данных поток скрининга был следующим: поданные анкеты, n = 448; исключения по согласию или соответствию критериям, n = 6; удалены дубликаты заявок, n = 5; записи, исключенные из-за >20% пропущенных пунктов шкалы, n = 4; записи, исключенные по двум или более индикаторам качества ответов, n = 13; итоговый аналитический набор данных, n = 420.
20. Сохраните отобранные записи как аналитический набор данных. Используйте новое имя файла с указанием версии и храните журнал скрининга вместе с аналитическим набором данных.
    ПРИМЕЧАНИЕ: Сохраняйте достоверные экстремальные баллы, если только не выявлена документально подтвержденная проблема с качеством ответов.

5. Подсчет баллов по психологическим шкалам

1. Преобразуйте ответы по отдельным пунктам в переменные уровня шкалы только после завершения скрининга ответов и сохранения аналитического набора данных.
2. Присвойте коды всем пунктам типа Ликерта в соответствии с якорями ответов в заблокированном опроснике и правилами подсчета баллов в карте шкал.
3. Оставьте исходные переменные пунктов без изменений. Создайте отдельные производные переменные для перекодированных пунктов или пунктов с обратным счетом.
4. Рассчитайте баллы по каждой шкале в соответствии с заблокированной картой шкал и соответствующим исходным инструментом или руководством по подсчету баллов.
5. Примените обратный счет для назначенных пунктов субъективного благополучия перед расчетом общего балла субъективного благополучия. Для шкалы ответов 1–6 рассчитывайте каждый инвертированный пункт как 7 минус исходный балл и добавляйте _R к названию производной переменной.
6. При расчете субъективного благополучия используйте переменные с обратным счетом, а не исходные переменные.
7. Рассчитайте каждый балл уровня шкалы как среднее значение по сохраненным пунктам: отрицательные эмоции, академическая прокрастинация, чувство принадлежности к школе, мышление высокого порядка и субъективное благополучие.
8. Назовите итоговые переменные уровня шкалы следующим образом: Negative emotion, Academic procrastination, School belongingness, Higher-order thinking и Subjective well-being.
9. Сверьте минимальное и максимальное значения каждой переменной уровня шкалы с её теоретическим диапазоном ответов. Повторно проверьте кодирование, обратный счет и обработку пропущенных значений, если какой-либо балл выходит за пределы ожидаемого диапазона.
10. Перед проведением инференциального анализа проверьте направление каждой шкалы по карте шкал. Более высокие баллы должны отражать предполагаемое направление конструкта.
11. Перед анализом проведите аудит обратного счета. Пересчитайте пункты с обратным счетом для случайной выборки записей или для всех таких пунктов, если это возможно, и занесите результат аудита в журнал проверки подсчета баллов.
12. При обнаружении ошибки в подсчете исправьте производную переменную, заново рассчитайте затронутый балл шкалы, обновите журнал проверки подсчета баллов и повторно выполните все последующие анализы и таблицы-источники рисунков на основе исправленного аналитического набора данных.
    ПРИМЕЧАНИЕ: Рассматривайте обратный счет и проверку диапазонов как обязательные контрольные этапы перед корреляционным анализом, сравнением групп, регрессионным моделированием или визуализацией.

6. Оценка внутренней согласованности и дескриптивных свойств

1. Рассчитайте внутреннюю согласованность, исправленные корреляции пункта с итогом и дескриптивную статистику для каждой шкалы, используя переменные пунктов, определенные в заблокированной карте шкал.
2. Зафиксируйте значения альфа Кронбаха, номер пункта, размер валидной выборки, исправленные корреляции пункта с итогом и значения альфа при удалении пункта для каждой шкалы.
3. Используйте значение альфа Кронбаха 0.70 в качестве минимально приемлемого порога надежности для данного рабочего процесса. Прежде чем удалять какой-либо пункт, проверьте формулировку пункта, направление оценки, обратное кодирование, соответствие конструкту и документацию к исходному инструменту²⁰.
4. Рассчитайте омегу Макдональда в качестве дополнительного показателя надежности, если это поддерживается средой анализа. Приводите значение омеги вместе с альфой Кронбаха, если эти две оценки приводят к разным интерпретациям надежности.
5. Проанализируйте любой пункт с отрицательной или очень низкой исправленной корреляцией пункта с итогом перед рассмотрением вопроса о его удалении. В первую очередь рассматривайте это как возможную проблему кодирования, обратного подсчета баллов или несоответствия конструкту.
6. Не удаляйте пункт только с целью повышения значения альфа Кронбаха. Удаление пункта должно быть обосновано руководством по подсчету баллов, формулировкой пункта, исправленной корреляцией пункта с итогом, концептуальным соответствием и документально подтвержденной верификацией подсчета.
7. Рассчитайте дескриптивную статистику для всех пяти переменных уровня шкалы, включая среднее значение, стандартное отклонение, минимум, максимум, асимметрию и эксцесс.
8. Проверьте наличие эффекта пола или потолка, зафиксировав долю респондентов с минимальными и максимальными возможными баллами для каждой шкалы.
9. Запишите оценки надежности, результаты диагностики пунктов, дескриптивную статистику и любые решения по подсчету баллов в журнал анализа.
   ПРИМЕЧАНИЕ: Альфа Кронбаха используется в качестве контрольной точки надежности, а не как полная процедура психометрической валидации. Когда требуется формальная оценка измерений, дополните данный рабочий процесс расчетом омеги Макдональда, подтверждающим факторным анализом, тестированием инвариантности измерений, моделированием ответов на пункты или другими методами анализа латентных переменных.

7. Проведение корреляционного анализа

1. Используйте пять проверенных переменных уровневого масштаба: отрицательные эмоции, академическую прокрастинацию, чувство принадлежности к школе, мышление высшего порядка и субъективное благополучие.
2. Перед расчетом корреляций Пирсона изучите распределения и двумерные диаграммы рассеяния для каждой пары переменных уровневого масштаба.
3. Оцените, демонстрируют ли переменные приблизительно непрерывную вариацию баллов, сильную асимметрию, нелинейные зависимости или наличие влиятельных выбросов.
4. Рассчитайте коэффициенты корреляции Пирсона и двусторонние значения p для всех пар переменных уровневого масштаба, если допущения приемлемы для дескриптивного анализа ассоциаций.
5. Зафиксируйте коэффициент корреляции, значение p, размер выборки и направление ассоциации для каждой пары переменных.
6. Приведите коэффициенты корреляции с точностью до трех десятичных знаков.
7. Сравните направление каждого коэффициента с картой шкал. Перепроверьте подсчет баллов по пунктам, если коэффициент противоречит предполагаемому направлению конструкта.
8. Сохраните проверенную корреляционную матрицу в качестве исходной числовой таблицы для тепловой карты корреляций в разделе «Репрезентативные результаты».
9. Если распределения заметно асимметричны, требуется чувствительность к порядковой шкале или если диаграммы рассеяния указывают на монотонные, но нелинейные ассоциации, повторите анализ, используя корреляцию Спирмена, и сравните направление и относительную величину ассоциаций.
10. Отметьте, привели ли результаты Пирсона и Спирмена к одной и той же содержательной интерпретации.
    ПРИМЕЧАНИЕ: Используйте корреляционный анализ как для проверки дескриптивных ассоциаций, так и для аудита направления подсчета баллов.

8. Формирование групп с высоким и низким уровнем субъективного благополучия

1. Используйте очищенный и оцененный аналитический набор данных. Для формирования групп не возвращайтесь к исходному экспорту.
2. В качестве основного показателя для регрессионного моделирования используйте непрерывную оценку субъективного благополучия. Группировку «высокий-низкий» используйте только для сравнительного анализа профилей.
3. Отсортируйте респондентов по оценке субъективного благополучия от самой высокой к самой низкой.
4. Примените заранее определенное правило 27% для крайних групп, чтобы выделить группы с высоким и низким субъективным благополучием. Обоснуйте выбор этого порога в Таблице 2 и в журнале анализа.
5. Назначьте респондентов из верхних 27% в группу с высоким субъективным благополучием, а респондентов из нижних 27% — в группу с низким субъективным благополучием.
6. Оставьте средние 46% в полном аналитическом наборе данных для расчета описательной статистики, корреляционного анализа, сравнения по полу и регрессионного моделирования, но исключите эти случаи из контрастного анализа «высокий-низкий».
7. Создайте переменную группировки под названием «Группа субъективного благополучия». Присвойте верхней группе код «Высокая», нижней группе — «Низкая», а остальным респондентам — «Средняя».
8. Подтвердите, что группы с высоким и низким показателями содержат ожидаемое количество случаев. При наличии одинаковых баллов на границе 27% примените заранее определенное правило обработки совпадений и зафиксируйте принятое решение в журнале анализа.
9. Проведите проверку на чувствительность, если граница 27% приводит к нестабильности состава групп из-за одинаковых баллов или малого размера выборки. Используйте альтернативное заранее определенное правило, например, группировку по тертилям, и укажите, изменилась ли интерпретация результатов.
   ПРИМЕЧАНИЕ: Группировка «высокий-низкий» является процедурой описательного контраста. Она не должна заменять непрерывную оценку субъективного благополучия в основной регрессионной модели.

9. Сравнение групп с высоким и низким уровнем субъективного благополучия

1. Отфильтруйте аналитический набор данных, чтобы оставить только тех респондентов, которые были закодированы как «Высокий» (High) или «Низкий» (Low) в переменной группировки субъективного благополучия.
2. Сравните группы с высоким и низким показателями по параметрам отрицательных эмоций, академической прокрастинации, чувства принадлежности к школе и мышления высокого порядка.
3. Перед сравнением групп проверьте распределения внутри каждой группы, размеры выборок и равенство дисперсий для каждой переменной.
4. Используйте t-критерий для независимых выборок, если допущения о распределении и дисперсии соблюдены. Используйте t-критерий Уэлча, если допущение о равенстве дисперсий не подтверждается.
5. Зафиксируйте средние значения групп, стандартные отклонения, разность средних, значения t, число степеней свободы, значения p и 95% доверительные интервалы.
6. Рассчитайте d-коэффициент Коэна для каждой разности между группами и интерпретируйте величину эффекта вместе со значением p.
7. Проверьте, соответствует ли направление каждой разности между группами определениям конструктов и корреляционной матрице.
8. Сохраните проверенную таблицу сравнения групп в качестве числового источника для любой визуализации сравнения групп.
9. Представьте результаты этого анализа как контраст между экстремальными профилями субъективного благополучия.
   ПРИМЕЧАНИЕ: Не интерпретируйте сравнение «высокий-низкий» как доказательство причинно-следственной связи.

10. Исследование половых различий

1. Удалите фильтр групп с высоким и низким показателем и вернитесь к полному аналитическому набору данных.
2. Используйте пол в качестве описательной группирующей переменной, а не как причинный фактор воздействия.
3. Сравните ответы женщин и мужчин по показателям отрицательных эмоций, академической прокрастинации, чувства принадлежности к школе, мышления высшего порядка и субъективного благополучия.
4. Перед проведением сравнения проверьте объемы выборок для каждой группы, наличие пропусков, распределения и равенство дисперсий.
5. Используйте t-критерий для независимых выборок, если допущения соблюдены. Используйте t-критерий Уэлча, если допущение о равенстве дисперсий не подтверждается.
6. Зафиксируйте средние значения по группам, стандартные отклонения, разность средних, значения t, число степеней свободы, значения p, 95% доверительные интервалы и значения d Коэна.
7. Интерпретируйте половые различия описательно и укажите величину эффекта вместе со значениями p.
8. Не используйте результаты сравнения по полу для обоснования исключения данных post hoc, модификации шкал или причинной интерпретации.
   ПРИМЕЧАНИЕ: Сравнения по полу включены в данный рабочий процесс анализа одномоментного опроса в качестве описательных проверок подгрупп.

11. Оценка регрессионной модели

1. В качестве зависимой переменной используйте показатель субъективного благополучия.
2. В качестве одновременных предикторов на уровне шкал используйте отрицательные эмоции, академическую прокрастинацию, чувство принадлежности к школе и мышление высокого порядка²¹.
3. Используйте непрерывные переменные на уровне шкал, полученные в процессе подсчета баллов по шкалам. Не заменяйте непрерывный показатель субъективного благополучия переменной группировки «высокий-низкий».
4. Постройте основную модель, используя множественную линейную регрессию с одновременным вводом предикторов.
5. Зафиксируйте нестандартизированные коэффициенты, стандартизированные коэффициенты, стандартные ошибки, значения t, значения p, 95% доверительные интервалы, R², скорректированный R², толерантность и фактор инфляции дисперсии.
6. Используйте значения фактора инфляции дисперсии ниже 5,00 в качестве порога отсутствия выраженной мультиколлинеарности.
7. Изучите двумерные диаграммы рассеяния, графики частичной регрессии или графики компонентов и остатков, чтобы оценить, являются ли связи между предикторами и субъективным благополучием приблизительно линейными.
8. Оцените независимость остатков с помощью статистики Дарбина-Уотсона.
9. Оцените нормальность распределения остатков с помощью Q-Q графика остатков и формального теста на нормальность, если это применимо для данного объема выборки.
10. Оцените гомоскедастичность с помощью графика зависимости стандартизированных остатков от стандартизированных прогнозируемых значений.
11. Сохраните стандартизированные остатки, стандартизированные прогнозируемые значения, значения рычага (leverage) и расстояние Кука для проведения диагностической проверки.
12. Рассчитайте дополнительную скорректированную модель, включающую четыре психологических предиктора и демографические переменные, указанные в описании выборки (пол, возраст, курс обучения, категория учебного заведения и категория академической специальности), если эти переменные доступны и имеют адекватное распределение.
13. Сравните основную модель с дополнительной скорректированной моделью. Зафиксируйте, остаются ли направление, величина и статистическая интерпретация четырех психологических предикторов стабильными после демографической корректировки.
14. Сохраните проверенные стандартизированные коэффициенты и 95% доверительные интервалы основной модели в качестве числовой исходной таблицы для построения графика коэффициентов в разделе «Репрезентативные результаты»²².
    ПРИМЕЧАНИЕ: Интерпретируйте коэффициенты регрессии как условные связи, а не как причинно-следственные эффекты. Модель с демографической корректировкой используется в анализе чувствительности, чтобы оценить, остаются ли выводы рабочего процесса стабильными после учета имеющихся фоновых переменных.

12. Диагностика регрессионной модели

1. Проверьте стандартизированные остатки построенной регрессионной модели. Отметьте случаи, в которых абсолютное значение стандартизированного остатка превышает 3,00.
2. Оцените значения рычага (leverage) и расстояние Кука для выявления влиятельных наблюдений.
3. Отметьте наблюдения с расстоянием Кука более 4/n как потенциально влиятельные, где n — размер аналитической выборки. Рассматривайте расстояние Кука более 1,00 как порог сильного влияния, а не как единственный критерий отсева.
4. Изучите график остатков в зависимости от прогнозируемых значений на предмет нелинейности, неоднородности дисперсии и необычной кластеризации.
5. Проанализируйте график Квантиль-Квантиль (Q-Q plot) остатков и результат теста на нормальность распределения остатков. Зафиксируйте, подтверждает ли оценка нормальности возможность использования линейной модели для дескриптивного анализа ассоциаций.
6. Запишите значение статистики Дарбина-Уотсона и определите, является ли независимость остатков приемлемой.
7. Сверьте все отмеченные случаи с журналом скрининга, журналом проверки оценок и критериями соответствия.
8. Сохраняйте отмеченные случаи, если они представляют собой достоверные наблюдения и не являются следствием ошибок ввода данных, ошибок оценивания, дублирующих заявок, нарушений критериев соответствия или задокументированных проблем с качеством ответов.
9. Исправляйте или удаляйте отмеченный случай только в том случае, если в ходе аудита выявлена задокументированная процедурная ошибка, ошибка соответствия, кодирования, оценивания или ввода данных.
10. После любого задокументированного исправления повторно запустите регрессионную модель и сравните коэффициенты, доверительные интервалы, R², скорректированный R² и результаты диагностических тестов с исходной моделью.
11. Проведите проверку чувствительности к влиянию, повторно построив модель после исключения случаев с расстоянием Кука более 4/n. Укажите, изменилась ли содержательная интерпретация результатов.
12. Занесите окончательное диагностическое решение в журнал анализа, включая количество случаев, отмеченных по стандартизированным остаткам, количество случаев с расстоянием Кука более 4/n, максимальное расстояние Кука, статистику Дарбина-Уотсона, а также заключение по проверкам нормальности остатков и линейности.
    ПРИМЕЧАНИЕ: Не удаляйте влиятельные случаи исключительно с целью улучшения соответствия модели. Удаление или исправление должны основываться на задокументированной причине, зафиксированной в ходе аудита.

Результаты

Аналитический набор данных, сформированный после скрининга ответов
В результате рабочего процесса скрининга ответов был сформирован аналитический набор данных, содержащий 420 анонимизированных записей студентов из 448 представленных анкет. В журнале скрининга были зафиксированы все этапы принятия решений. Шесть записей были удалены из-за отсутствия согласия или несоответствия критериям отбора, пять дублирующих заявок были удалены, четыре записи были исключены, поскольку более 20% всех пунктов шкал от...

Обсуждение

Данный протокол стандартизирует распространенный, но часто недостаточно подробно описываемый процесс в исследованиях благополучия на основе опросников: переход от необработанных записей ответов к отфильтрованным данным, вычисленным значениям шкал, статистическим результатам и файлам, готовым для визуализации. Вклад этой работы заключается не в разработке новой теории субъективного благополучия или предложении каузальной модели. Вместо этого рабочий процесс обеспечивает проверяемый путь настройки опросника, скрининга отве...

Материалы

Список материалов, использованных в этой статье

Имя	Компания	Каталожный номер	Комментарии
broom R package	CRAN	R package	Используется для преобразования результатов регрессии в структурированные таблицы коэффициентов и сводки моделей.
car R package	CRAN	R package	Используется для проверки коэффициента инфляции дисперсии (VIF) и диагностической поддержки регрессии.
Depression Anxiety Stress Scales-21 source documentation	Psychology Foundation of Australia	Lovibond and Lovibond, 1995	Исходная документация для раздела отрицательных эмоций. В рабочем процессе использовались адаптированные для исследования формулировки, соответствующие современным методам оценки отрицательных эмоциональных состояний.
dplyr R package	CRAN	R package	Используется для фильтрации, перекодирования, группировки данных, создания сводок по потоку отбора участников и подготовки аналитических таблиц.
ggplot2 R package	CRAN	R package	Используется для построения тепловой карты корреляций, графика корреляции субъективного благополучия, графика коэффициентов регрессии и диагностических диаграмм.
Higher-order thinking measurement source documentation	Springer Nature	DOI: 10.1038/s41598-024-70908-3	Исходная документация для раздела мышления высокого порядка. В рабочем процессе использовался адаптированный для исследования набор пунктов, соответствующих аналитическому, оценочному, рефлексивному, интегративному и доказательному мышлению.
IBM SPSS Statistics	IBM Corp.	Version 29.0.2.0	Используется для расчета описательной статистики, альфа Кронбаха’, корреляции Пирсона, t-критериев для независимых выборок и критерия Уэлча’, множественной линейной регрессии, статистики Дарбина-Уотсона, стандартизированных остатков, значений рычага, дистанции Кука’ и коэффициентов инфляции дисперсии.
psych R package	CRAN	R package	Используется для психометрических сводок, проверки альфа Кронбаха’ и омега Макдональда’.
Psychological Sense of School Membership Scale source documentation	Wiley	Psychol Sch. 1993;30(1):79-90	Исходная документация для раздела принадлежности к школе. В рабочем процессе использовались адаптированные для исследования формулировки, соответствующие субъективному ощущению принятия, связи, поддержки и принадлежности в школьной среде.
R statistical environment	R Foundation for Statistical Computing	Version 4.4.2	Используется для вторичной аналитической проверки, расчета омега Макдональда’, проверки чувствительности по Спирмену, подготовки результатов регрессии, подготовки диагностических данных и создания исходных данных для визуализации.
readxl R package	CRAN	R package	Используется для импорта экспортированных данных опросников из электронных таблиц в рабочий процесс проверки в R.
Subjective Well-being Scale for Chinese Citizens source documentation	Scientific & Academic Publishing	DOI: 10.5923/j.ijap.20190905.01	Исходная документация для раздела субъективного благополучия. В рабочем процессе использовались адаптированные для исследования формулировки и пункты с обратной шкалой оценки, соответствующие удовлетворенности жизнью, смыслу, поддержке, прогрессу, неудовлетворенности, беспомощности и опыту благополучия, связанному со стрессом.
Supplementary File 1: Questionnaire structure and scale documentation	Authors	Supplementary File 1	Содержит структуру проведенного опроса, порядок конструктов, происхождение шкал, коды пунктов, якоря ответов, направление подсчета баллов, правила обратного кодирования, построение баллов на уровне шкал и информацию о статусе документации.
Tuckman Procrastination Scale source documentation	SAGE Publications	Educ Psychol Meas. 1991;51(2):473-480	Исходная документация для раздела академической прокрастинации. В рабочем процессе использовались адаптированные для исследования формулировки, соответствующие академическим задержкам и поведению по откладыванию задач.
Wenjuanxing online questionnaire platform	Changsha Ranxing Information Technology Co., Ltd.	Web-based platform	Используется для получения электронного согласия, программирования опросника, сбора ответов, фиксации меток времени, записи длительности заполнения, проверки дубликатов заявок и экспорта первичных ответов.