このコンテンツを表示するには、JoVEへの購読が必要です。 または、無料トライアルをお申し込みください。

方法論記事

学部生のウェルビーイング質問票データのスクリーニング、スコアリング、および可視化のための構造化ワークフロー

109 回視聴

⸱

DOI:

10.3791/72304

⸱

2026年9月3日

この記事について

サマリー

本プロトコルでは、匿名化された学部生のウェルビーイングに関する質問票データの処理において、生データの書き出しと回答のスクリーニングから、尺度のスコアリング、信頼性の検証、回帰診断、図表ソースの確認、そして可視化可能な解析出力に至るまで、構造化され監査可能なワークフローを実演します。

要約

質問票を用いた研究は、学生のウェルビーイングを調査するために広く利用されていますが、生の回答から分析可能な変数、統計表、および視覚的出力に至る手順上の経路は、十分に文書化されていないことが多くあります。本プロトコルでは、複数のリッカート尺度セクションを用いて収集された、匿名化された学部生のウェルビーイングに関する質問票データを処理するための、構造化され監査可能なワークフローを提示します。このワークフローは、倫理承認、同意書の作成、質問票の設定、および生データのエクスポートから始まり、その後、回答のスクリーニング、重複回答の確認、欠損データの処理、項目のコーディング、逆転項目の得点付け、信頼性の評価、記述統計分析、相関分析、対照群比較、回帰モデリング、診断チェック、および可視化用ソースの作成へと進みます。例として用いる質問票には、Depression Anxiety Stress Scales-21、Tuckman Procrastination Scale、Psychological Sense of School Membership Scale、高次思考測定に関する文献、および主観的ウェルビーイング尺度の文書に基づき、出典が明記され研究に合わせて調整された尺度セクションを使用しています。項目レベルの回答をどのように追跡可能な分析出力に変換できるかを示すため、例として尺度レベルの変数に負の感情、学業的先延ばし、学校への帰属感、高次思考、および主観的ウェルビーイングを使用します。代表的な出力には、スクリーニングフロー表、デモグラフィック要約、記述統計および範囲確認統計、内部整合性の推定値、相関行列、対照比較結果、回帰係数、残差および影響度の診断、および図表用ソースファイルが含まれます。本プロトコルでは、事前に規定された決定ルール、リンクされた尺度マップ、分析前スクリーニングログ、逆転得点の検証、および図表のための数値ソースの検証を重視しています。新しい心理測定尺度を提案したり、測定モデルを検証したり、因果関係を立証したりするのではなく、本手法は、質問票ベースの学部生のウェルビーイングデータをスクリーニング、得点化、分析、および可視化する必要がある研究者に、実用的で監査可能な手順を提供します。このワークフローは、分析前に尺度マップ、倫理承認、得点ルール、回答スクリーニングの閾値、および可視化用ソースファイルが定義されていれば、関連する質問票ベースの研究に適応させることが可能です。

概要

主観的ウェルビーイングは、学生が自らの生活、感情的な経験、社会的関係、および学習環境における日常的な機能をどのように評価しているかを反映するため、学生を対象とした研究において重要なアウトカムとなります。高等教育における学生のウェルビーイングは、単なる人生への満足度や心理的苦痛のみに限定されるものではなく、多次元的なものです1。したがって、研究者が感情的、行動的、社会的、認知的、およびウェルビーイングに関連する経験を同一の分析枠組みの中で検討する必要がある場合、アンケートデータは引き続き有用な手段となります。

アンケートデータの価値は、選択した構成概念だけでなく、生の回答をどのように分析変数に変換するかによっても決まります。多くの研究では、生の記録を最終的な表や図に結びつける中間的な決定プロセスを示すことなく、尺度スコア、相関行列、群間比較、または回帰モデルを報告しています。欠損回答の処理が一貫していなかったり、逆転項目のコーディングに誤りがあったり、重複した提出分がデータセットに残っていたり、不注意な回答が有効な観測値として扱われたりすることがあります。したがって、欠損データの処理に関する決定は、不可視な事後的なステップとして扱うのではなく、計画し、記録し、報告されるべきです2。また、オンラインアンケートデータでは、回答速度が速すぎるケース(speeding)、直線的な回答(straight-lining)、矛盾した回答、その他の低努力な回答パターンが、記述統計、信頼性推定値、および観察された関連性を歪める可能性があるため、回答の質に関する明確なルールが必要です3。

本プロトコルの新規性は、アンケートの生データのエクスポートから最終的な統計的・視覚的アウトプットに至るまで、連鎖的な監査証跡(オーディットトレイル)を構築している点にあります。具体的には、このワークフローでは、完成した尺度マップ、分析前のスクリーニングログ、逆転項目のスコアリングチェックポイント、スコアリング検証ログ、図表のための数値ソース検証、および各表や図をソースファイルに結びつける監査トレースが追加されています。これにより、本手法は標準的なアンケートデータのクリーニング、尺度のスコアリング、信頼性テスト、または視覚化の手法とは明確に区別されます。単にアンケートデータがクリーニングおよび分析されたと述べるのではなく、本プロトコルでは、どのファイルがロックされ、どのファイルがスクリーニングされ、どのルールが適用され、どの尺度スコアが生成され、そしてどの検証済み数値テーブルが各視覚的アウトプットの作成に使用されたかを具体的に規定しています。

このワークフローでは、負の感情、学業的先延ばし、学校への帰属感、高次思考、および主観的幸福感という5つの尺度レベルの変数を含む、匿名化された大学生のアンケートデータを用いて実演します。これらの構成概念は、構造化され監査可能な1つのワークフロー内で、感情的、行動的、学校環境的、認知的、およびアウトカム指向の例を提供するために選定されました。学業的先延ばしは、大学生におけるうつ、不安、ストレス関連のアウトカムを含む、後のメンタルヘルスの問題に関連していることが示されています4。また、学生集団において学校への帰属感と主観的幸福感は密接に関連しており、帰属感および幸福感に関する指標を同一のアンケート処理フレームワークに含めることを支持しています5。ただし、本プロトコルにおいて、これらの構成概念は因果的な心理モデルを構築するためではなく、ワークフローを実演するために使用されています。

このプロトコルの中心的な特徴は、データ処理に関する決定を実質的な解釈から分離している点にある。スケールマップは分析前に作成し、回答品質の基準はスケールスコアリング前に固定し、逆転項目のスコアリング検証は統計検定前に完了させ、図表は数値ソーステーブルの確認後にのみ作成する。リッカート形式の回答尺度では、項目の文言、回答アンカー、スコアリングの方向、および統計処理の間で慎重な整合性を図る必要があるため、この順序が重要となる6。また、本プロトコルでは、モデルの複雑さよりも、透明性のある前処理とスコアリング検証を優先させている。学生による研究においては、予測モデルや多変数モデルが有用な場合があり7、また、検証済みの数値行列に基づいたグラフィカルな要約は解釈を向上させることができるが8、そのどちらも入力変数の透明な準備に依存している。そのため、本ワークフローでは、相関分析、対照群比較、回帰モデリング、診断チェック、および可視化を、必須の実質的な主張としてではなく、例示的なモジュールとして使用している。

本プロトコルは、匿名化された学生のウェルビーイング・データの処理に向けた実用的なアンケート処理ワークフローを必要とする研究者を対象としています。オンラインプラットフォームから項目レベルのアンケート回答がエクスポートされ、リッカート尺度形式の項目から尺度レベルの変数を算出する必要があり、かつ、透過性の高い記述統計、相関分析、群間比較、回帰分析、診断、および可視化可能なアウトプットの作成を目的とする場合に適しています。本プロトコルは、因果関係の立証、新規尺度の妥当性検証、確認的因子分析の代替、測定不変性検定の代替、あるいは項目応答理論や潜在変数モデリングの代替を目的としたものではありません。本プロトコルの寄与は手続き的な点にあり、アンケートの記録から報告用の表や図に至るまでの経路を、可視化され、再現可能で、監査可能なものにすることにあります。この焦点は、オンライン調査データの質9、回帰分析および影響度のチェック10、および監査可能なアンケートベースの分析ワークフロー11に関する現在の関心事と一致しています。

アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。

プロトコル

ヒト参加者を対象とした本研究は、貴州開放大学航空学院の倫理委員会によって審査および承認されました(承認番号:GZOU-EDU-2024-015)。本研究は、匿名かつ自発的なアンケート形式を採用しており、参加者へのリスクが最小限であるため、倫理的免除の対象になると委員会により判断されました。すべての参加者は、アンケートに回答する前に電子的なインフォームドコンセントを提供し、不利益を被ることなくいつでも回答を中断することができました。一部の項目で、負の感情、ストレス、孤独感、無力感、不満、またはそれに関連するウェルビーイングの経験について尋ねているため、不快感を覚えた参加者のために、同意ページおよびアンケートの最終ページに研究者および所属機関の連絡先を記載しました。本プロトコルで使用したデータセットは、スクリーニング、スコアリング、分析、および可視化の前に匿名化されました。アンケートの全文は以下に提供されています。 補足ファイル 1.

1. 質問票、倫理関連資料、およびワークフロー資料の作成

  1. アンケートのプログラミングを行う前に、適格集団、研究設定、アンケートの構成概念、および計画している解析出力を定義してください。
  2. 対象集団、募集経路、質問票の内容、推定所要時間、匿名性の保護、データ保存方法、同意撤回の手順、参加者へのサポート情報、および計画している解析内容を網羅した倫理審査申請書を作成してください。
  3. データ収集を開始する前に、倫理承認書または免除申請書、同意説明文、募集文、アンケートのバージョン、参加者支援情報、および計画されたワークフローをプロジェクトフォルダに保存してください。
  4. 対象集団を、18歳以上で現在高等教育機関に在籍し、質問紙の内容を理解でき、かつインフォームド・コンセントを提供することが可能なフルタイムの学部生と定義する。
  5. リクルート前に除外基準を定義する。同意を拒否した回答者、ターゲット集団の定義を満たさない回答者、重複して回答した回答者、欠損データの閾値を超えた回答者、またはステップ1.4で説明した複合的な無効回答基準に該当する回答者を除外する。
  6. インフォームド・コンセントの声明文をアンケートの冒頭に配置してください。そこには、研究目的、参加の自発性、所要時間(約12分)、匿名性の保護、同意撤回権、データの利用計画、研究者の連絡先、およびサポート窓口の連絡先を記載してください。
  7. 学生番号、国民識別番号、携帯電話番号、個人のメールアドレス、寮の住所、またはその他の個人識別子を含む、直接的な個人特定情報を収集しないでください。
  8. アンケートを、インフォームドコンセント、人口統計学的情報、ネガティブ感情項目、学業先延ばし項目、学校への帰属感項目、高次思考項目、および主観的ウェルビーイング項目の順に構成してください。
  9. アンケートを作成する前に、使用する測定尺度を選択してください。本プロトコルでは、ネガティブ感情の評価に21項目のDepression Anxiety Stress Scales-21を、学業先延ばし傾向の評価に16項目のTuckman Procrastination Scaleを、学校への帰属感の評価に18項目のPsychological Sense of School Membership Scaleを使用しました。また、高次思考については既報の高次思考測定文献から改変した20項目の高次思考項目セットを用い、主観的ウェルビーイングについては大学生向け研究用の20項目の主観的ウェルビーイング尺度を用いて評価しました。12,13,14,15,16.
  10. アンケートを作成する前に、確定した尺度マップを準備してください。これには、構成概念名、元の尺度名、元の引用文献、言語バージョン、許諾または承認状況、翻訳または適応の手順、項目コード、項目の文言、回答範囲、回答アンカー、得点方向、逆転項目の有無、最終的な尺度レベルの変数、および採点ルールを含めてください。
  11. 出典となる測定尺度、引用文献、妥当性の根拠、および適応または翻訳の状態が文書化されている場合にのみ、項目セットを妥当性が確認された尺度として記述してください。著者によって作成された項目セット、または研究固有の項目セットを特定し、 表1 および 補足ファイル 1.
  12. データ収集を開始する前に、測定フレームワークを確定させてください。翻訳または翻案された尺度を使用する場合は、被験者の募集を開始する前に、翻訳、レビュー、整合性の確認、およびパイロットチェックを完了させてください。
  13. ロック済みの質問票ファイル、スケールマップ、生データ書き出しチェックリスト、スクリーニングログ、スコアリング検証ログ、解析ログ、図表ソーステーブルテンプレート、および解析構文またはスクリプトファイルを含む、ワークフロー監査パッケージを作成してください。
  14. すべてのワークフロー・アーティファクトにバージョン管理されたファイル名を使用してください。
  15. 各監査ファイルに必要な列を定義してください。
    1. スクリーニングログには、レコードID、スクリーニング基準、フラグ状態、除外状態、除外理由、判定日、およびレビュー者のイニシャルが記録されます。
    2. 尺度マップには、構成概念名、尺度の出典、項目コード、項目の文言、回答範囲、回答アンカー、逆転項目の有無、最終変数名、スコアリングルール、および使用許諾または翻案状況が含まれます。
    3. スコアリング検証ログには、項目コード、元の値の範囲、再コード化後の値の範囲、逆転項目の算出式、範囲チェック結果、不一致ステータス、修正内容、および修正日が含まれます。
    4. 図表ソーステーブルには、図番号、パネル番号、ソーステーブル、プロットされた変数、表示された統計量、サンプルサイズ、および検証ステータスが含まれています。
  16. アンケートのプログラミングを開始する前に、以下の解析ワークフローを定義してください:調査の実施、生データのエクスポート、回答のスクリーニング、尺度の得点化、信頼性の評価、記述統計解析、相関分析、高低群の比較、回帰モデリング、診断チェック、および可視化の準備17.
  17. ソフトウェアのメニューパスではなく、意思決定、操作、および検証アウトプットを中心にプロトコルを構成してください。
  18. 機関およびジャーナルのポリシーで許可されている場合は、質問票ファイル、スケールマップ、スクリーニングログテンプレート、スコアリングログテンプレート、解析構文またはスクリプトファイル、および図のソーステーブルを含むワークフローリソースを提供してください。
    注: 図1 アンケートの作成から、生データの書き出し、回答のスクリーニング、尺度の得点化、統計解析、診断チェック、そして可視化出力までの工程を示しています。 表1 各構成概念について、使用した測定尺度、項目数、回答範囲、採点枠組み、逆転項目の処理ルール、許諾または改変の状況、および最終的な尺度レベルの変数を報告する。

2. 質問紙の設定と配布

  1. アンケートプラットフォームが、同意ゲート(consent gating)、必須項目、重複投稿の確認、タイムスタンプの取得、および回答所要時間の記録に対応していることを確認してください。
  2. 記載されているオンライン調査プラットフォームを使用して、アンケートを作成します。 材料一覧表確定したスケールマップに従って、アンケートをプログラミングしてください。
  3. 調査リンクを公開する前に、プログラムされた質問票と確定したスケールマップを項目ごとに照合してください。修正箇所はすべてスタディログに記録してください。
  4. インフォームド・コンセントの項目を、最初の必須項目として設定してください。参加者が「参加に同意しません」を選択した場合、アンケートを自動的に終了するように設定してください。
  5. ステップ1.8で確定した順序に従い、人口統計学的属性および心理尺度セクションをプログラミングしてください。尺度マップと一致するアイテムコードを使用してください。
  6. 倫理的承認または免除によって許可されており、かつ参加者が不利益なく辞退できる場合に限り、必要に応じて心理尺度の項目を必須回答に設定してください。強制回答が許可されていない場合は、データ収集前に欠損データの処理ルールを記録してください。
  7. 各尺度セクションの前に回答アンカーを表示し、各尺度内でアンカーの一貫性を維持してください。18.
  8. 調査プラットフォームにこの機能がある場合は、重複した回答の送信を無効にしてください。重複回答の確認に必要な、匿名化されたデバイス、ブラウザ、プラットフォーム、または送信識別子は保持してください。
  9. 提出時間および完了所要時間の自動記録を有効にします。
  10. アンケートの回答期間を暦日で7日間に設定するか、または倫理委員会によって承認された収集期間を適用してください。
  11. 承認済みの機関のリクルートチャネルを通じて、アンケートのリンクを送信してください。すべての参加者に対し、同一の書面による指示を提供してください。
  12. あらかじめ指定した収集期間の終了後、アンケートを締め切ってください。
    注:スタディログ内の募集文言、アンケートへのリンク、開始日および終了日、プラットフォーム設定、同意文言、アンケートの最終バージョン、およびプラットフォームからのエクスポート設定はそのまま保持すること。

3. 生データの書き出しと保存

  1. 収集期間の終了後、すぐに完了したアンケート回答をスプレッドシート形式でエクスポートする。
  2. 最初にエクスポートしたファイルを、ロックされた生データセットとして保存する。このファイルは編集してはならない。
  3. スクリーニング、スコアリング、および解析用に作業コピーを1つ作成する。ファイル名には日付、バージョン番号、およびプロジェクト識別子を含める。
  4. エクスポートされたファイルに、回答者1人につき1行、および人口統計学的変数、アンケート項目、タイムスタンプ変数、プラットフォーム変数、または派生プラットフォームフィールド1つにつき1列が含まれていることを確認する。
  5. ロックされた生データセット、作業コピー、スケールマップ、アンケートファイル、スタディログ、スクリーニングログ、スコアリング検証ログ、解析ログ、図のソーステーブル、および構文またはスクリプトファイルを、パスワード保護されたプロジェクトフォルダに保存する。
  6. データセットに直接的な個人識別情報が含まれていないか確認する。解析前に、作業コピーから予期しない識別フィールドを削除し、フィールド名、削除理由、削除日、および担当レビュー担当者をスタディログに記録する。
  7. 参加者レベルのデータを共有または公開する前に、間接的な識別可能性を確認する。性別、年齢、学年、機関カテゴリー、および専攻分野カテゴリーの組み合わせによって作成される小規模な人口統計学的セルを確認する。セルに含まれる回答者が5人未満である場合は、カテゴリーを統合するか、セルを秘匿するか、集計データのみを提供する。
  8. 参加者レベルのデータの利用可能性、倫理的またはプライバシー上の要件による制限の有無、あるいは集計ワークフローデータセットへの置き換えの有無など、データの可用性ステータスをスタディログに記録する。
  9. データクリーニングの前にスクリーニングログを作成する。元のサンプルサイズ、スクリーニング基準、フラグを立てたレコード数、削除したレコード数、保持したレコード数、除外理由、判定日、およびレビュー担当者のイニシャルを記録する。
  10. 統計解析の前に解析トレースファイルを作成する。ソフトウェア名、ソフトウェアバージョン、オペレーティングシステム、ファイル名、データバージョン、スクリプトまたは構文のバージョン、および各解析実行日を記録する。
    注意:ロックされた生データセットは検証のみに使用すること。すべてのスクリーニング、スコアリング、および解析は作業コピーを用いて行うこと。

4. 回答のスクリーニングおよび解析データセットの構築

  1. スケールレベルのスコアを算出する前に、あらかじめ規定された除外ルールおよび品質管理ルールを適用してください。
  2. 以下の順序で、ワーキングコピーにスクリーニングルールを適用してください:同意ステータス、適格性、重複投稿、欠損データ、回答所要時間、直線的回答、範囲外の値、および複合的な回答品質指標。
  3. 各スクリーニング操作の後、フラグを立てたレコード数、削除したレコード数、および保持したレコード数をスクリーニングログに記録してください。作業ファイルの以前のバージョンを上書きしないでください。
  4. インフォームドコンセントの項目が「いいえ」とマークされているか、または未回答であるすべてのレコードを削除してください。
  5. ステップ1.4で定義された選択基準を満たさないすべてのレコードを削除します。
  6. 匿名回答識別子、提出時刻、プラットフォームの重複提出フラグ、および繰り返される回答パターンを用いて、重複提出のスクリーニングを行う。
  7. 重複したエントリが検出された場合は、後の完全な回答を保持することを支持する記録上の理由がない限り、最初に完了した提出分を保持してください。
  8. 尺度スコアを算出する前に、すべての回答品質ルールを適用してください。 表2 ワークフローで使用される除外しきい値、フラグ立てしきい値、根拠、文献的根拠、および感度分析計画についてまとめる。
  9. 欠損データのスクリーニングを行う。全尺度項目の20%以上に欠損がある回答者は除外する。単一の項目のみが欠損している場合は、その尺度の少なくとも80%が回答されている場合に限り、当該回答者の同尺度における平均スコアで補完する。人口統計学的変数については、その変数がどの解析においても使用されない場合を除き、補完を行わない。
  10. 尺度項目の欠損値が20%を超えたため除外された回答者数と、尺度内平均値代入法を適用した回答者数を記録する。今回のデータセットでは、尺度項目の欠損値が20%を超えたため4名の回答者が除外され、21名の回答者に対して、孤立した37件の欠損項目への尺度内平均値代入が行われた。
  11. 回答時間にスクリーニングを行い、180秒未満で完了した回答にフラグを立てる。この値は自動的な除外ルールではなく、スピード回答(speeding)のフラグとして扱う。
  12. 直線的な回答パターンがないかスクリーニングを行う。すべてのリッカート尺度項目において、90%以上の項目で同じ選択肢が選ばれている場合にフラグを立てる。この値は、自動的な除外ルールではなく、回答パターンのフラグとして扱うこと。
  13. 重複投稿の証拠、不可能なタイムスタンプ、異なる投稿間での回答文字列の繰り返し、またはプラットフォームのメタデータとアンケート内容との矛盾など、その他の低負荷指標(low-effort indicators)をスクリーニングしてください。
  14. 少なくとも2つの品質管理指標が、極端に短い回答完了時間と直線的な回答パターンの組み合わせ、重複提出の証拠、あるいは不可能なプラットフォームメタデータなどの無効な回答を示唆する場合にのみ、フラグが立てられた回答を削除してください。19.
  15. 保持された場合も含め、フラグが立てられたすべてのレコードを記録してください。現在のデータセットでは、回答完了時間に基づいて19件の回答にフラグが立てられました。 < 180秒、8件の回答が~としてフラグを立てられました >90%の直線的な回答(straight-line responding)が見られたほか、2つ以上の回答品質指標に該当したため13件の記録が除外された。
  16. 範囲外の値がないかスクリーニングを行う。負の感情の項目が1~4の範囲内であること、学術的先延ばし、学校への帰属感、および高次思考の項目が1~5の範囲内であること、そして主観的ウェルビーイングの項目が1~6の範囲内であることを確認する。
  17. 元のエクスポートデータに明らかにフォーマットエラーがある場合にのみ、値を修正してください。心理学的スコアが異常に高い、あるいは低いように見えても、それが有効な数値である場合は変更しないでください。
  18. 提出済み質問票、同意および適格性による除外、重複による除外、欠損データによる除外、回答品質フラグ、統合品質管理による除外、個別項目の補完、維持された分析ケース、および最終的な分析サンプルサイズを報告するスクリーニングフロー表を作成してください。
  19. ロックされたスクリーニングログを使用してスクリーニングフロー表を完成させ、スクリーニング決定のエクスポート済み監査記録を保持してください。現在のデータセットにおけるスクリーニングフローは以下の通りです。提出されたアンケート、 n = 448; 同意または適格性による除外、 n = 6。重複した投稿は削除した。 n = 5;以下の理由で除外された記録: >尺度項目の20%の欠損、 n = 4;2つ以上の回答品質指標により除外された記録、 n = 13、最終解析データセット n = 420.
  20. 保持された記録を解析データセットとして保存してください。ファイル名には新しいバージョンを付与し、スクリーニングログを解析データセットと共に保存してください。
    注意: 記録された回答品質の問題がない限り、有効な極端なスコアは保持してください。

5. 心理尺度をスコアリングする

  1. 回答のスクリーニングが完了し、分析用データセットが保存された後にのみ、項目レベルの回答を尺度レベルの変数に変換してください。
  2. ロックされた質問票の回答アンカーおよびスケールマップの採点ルールに従って、すべてのリッカート尺度形式の項目をコーディングしてください。
  3. 元の項目変数は変更せず、リコードまたは逆転項目については、別途、派生変数を作成してください。
  4. 固定スケールマップおよび対応する元の測定尺度または採点マニュアルに従って、各スケールを採点してください。
  5. 主観的幸福感のスコアを算出する前に、指定された主観的幸福感の項目を逆転得点化してください。1〜6の回答尺度の場合、各逆転項目を「7マイナス元のスコア」として算出し、導出された変数名の末尾に _R を付加してください。
  6. 主観的幸福感を算出する際は、元の変数ではなく、逆スコア化した変数を使用してください。
  7. 各尺度レベルのスコアを、保持された項目の平均値として算出する:負の感情、学業先延ばし、学校への帰属感、高次思考、および主観的幸福感。
  8. 最終的な尺度レベルの変数名を、ネガティブ感情、学業先延ばし、学校への帰属感、高次思考、および主観的ウェルビーイングとして定義してください。
  9. 各尺度レベルの変数の最小値および最大値を、その理論的な応答範囲と照らし合わせて検証してください。スコアが期待される範囲外にある場合は、コーディング、逆転項目の処理、および欠損値の処理を再確認してください。
  10. 推論分析を行う前に、各尺度の方向性が尺度マップと一致していることを確認してください。高得点が、その構成概念の意図した方向性を反映している必要があります。
  11. 分析前に逆転項目のスコアリング監査を実施すること。ランダムに抽出したレコードのサブセット、または可能であればすべての逆転項目について逆転スコアを再計算し、その監査結果をスコアリング検証ログに記録すること。
  12. スコアリングエラーが検出された場合は、導出変数を修正し、影響を受けた尺度スコアを再生成し、スコアリング検証ログを更新した上で、修正後の解析データセットに基づき、すべての後続解析および図表のソーステーブルを再実行してください。
    注意:相関分析、群間比較、回帰モデリング、または可視化を行う前に、逆転項のスコアリングおよび範囲確認を必須のチェックポイントとして実施してください。

6. 内部一貫性と記述特性の評価

  1. ロックされたスケールマップで定義された項目変数を用いて、各尺度の内部一貫性、修正項目合計相関、および記述統計量を算出する。
  2. 各尺度のCronbach’s alpha、項目数、有効サンプルサイズ、修正項目合計相関、および項目削除時アルファ値を記録する。
  3. 本ワークフローでは、許容可能な最小信頼性の閾値としてCronbach’s alpha 0.70を使用する。項目を削除する前に、項目の文言、得点の方向性、逆転項目の処理、構成概念との整合性、および元の尺度のドキュメント20を確認すること。
  4. 解析環境でサポートされている場合は、補完的な信頼性推定値としてMcDonald’s omegaを算出する。2つの推定値によって信頼性の解釈が異なる場合は、Cronbach’s alphaと共にomegaを報告すること。
  5. 修正項目合計相関が負の値または極めて低い項目については、削除を検討する前に内容を精査する。まずは、コーディング、逆転スコア処理、または構成概念との整合性に問題がないかを確認すること。
  6. Cronbach’s alphaを上昇させるためだけに項目を削除してはならない。項目の削除は、採点マニュアル、項目の文言、修正項目合計相関、概念的な適合性、および文書化された採点検証に基づいて正当化される必要がある。
  7. 平均、標準偏差、最小値、最大値、歪度、および尖度を含む、5つの尺度レベル変数すべての記述統計量を算出する。
  8. 各尺度において、得可能な最小点および最大点に回答者が集中している割合を記録し、フロア効果またはシーリング効果を確認する。
  9. 信頼性推定値、項目合計診断結果、記述統計量、および採点に関する決定事項を解析ログに記録する。
    注:Cronbach’s alphaは信頼性のチェックポイントとして使用されるものであり、完全な心理計量学的妥当性検証の手順ではない。正式な測定評価が必要な場合は、本ワークフローに加えて、McDonald’s omega、確認的因子分析、測定不変性検定、項目応答理論モデル、またはその他の潜在変数法を併用すること。

7. 相関分析の実施

  1. 検証済みの5つの尺度レベル変数(ネガティブ感情、学業的先延ばし、学校への帰属感、高次思考、および主観的ウェルビーイング)を使用してください。
  2. ピアソン相関を算出する前に、尺度レベルの変数ペアごとの分布および二変量散布図を確認してください。
  3. 変数がほぼ連続的なスコア変動を示しているか、深刻な歪度があるか、非線形関係にあるか、または影響力のある外れ値パターンがあるかを確認してください。
  4. 記述的な関連性分析の前提条件が満たされている場合に、すべてのスケールレベル変数のペアについて、ピアソン相関係数および両側p値を算出する。
  5. 相関係数を記録する。 p各変数ペアにおけるp値、サンプルサイズ、および相関の方向。
  6. 相関係数は小数点以下3桁まで記載してください。
  7. 各係数の方向性を尺度マップと比較してください。係数が意図した構成概念の方向性と矛盾している場合は、項目のスコアリングを再確認してください。
  8. 検証済みの相関行列を、「代表的な結果(Representative Results)」セクションにおける相関ヒートマップの数値ソーステーブルとして保存してください。
  9. 分布が著しく歪んでいる場合、順序尺度での感度が必要な場合、または散布図から単調だが非線形な関連性が示唆される場合は、スピアマン相関を用いて分析を繰り返し、関連性の方向性と相対的な大きさを比較してください。
  10. ピアソンおよびスピアマンの結果が、同じ実質的な解釈に至ったかどうかを記録してください。
    注: 相関分析を、記述的な関連性の確認およびスコアリング方向の監査の両方として利用してください。

8. 主観的幸福度の高群および低群の作成

  1. クリーニングおよびスコアリング済みの分析用データセットを使用してください。グループ構成のために、生データのエクスポートファイルに戻ってはいけません。
  2. 回帰モデリングの主要アウトカムには、連続値の主観的幸福感スコアを用いてください。「高・低」のグループ分けは、対照的なプロファイルの比較にのみ使用してください。
  3. 回答者を主観的幸福度スコアの高い順に並べ替えます。
  4. あらかじめ規定した27%の極端群ルールを適用し、主観的幸福度の高群および低群を定義する。この閾値の設定根拠を(〜に)記録する。 表2 および解析ログ。
  5. 上位27%の回答者を主観的幸福度高群に、下位27%の回答者を主観的幸福度低群に割り当てる。
  6. 記述統計、相関分析、男女比較、および回帰モデリングにおいては、全解析データセットの中央46%を保持するが、高低対比分析からはこれらの症例を除外する。
  7. 「主観的ウェルビーイング群」という名前のグループ変数を作成します。上位グループを「高」、下位グループを「低」、それ以外の回答者を「中」とコード化します。
  8. 高群および低群に意図した数の症例が含まれていることを確認してください。27%の境界線でスコアの同点(タイ)が発生した場合は、事前に規定されたタイ処理ルールを適用し、その決定を解析ログに記録してください。
  9. タイスコア(同点)やサンプルサイズの少なさにより、27%の境界線でグループ分けが不安定になる場合は、感度分析を行ってください。三分位グループ分けなど、あらかじめ指定した別のルールを用い、解釈に変更がないか報告してください。
    注:高低グループ分けは記述的な対比手順です。主要な回帰モデルにおける連続的な主観的幸福感スコアに代わるものであってはなりません。

9. 主観的幸福感の高い群と低い群の比較

  1. 分析データセットをフィルタリングし、主観的ウェルビーイングのグループ化変数において「高」または「低」とコード付けされた回答者のみを保持する。
  2. 「高」グループと「低」グループについて、ネガティブ感情、学業先延ばし、学校への帰属感、および高次思考を比較する。
  3. グループ比較を行う前に、各変数のグループ別分布、サンプルサイズ、および分散の等質性を確認する。
  4. 分布と分散の仮定が許容範囲内である場合は、独立標本t検定を用いる。分散の等質性の仮定が支持されない場合は、ウェルチのt検定を用いる。
  5. グループ平均、標準偏差、平均差、t値、自由度、p値、および95%信頼区間を記録する。
  6. 各グループ差についてCohen’s dを算出し、p値とともに効果量を解釈する。
  7. 各グループ差の方向性が、構成概念の定義および相関行列と一致しているかを確認する。
  8. 検証済みのグループ比較表を、グループ比較の視覚化のための数値ソースとして保存する。
  9. この分析を、極端な主観的ウェルビーイング・プロファイル間の対比として報告する。
    注意:高低グループの比較を因果関係の証拠として解釈してはならない。

10. 性差の検討

  1. ハイ・ローグループフィルターを解除し、完全な分析データセットに戻します。
  2. 性を、因果的な暴露因子としてではなく、記述的なグループ化変数として使用します。
  3. 女性の回答者と男性の回答者について、負の感情、学業的先延ばし、学校への帰属感、高次思考、および主観的幸福感を比較します。
  4. 比較を行う前に、グループごとのサンプルサイズ、欠損値、分布、および分散の等質性を確認します。
  5. 前提条件が満たされている場合は、独立標本t検定を使用します。等分散性の仮定が支持されない場合は、ウェルチのt検定を使用します。
  6. グループ平均、標準偏差、平均差、t値、自由度、p値、95%信頼区間、およびCohenのd値を記録します。
  7. 性の差を記述的に解釈し、効果量をp値とともに報告します。
  8. 性の比較結果を、事後的な除外、尺度の修正、または因果関係の解釈を正当化するために使用しないでください。
    注:性の比較は、この横断的アンケートワークフローにおける記述的なサブグループチェックとして含まれています。

11. 回帰モデルの推定

  1. 主観的幸福感を従属変数として使用する。
  2. 負の感情、学業的先延ばし、学校への帰属感、および高次思考を、尺度レベルの同時投入予測変数として使用する21。
  3. 尺度得点化の過程で作成された連続尺度レベルの変数を使用する。連続的な主観的幸福感のスコアを、高低のグループ分け変数に置き換えないこと。
  4. 同時投入法による重回帰分析を用いて、主モデルを適合させる。
  5. 非標準化係数、標準化係数、標準誤差、t値、p値、95%信頼区間、R2、自由度調整済みR2、許容度(tolerance)、および分散拡大係数(VIF)を記録する。
  6. 深刻な多重共線性がないと判断する閾値として、分散拡大係数が5.00未満であることを用いる。
  7. 二変量散布図、偏回帰プロット、または成分+残差プロットを確認し、予測変数と主観的幸福感との関連がおおよそ線形であるかを評価する。
  8. ダービン・ワトソン統計量を用いて、残差の独立性を評価する。
  9. 残差のQ-Qプロットを用い、サンプルサイズに応じて適切な正規性検定を行い、残差の正規性を評価する。
  10. 標準化予測値に対する標準化残差のプロットを用いて、等分散性を評価する。
  11. 診断チェックのため、標準化残差、標準化予測値、レバレッジ値、およびクックの距離を保存する。
  12. 4つの心理学的予測変数に加えて、サンプル記述で報告された人口統計学的変数(性別、年齢、学年、機関カテゴリー、および専攻分野カテゴリー)が利用可能で十分に分布している場合は、これらを含む補足的な調整モデルを推定する。
  13. 主モデルと補足的な調整モデルを比較する。人口統計学的調整後も、4つの心理学的予測値の方向、大きさ、および統計的解釈が安定しているかどうかを記録する。
  14. 検証済みの主モデルの標準化係数および95%信頼区間を、「代表的な結果」セクションの係数プロットのための数値ソーステーブルとして保存する22。
    注: 回帰係数は因果関係ではなく、条件付きの関連として解釈すること。人口統計学的調整モデルは、利用可能な背景変数を考慮した後でもワークフローの結論が安定しているかを評価するための感度分析に使用される。

12. 回帰モデルの診断

  1. 適合させた回帰モデルの標準化残差を確認する。標準化残差の絶対値が 3.00 を超えるケースにフラグを立てる。
  2. 影響力のある観測値について、レバレッジ値とクックの距離を確認する。
  3. クックの距離が 4/n(n は分析サンプルサイズ)を超える観測値を、潜在的に影響力があるとしてフラグを立てる。1.00 を超えるクックの距離は、唯一のスクリーニング境界ではなく、深刻な影響がある参照しきい値として扱う。
  4. 残差対予測値プロットを確認し、非線形性、分散の不均一性、および異常なクラスターがないかを確認する。
  5. 残差 Q-Q プロットおよび残差の正規性検定の結果を確認する。正規性の評価が、記述的な関連性分析のための線形モデルの使用を支持しているかどうかを記録する。
  6. ダービン・ワトソン統計量を記録し、残差の独立性が許容範囲内であるかを判断する。
  7. フラグを立てたすべてのケースについて、スクリーニングログ、スコアリング検証ログ、および適格性基準に照らしてレビューする。
  8. フラグを立てたケースが有効な観測値であり、データ入力エラー、スコアリングエラー、重複投稿、適格性違反、または記録された回答品質の問題を反映していない場合は、そのまま保持する。
  9. 監査証跡によって、記録された手続き的エラー、適格性エラー、コーディングエラー、スコアリングエラー、またはデータ入力エラーが特定された場合にのみ、フラグを立てたケースを修正または削除する。
  10. 記録された修正を行った後、回帰モデルを再実行し、係数、信頼区間、R2、自由度調整済み R2、および診断出力を元のモデルと比較する。
  11. クックの距離が 4/n を超えるケースを除外してモデルを再適合させ、影響感度チェックを行う。実質的な解釈が変化するかどうかを報告する。
  12. 標準化残差によってフラグを立てたケース数、クックの距離が 4/n を超えてフラグを立てたケース数、最大クックの距離、ダービン・ワトソン統計量、および残差の正規性と線形性のチェックによる結論を含め、最終的な診断決定を分析ログに記録する。
    注: モデルの適合度を向上させるためだけに影響力のあるケースを削除してはならない。削除または修正は、監査証跡に基づいた記録済みの理由に基づく必要がある。

アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。

結果

回答スクリーニング後に作成された分析データセット
回答スクリーニングのワークフローにより、提出された448件の質問票から、匿名化された420件の学生記録からなる分析データセットが作成された。スクリーニングログには、各判定ポイントが記録された。同意または適格性要件を満たさなかったため6件の記録が削除され、重複して提出された5件が削除された。また、すべての尺度項目の20%以上に欠損があったため4件の記録が除外され、2つ以上の回答品質指標に該当したため13件の記録が除外された。回答にかかった時間について、19件の回答にフラグが立てられた。 <180秒間で、8件の回答が~としてフラグを立てられました。 >90%の直線的な回答(ストレートライン・レスポンディング)が認められ、21名の回答者に対して、孤立して欠損していた37項目について尺度内平均値代入法を適用した。最終的な解析データセットには、直接的に個人を特定できる参加者情報は含まれず、欠損データの除外基準を超えたケースはなく、また、保持されたすべての項目回答は事前に定義された回答範囲内に収まっていた。スクリーニングのフローは、以下にまとめら...

アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。

ディスカッション

本プロトコルでは、質問票に基づくウェルビーイング研究において一般的でありながら、報告が不十分なことが多いプロセス、すなわち、生の回答レコードから、スクリーニング済みデータ、スコア化された尺度変数、統計出力、および可視化可能なファイルへの移行を標準化します。本プロトコルの寄与は、新しい主観的ウェルビーイング理論の開発や因果モデルの提案ではありません。その代わりに、このワークフローは、質問票の構成、回答のスクリーニング、尺度のスコアリング、信頼性の確認、記述統計分析、関連性分析、回帰診断、および図のソース検証のための監査可能な経路を提供します。この区別が重要なのは、調査ベースの質問票研究における監査可能性は、統計的な解釈が始まる前に行われることが多い手続き上の決定(どのレコードを保持するか、欠損項目をどのように扱うか、逆転項目をどのように処理するか、数値ソーステーブルを視覚的出力にどのようにリンクさせるかなど)に依存するためです。これらの決定を明確にすることで、尺度ベースの研究における疑わしい測定慣行が軽減され23、より透明性の高い研究文化が促進されます24...

アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。

開示事項

著者らに開示すべき利益相反はありません。

謝辞

著者らは、データ収集に際してアンケート調査に協力してくれた大学生に感謝いたします。また、アンケートの配布、データの整理、結果の検証、および表と図の作成を支援してくださった関係教員およびリサーチ・アシスタントに感謝いたします。本研究は、特定の資金提供を受けていません。

アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。

材料

この記事で使用された材料の一覧
名前会社カタログ番号コメント
broom RパッケージCRANRパッケージ回帰分析の出力を、構造化された係数表およびモデル要約表に変換するために使用されます。
car RパッケージCRANRパッケージ分散拡大係数(VIF)の検証および回帰診断のサポートに使用されます。
うつ・不安・ストレス尺度-21(DASS-21)出典ドキュメントオーストラリア心理学財団Lovibond and Lovibond, 1995負の感情セクションのソースドキュメント。ワークフローでは、最近の負の感情状態評価に合わせた、研究用に調整された文言を使用した。
dplyr RパッケージCRANRパッケージデータのフィルタリング、リコーディング、グループ化、スクリーニングフローの要約、および解析テーブルの作成に使用されます。
ggplot2 RパッケージCRANRパッケージ相関ヒートマップ、主観的幸福感の相関プロット、回帰係数プロット、および診断表示の作成に使用。
高次思考測定ソースドキュメンテーションSpringer NatureDOI: 10.1038/s41598-024-70908-3高次思考セクションのソースドキュメント。ワークフローでは、分析的、評価的、省察的、統合的、および根拠に基づいた思考に沿った、研究用に調整されたアイテムセットを使用した。
IBM SPSS StatisticsIBM Corp.バージョン 29.0.2.0記述統計に使用、Cronbach’α係数、ピアソン相関係数、独立標本t検定およびウェルチのt検定’t検定、重回帰分析、ダービン・ワトソン統計量、標準化残差、レバレッジ値、クックの距離’s距離および分散拡大係数。
psych RパッケージCRANRパッケージ心理測定学的要約に使用される、クロンバック’$\alpha$係数の検証、およびMcDonald’s オメガ
学校所属感尺度ソースドキュメンテーションWileyPsychol Sch. 1993;30(1):79-90学校への帰属意識セクションに関するソースドキュメント。ワークフローでは、学校環境における知覚された受容、つながり、サポート、および帰属意識に沿った、研究用に適応させた表現を使用した。
R統計環境R Foundation for Statistical Computingバージョン 4.4.2二次分析検証に使用、McDonald’$\omega$(オメガ)係数、スピアマン相関による感度分析、回帰分析出力の準備、診断出力の準備、および可視化ソースの準備。
readxl RパッケージCRANRパッケージスプレッドシート形式のアンケートエクスポートをR検証ワークフローにインポートするために使用します。
中国市民向け主観的幸福感尺度ソースドキュメンテーション科学的 & 学術出版DOI: 10.5923/j.ijap.20190905.01主観的幸福感セクションの根拠資料。ワークフローでは、研究に合わせて調整された言い回しを用い、人生の満足度、意味、サポート、進歩、不満、無力感、およびストレスに関連する幸福感の経験に整合させた逆転項目を使用した。
補足ファイル1:質問票の構成および尺度のドキュメント著者補足ファイル 1実施された質問票の構成、構成概念の順序、尺度の出典、項目コード、回答アンカー、採点方向、逆転項目の処理規則、尺度レベルの得点算出方法、およびドキュメントのステータス情報を提供します。
Tuckman先延ばし尺度ソースドキュメンテーションSAGE PublicationsEduc Psychol Meas. 1991;51(2):473-480学術的先延ばしセクションのソースドキュメント。ワークフローでは、学術的な遅延およびタスク延期行動に沿った、研究用に適応させた表現を使用した。
Wenjuanxingオンラインアンケートプラットフォーム長沙冉星信息科技有限公司ウェブベースのプラットフォーム電子同意、アンケートのプログラミング、項目回答の収集、タイムスタンプの取得、完了所要時間の記録、重複送信の確認、および生データの書き出しに使用されます。

参考文献

  1. 1. Khatri P et al. Student well-being in higher education: scale development and validation with implications for management education. Int J Manag Educ. 2024;22(1):100933.
  2. Mirzaei A, Carter SR, Patanwala AE, Schneider CR. Missing data in surveys: key concepts, approaches, and applications. Res Social Adm Pharm. 2022;18(2):2308-16.
  3. Gummer T, Roßmann J, Silber H. Using instructed response items as attention checks in web surveys: properties and implementation. Sociol Methods Res. 2021;50(1):238-64.
  4. Johansson F et al. Associations between procrastination and subsequent health outcomes among university students in Sweden. JAMA Netw Open. 2023;6(1):e2249346.
  5. Li X, Kuo YL, Huggins TJ. Perceived feedback and school belonging: the mediating role of subjective well-being. Front Psychol. 2024;15:1450788.
  6. Sönning L. Ordinal response scales: psychometric grounding for design and analysis. Res Methods Appl Linguist. 2024;3(3):100156.
  7. Song P et al. Predictive analysis of college students’ academic procrastination behavior based on a decision tree model. Humanit Soc Sci Commun. 2024;11:869.
  8. Dudáš A. Graphical representation of data prediction potential: correlation graphs and correlation chains. Vis Comput. 2024;40(10):6969-82.
  9. Niessen ASM, Meijer RR, Tendeiro JN. Detecting careless respondents in web-based questionnaires: which method to use? J Res Pers. 2016;63:1-11.
  10. Parsons J, Bao L. A unified approach for outliers and influential data detection: the value of information in retrospect. Stat. 2022;11(1):e442.
  11. Donche V et al. Careless responding in online student learning surveys: profiles and impact on data quality. Frontline Learn Res. 2026;13(3):1-14.
  12. Lovibond SH, Lovibond PF. Manual for the Depression Anxiety Stress Scales. 2nd ed. Psychology Foundation; Sydney; 1995.
  13. Tuckman BW. The development and concurrent validity of the Procrastination Scale. Educ Psychol Meas. 1991;51(2):473-80.
  14. Goodenow C. The psychological sense of school membership among adolescents: scale development and educational correlates. Psychol Sch. 1993;30(1):79-90.
  15. Li D, Fan X, Meng L. Development and validation of a higher-order thinking skills (HOTS) scale for major students in the interior design discipline for blended learning. Sci Rep. 2024;14:20287.
  16. Huang L, Xing Z. A nationwide study on Subjective Well-being Scale for Chinese Citizens (SWBS-cc). Int J Appl Psychol. 2019;9(5):117-27.
  17. DeSimone JA, Harms PD, DeSimone AJ. Best practice recommendations for data screening. J Organ Behav. 2015;36(2):171-81.
  18. Revilla MA, Saris WE, Krosnick JA. Choosing the number of categories in agree-disagree scales. Sociol Methods Res. 2014;43(1):73-97.
  19. Muszyński M. Attention checks and how to use them: review and practical recommendations. ASK Res Methods. 2023;32(1):3-38.
  20. McNeish D. Thanks coefficient alpha, we’ll take it from here. Psychol Methods. 2018;23(3):412-33.
  21. Romeo I, Stanislaw H, McCreary J, Hawley M. The importance of belonging for well-being in college students. PLOS Ment Health. 2024;1(1):e0000057.
  22. Kastellec JP, Leoni EL. Using graphs instead of tables in political science. Perspect Polit. 2007;5(4):755-71.
  23. Flake JK, Fried EI. Measurement schmeasurement: questionable measurement practices and how to avoid them. Adv Methods Pract Psychol Sci. 2020;3(4):456-65.
  24. Nosek BA et al. Promoting an open research culture. Science. 2015;348(6242):1422-5.
  25. Wilkinson MD et al. The FAIR Guiding Principles for scientific data management and stewardship. Sci Data. 2016;3:160018.
  26. Podsakoff PM, MacKenzie SB, Lee JY, Podsakoff NP. Common method biases in behavioral research: a critical review of the literature and recommended remedies. J Appl Psychol. 2003;88(5):879-903.
  27. Vandenberg RJ, Lance CE. A review and synthesis of the measurement invariance literature: suggestions, practices, and recommendations for organizational research. Organ Res Methods. 2000;3(1):4-70.
  28. van de Vijver FJR, Hambleton RK. Translating tests: some practical guidelines. Eur Psychol. 1996;1(2):89-99.
  29. American Educational Research Association, American Psychological Association, National Council on Measurement in Education. Standards for educational and psychological testing. American Educational Research Association; Washington, DC; 2014.

アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。

再版と許可

タグ

リッカート尺度回答スクリーニング逆転項目得点化信頼性評価記述分析相関分析回帰モデリングデータの可視化