Validation qualitative et quantitative d’outils à l’aide d’échelles de notation visant à évaluer la qualité de l’apprentissage par le service universitaire

Résumé

Cet article décrit le protocole de validation qualitative et quantitative d’un instrument d’apprentissage par le service universitaire, en suivant le critère de parcimonie pour créer la version la plus robuste et optimale possible. La méthode de validation qualitative Delphi et l’analyse factorielle exploratoire des moindres carrés non pondérés robustes, en tant que méthode d’optimisation quantitative des éléments, sont utilisées à cette fin.

Résumé

L’apprentissage par le service (SL) est devenu une méthodologie d’apprentissage très efficace ces dernières années, comblant le fossé entre la théorie et la pratique tout en contextualisant l’apprentissage dans des scénarios du monde réel. Il a été mis en œuvre avec succès à tous les niveaux de l’enseignement supérieur, ce qui a permis d’améliorer sensiblement les compétences des étudiants universitaires. Cependant, en tant que méthodologie transformatrice, la traduction automatique en est encore aux premiers stades de développement en termes de méthodes d’évaluation. Par conséquent, il est urgent de concevoir et de valider des instruments de mesure fiables et, surtout, valides, car l’application de la SL à des contextes réels est sa valeur principale. Cet article démontre comment concevoir et valider de manière optimale des instruments de traduction automatique universitaire pour évaluer la qualité des expériences de traduction technique au niveau universitaire du point de vue des professeurs d’université, guidés par le principe de parcimonie. La méthode Delphi modifiée en ligne, l’analyse factorielle exploratoire des moindres carrés non pondérés robuste et l’analyse factorielle confirmatoire ont été appliquées pour créer un nouvel instrument, le QaSLu-27, validé par un échantillon de 16 experts utilisant la méthode Delphi modifiée en ligne et 118 enseignants d’université qui mettent en œuvre des projets SL. Les résultats montrent des conditions psychométriques optimales pour le nouvel instrument (W = 0,11 ; α = 0,92 ; CMIN/DF = 1,027 ; CFI = 0,979 ; WRMR= 0,0985 ; RMSEA = 0,046), ce qui a conduit à l’élaboration de nouvelles échelles de notation qui permettent de comparer les futurs utilisateurs de cette méthodologie, en tenant compte de leurs caractéristiques attributaires et démographiques. La conception de nouveaux instruments validés, capables d’être utilisés dans le monde réel et permettant la création d’échelles, sera très utile pour mesurer la mise en œuvre de nouvelles expériences en SL, pour évaluer leurs progrès, leurs participants, leurs gestionnaires et leurs moniteurs, contribuant ainsi à l’établissement de ce champ d’étude dans le cadre académique actuel et à la génération de nouvelles connaissances scientifiques.

Introduction

L’apprentissage par le service (SL), une approche éducative qui intègre l’apprentissage académique au service communautaire, est de plus en plus reconnu dans l’éducation contemporaine. Cette approche pédagogique permet aux élèves d’appliquer les connaissances acquises en classe à des défis du monde réel, tout en favorisant la responsabilité civique et l’engagement communautaire¹. On ne saurait trop insister sur l’importance de la NM dans l’éducation actuelle, car elle dote les élèves de compétences professionnelles pratiques, favorise l’engagement civique et permet une compréhension plus profonde des problèmes ....

Protocole

Ce protocole a été approuvé éthiquement en 2020 par la Commission nationale de la recherche scientifique et technologique du Chili (CONICYT Fondecyt/Initiation) sous le numéro d’approbation : 11170623. Un groupe d’experts externes a examiné et validé l’ensemble du processus. Conformément à la Déclaration d’Helsinki⁴⁰, les participants devaient fournir un consentement éclairé écrit pour participer à l’étude, et il a été clairement indiqué qu’ils ne seraient impliqués dans aucune condition expérimentale.

1. Conception de la première ébauche d’un QaSLu

1. Effectuer une analyse de contenu des él....

Résultats

À la suite de ce protocole de validation qualitative-quantitative rigoureux, nous avons développé un instrument robuste, optimisé et parcimonieux d’auto-évaluation des expériences d’apprentissage par le service universitaire, nommé QaSLu (Questionnaire for the Self-Assessment of Service-Learning Experiences in Higher Education). Cet instrument final a reçu l’approbation qualitative de 16 experts SL dans le cadre de la méthode Delphi, avec deux séries de consultations et d’adaptations en .......

Discussion

Les méthodes utilisées pour la validation des instruments offrent plusieurs avantages. La méthode Delphi a facilité la collecte d’informations auprès d’un panel d’experts, ce qui a permis d’organiser systématiquement ces informations pour l’analyse. Il a permis de sélectionner et d’affiner les réponses sur la base d’estimations et de suggestions d’experts 32,47,48,49.

Matériaux

Liste des matériaux utilisés dans cet article

Nom	Entreprise	Numéro de catalogue	Commentaires
Encuestafacil.com Saas	Encuestafacil.com	2025	Logiciel en tant que service dans le Encuestafacil.com serveur de données privées
Analyse factorielle	Universitat Rovira i Virgili	12.06.07	Progiciel utilisé dans l’analyse factorielle des données
Paquet statistique pour les sciences sociales (SPSS)	IBM	24	Progiciel utilisé dans l’analyse statistique des données