מסגרת ה-ML-HQNC המוצעת הוערכה מול Fast R-CNN, Bi-LSTM, CNN ו-XGBoost באמצעות מדדי סיווג קונבנציונליים, כולל דיוק (Accuracy), דיוק חיווי (Precision), רגישות (Recall), מדד F1 (F1-score) והשטח תחת עקומת מאפייני תגובת המקלט (AUC), יחד עם מדדי ההערכה המוצעים: דיוק זיהוי עניין (IDP), מדד יציבות תבניתו קוונטי (QPSI) ותועלת הסתגלות חוצת-דומיינים (CDAG). ההגדרות המתמטיות של מדדים אלו מופיעות ב- קובץ משלים 1 (סעיף S5).
כדי להעריך את החוסן של המסגרת המוצעת, כל הניסויים חזרו חמש פעמים תוך שימוש באתחולים אקראיים שונים. ערכי הביצועים המדווחים מוצגים כממוצע ± סטיית תקן לאורך חמש ההרצות. מובהקות סטטיסטית בין המסגרת המוצעת למודלי הבסיס נבחנה באמצעות מבחן t מזווג, כאשר p < 0.05 נחשב כמובהק סטטיסטית.
כפי שסוכם ב-Supplementary Table 1, ניסויי סימולציה נערכו באמצעות מערך הנתונים להערכת איכות הוראה (Teaching Quality Evaluation Dataset) המכיל 1,014 רשומות. סך של 800 רשומות שימשו לאימון המודל, בעוד ש-200 רשומות הושארו לבדיקה. מסגרת ה-ML-HQNC המוצעת ומודלי ההשוואה יושמו בסביבת Jupyter Notebook באמצעות Python. המאפיין Teaching_Quality שימש כמשתנה המטרה המקורי במערך הנתונים הזמין לציבור להערכת איכות הוראה והורכב משתי מחלקות, Good ו-Excellent. תוויות אלו שימשו כמטרות החיזוי לאימון ולהערכה של מסגרת ה-ML-HQNC. קטגוריות החיזוי שהתקבלו מסוכמות ב-Table 3. Supplementary Table 2 מסכם את תוצאות התיקוף של שלב עיבוד המקדם Box–Cox Robust IQR Scaling (BCRIS). צינור עיבוד הנתונים הסיר רשומות חסרות וכפולות, הפחית את השפעת ערכים חריגים, נרמל את התפלגויות המאפיינים ושיפר את העקביות הסמנטית וההתנהגותית לפני התמרת המאפיינים ואימון המודל.
טבלה 3: משתנה המטרה של מערך נתוני הערכת איכות ההוראה. תיאור של משתנה המטרה המקורי Teaching_Quality וקטגוריות הסיווג שלו (Good ו-Excellent) המשמשות לאימון והערכה של המודל. אנא לחצו כאן להורדת טבלה זו.
טבלה נלווית 3 מציגה מאפיינים מייצגים שנוצרו על ידי מודל המצב הקוגניטיבי הקוונטי (QCSM). המאפיינים שהופקו מתארים את התנהגות הלמידה של התלמיד, כולל מצב קוגניטיבי, מעורבות, אי-ודאות, מעברים בין נושאים ועקביות התנהגותית, ושימשו כקלט לשלב בחירת המאפיינים הבא של QES-WOFS. טבלה נלווית S4 מפרטת את המאפיינים הסופיים שנבחרו על ידי אלגוריתם QES-WOFS יחד עם קטגוריות המאפיינים שלהם, רמות ההשפעה היחסיות ותפקידיהם הפונקציונליים במסגרת המוצעת. מאפייניהם של המאפיינים ההתנהגותיים הרב-ממדיים שהופקו מסוכמים בטבלה נלווית 5. טבלה נלווית 6 מציגה מבני קצוות מייצגים שנוצרו במהלך הייצוג ההתנהגותי עבור שתי מחלקות הניבוי (טוב ומצוין).
כפי שמוצג ב-איור 4 ו ב-טבלה 4, מסגרת ה-ML-HQNC המוצעת השיגה את מדד ה-F1 הגבוה ביותר (87.9%) מבין השיטות שנבחנו. מדדי ה-F1 התואמים עבור Fast R-CNN, Bi-LSTM, CNN ו-XGBoost היו 77.9%, 80.2%, 82.8%, ו-85.8%, בהתאמה. מובהקות סטטיסטית נבחנה באמצעות t-test דו-צדדי בלתי תלוי (p < 0.05).
איור 5 ו-טבלה 5 מסכמים את תוצאות דיוק זיהוי העניין (IDP). מסגרת ה-ML-HQNC המוצעת השיגה IDP של 89.3%, בהשוואה ל-79.11%, 82.12%, 84.6% ו-87.10% עבור Fast R-CNN, Bi-LSTM, CNN ו-XGBoost, בהתאמה. איור 6 ו-טבלה 6 מציגים את תוצאות מדד יציבות תבניות הקוונטום (QPSI). המסגרת המוצעת השיגה ערך QPSI של 92.7%, בעוד ש-Fast R-CNN, Bi-LSTM, CNN ו-XGBoost השיגו 81.1%, 84.11%, 87.4% ו-90.9%, בהתאמה. איור 7 ו-טבלה 7 מסכמים את תוצאות תגמול ההסתגלות הבין-דומיינית (CDAG). מסגרת ה-ML-HQNC המוצעת השיגה את ערך ה-CDAG הגבוה ביותר (0.95), בהשוואה ל-Fast R-CNN (0.78), Bi-LSTM (0.83), CNN (0.80) ו-XGBoost (0.86). כפי שמוצג ב-איור 8 וב-טבלה 8, מסגרת ה-ML-HQNC המוצעת השיגה את דיוק הסיווג הגבוה ביותר (96.17%). הדיוקים התואמים עבור Fast R-CNN, Bi-LSTM, CNN ו-XGBoost היו 85.10%, 87.21%, 90.14% ו-93.19%, בהתאמה. איור 9 ו-טבלה 9 מציגים את זמן החישוב הנדרש על ידי כל שיטה. מסגרת ה-ML-HQNC המוצעת דרשה 9.02 ms, בעוד ש-Fast R-CNN, Bi-LSTM, CNN ו-XGBoost דרשו 31.2 ms, 27.5 ms, 22.4 ms ו-17.6 ms, בהתאמה. איור 10 מציג את ניתוח עקומת מאפייני מקלט (ROC). מסגרת ה-ML-HQNC המוצעת השיגה AUC של 0.944, המצביע על שיעור חיוביים אמיתיים גבוה ושיעור חיוביים כוזבים נמוך לאורך סף הסיווג שנבדק.

איור 4: השוואת F1-score עבור גדלי מערכי נתונים שונים. השוואה של ה-F1-score שהושג על ידי ML-HQNC ומודלים מתחרים עבור גדלי מערכי נתונים שונים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמש הרצות ניסיוניות עצמאיות (n = 5). פסי השגיאה מייצגים סטיית תקן אחת. מובהקות סטטיסטית הוערכה באמצעות מבחן t דו-זנבי בלתי תלוי (p < 0.05). אנא לחצו כאן כדי לצפות בגרסה מורחבת של איור זה.
טבלה 4: השוואת מדד F1-score עבור גדלי מערכי נתונים שונים. השוואה של מדד ה-F1-score שהושג על ידי ML-HQNC ומודלים מתחרים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמש הרצות ניסיוניות עצמאיות (n = 5). אנא לחצו כאן להורדת טבלה זו.

איור 5: השוואת דיוק זיהוי עניין (IDP) עבור גדלי מערכי נתונים שונים.השוואה של דיוק זיהוי עניין (IDP) שהושג על ידי ML-HQNC ומודלים מתחרים עבור גדלי מערכי נתונים שונים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמש הרצות ניסיוניות עצמאיות (n = 5). פסי השגיאה מייצגים סטיית תקן אחת. מובהקות סטטיסטית הוערכה באמצעות מבחן t דו-צדדי לעצמאיים (p < 0.05). אנא לחצו כאן כדי לצפות בגרסה גדולה יותר של איור זה.
טבלה 5: השוואת דיוק זיהוי נקודות עניין (IDP) על פני גדלי מאגרי נתונים שונים. השוואה של דיוק זיהוי נקודות עניין (IDP) שהושג על ידי ML-HQNC ומודלים מתחרים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמש הרצות ניסיוניות בלתי תלויות (n = 5). אנא לחץ כאן כדי להוריד טבלה זו.

איור 6: השוואת מדד יציבות תבנית קוונטית (QPSI) עבור גדלי מאגרי נתונים שונים. השוואה של מדד יציבות תבנית קוונטית (QPSI) שהושג על ידי ML-HQNC ומודלים מתחרים עבור גדלי מאגרי נתונים שונים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמישה הרצות ניסוייות עצמאיות (n = 5). פסי השגיאה מייצגים סטיית תקן אחת. מובהקות סטטיסטית הוערכה באמצעות מבחן t דו-צדדי לעצמאיים (p < 0.05). אנא לחצו כאן כדי לצפות בגרסה מורחבת של איור זה.
טבלה 6: השוואת מדד יציבות תבנית קוונטית (QPSI) על פני גדלי מאגרי נתונים שונים. השוואה של מדד יציבות תבנית קוונטית (QPSI) שהושג על ידי ML-HQNC ומודלים מתחרים. התוצאות מדווחות כממוצע ± סטיית תקנית על פני חמש הרצות ניסיוניות עצמאיות (n = 5). אנא לחצו כאן להורדת טבלה זו.

איור 7: השוואת רווח הסתגלות חוצת-דומיינים (CDAG) על פני גדלי מאגרי נתונים שונים. השוואה של רווח ההסתגלות חוצת-הדומיינים (CDAG) שהושג על ידי ML-HQNC לעומת מודלים מתחרים על פני גדלי מאגרי נתונים שונים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמישה הרצות ניסיוניות עצמאיות (n = 5). פסי השגיאה מייצגים סטיית תקן אחת. מובהקות סטטיסטית הוערכה באמצעות מבחן t בלתי תלוי דו-זנבי (p < 0.05). אנא לחצו כאן כדי להציג גרסה גדולה יותר של איור זה.
טבלה 7: השוואת רווח הסתגלות חוצת-דומיינים (CDAG) עבור גדלי מערכי נתונים שונים.השוואה של רווח ההסתגלות חוצת-הדומיינים (CDAG) שהושג על ידי ML-HQNC ומודלים מתחרים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמישה הרצות ניסיוניות בלתי תלויות (n = 5). אנא לחצו כאן להורדת טבלה זו.

איור 8: השוואת דיוק הסיווג בגדלי מערכי נתונים שונים. השוואה של דיוק הסיווג שהושג על ידי ML-HQNC ומודלים מתחרים בגדלי מערכי נתונים שונים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמישה הרצות ניסוייות עצמאיות (n = 5). פסי השגיאה מייצגים סטיית תקן אחת. מובהקות סטטיסטית הוערכה באמצעות two-sided independent t-test (p < 0.05). אנא לחצו כאן כדי לצפות בגרסה מורחבת של איור זה.
טבלה 8: השוואת דיוק הסיווג על פני גדלי מערכי נתונים שונים. השוואה של דיוק הסיווג שהושג על ידי ML-HQNC ומודלים מתחרים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמישה הרצות ניסיוניות עצמאיות (n = 5). אנא לחצו כאן כדי להוריד טבלה זו.

איור 9: השוואת זמן חישוב עבור גדלי מאגרי נתונים שונים.השוואה של זמן הביצוע החישוביי של ML-HQNC ומודלים מתחרים עבור גדלי מאגרי נתונים שונים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמש הרצות ניסיוניות עצמאיות (n = 5). פסי השגיאה מייצגים סטיית תקן אחת. ערכים נמוכים יותר מעידים על זמן ביצוע חישובי קצר יותר. מובהקות סטטיסטית הוערכה באמצעות מבחן t דו-צדדי ובלתי תלוי (p < 0.05). אנא לחצו כאן להצגת גרסה גדולה יותר של איור זה.
טבלה 9: השוואת זמן חישוב עבור גדלי מערכי נתונים שונים. השוואה של זמן הביצוע החישוב של ML-HQNC לעומת מודלים מתחרים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמישה הרצות ניסוייות עצמאיות (n = 5). ערכים נמוכים יותר מעידים על זמן ביצוע חישובי קצר יותר. אנא לחצו כאן להורדת טבלה זו.

איור 10: השוואת השטח תחת עקומת מאפייני המקלט (AUC). השוואה של ה-AUC שהושג על ידי ML-HQNC ומודלים מתחרים לזיהוי עניין של סטודנטים להנדסה. ערכי ה-AUC המדווחים תואמים להרצה ניסויית אחת; לפיכך, לא מוצגים פסי שגיאה או ניתוחים של מובהקות סטטיסטית. אנא לחצו כאן כדי לצפות בגרסה גדולה יותר של איור זה.
איור משלים 1 מציג את מטריצת המתאם של משתנים התנהגותיים מייצגים. נצפו מתאמים חיוביים חזקים בין Avg_Score לבין Course_Completion_Rate (0.81) ובין Attendance_Rate לבין Course_Completion_Rate (0.75). מתאמים בינוניים נצפו בין Avg_Score לבין Course_Completion (0.72) ובין Attendance_Rate לבין Time_Assignment_Percentage (0.74). איורים משלימים 2 ו-3, יחד עם טבלה 10, מסכמים את מפות דיוק האימון והבדיקה. מסגרת ה-ML-HQNC המוצעת השיגה דיוק אימון של 96.1% ודיוק בדיקה של 93.8%, תוצאות העולות על ביצועי שיטות ההשוואה. איורים משלימים 4 ו-5, יחד עם טבלה 11, מסכמים את ניתוח ההתכנסות. מסגרת ה-ML-HQNC המוצעת השיגה את הפסד האימון הנמוך ביותר (0.21) ואת הפסד הבדיקה הנמוך ביותר (0.26), עם התכנסות יציבה לאורך תהליך האופטימיזציה.
טבלה 12 מסכמת את הביצועים הכוללים של מסגרת ה-ML-HQNC המוצעת ואת שיטות ההשוואה על פני כל מדדי ההערכה. המסגרת המוצעת השיגה את הביצועים הגבוהים ביותר עבור Accuracy, F1-score, AUC, IDP, QPSI ו-CDAG, בעוד שדרשה את זמן החישוב הקצר ביותר מבין השיטות שנבחנו. טבלה 13 מציגה את ניתוח האבליציה (ablation analysis) לפי רכיבים של המסגרת המוצעת. שילוב הדרגתי של שלב עיבוד המקדם BCRIS, ייצוג ההתנהגות QCSM, אלגוריתם בחירת התכונות QES-WOFS והמסווג ML-HQNC המלא הניב שיפורים הדרגתיים בביצועי הסיווג, מה שמעיד על תרומתו של כל רכיב למסגרת הכוללת.
טבלה 10: השוואת דיוק האימון והבדיקה. השוואה של דיוק האימון והבדיקה שהושגו על ידי ML-HQNC ומודלים מתחרים. הערכים המדווחים תואמים להרצה ניסיונית אחת. אנא לחצו כאן להורדת טבלה זו.
טבלה 11: השוואת הפסדי אימון ובדיקה. השוואה של הפסדי האימון והבדיקה שהושגו על ידי ML-HQNC ומודלים מתחרים. הערכים המדווחים תואמים להרצה ניסויית אחת. אנא לחצו כאן כדי להוריד טבלה זו.
טבלה 12: השוואת ביצועים כוללת. השוואה בין ML-HQNC למודלים מתחרים באמצעות מדדי הערכה מרובים. התוצאות מדווחות כממוצע ± סטיית תקן על פני חמישה הרצות ניסויים עצמאיות (n = 5). אנא לחצו כאן כדי להוריד טבלה זו.
זמינות נתונים:
מאגר הנתונים המקורי להערכת איכות ההוראה (Teaching Quality Evaluation Dataset) ששימש במחקר זה זמין לציבור במאגר Kaggle (https://www.kaggle.com/datasets/ziya07/teaching-quality-evaluation-dataset). הגישה למאגר הנתונים עשויה לדרוש אימות משתמש וכפופה לתנאי השימוש של Kaggle. כדי לתמוך ביכולת השחזור תוך עמידה בתנאי הרישוי של מאגר הנתונים המקורי, המשאבים שהופקו במהלך המחקר — כולל מאגר הנתונים הסינתטי, קוד המקור, קבצי מימוש וקונפיגורציה, תיאורי מאפיינים, תהליך העיבוד המקדים ותיעוד תומך הנדרש לשחזור הניסויים שדווחו — הופקדו במאגר Zenodo הנגיש באופן פתוח: https://doi.org/10.5281/zenodo.21393413.

איור 3: אוסף מאפיינים של מערך נתוני הערכת איכות ההוראה. מבנה והרכב מאפיינים של מערך נתוני הערכת איכות ההוראה המשמש לזיהוי תחומי עניין של סטודנטים להנדסה. אנא לחץ כאן כדי להציג גרסה גדולה יותר של איור זה.
איור משלים 1: מטריצת מתאם של תכונות. מטריצת מתאם המציגה מערכות יחסים זוגיות בין משתנים חינוכיים והתנהגותיים מייצגים ששימשו את מסגרת ה-ML-HQNC המוצעת. אנא לחצו כאן כדי להוריד קובץ זה.
איור משלים 2: השוואת דיוק האימון. השוואה של דיוק האימון שהושג על ידי ML-HQNC ומודלים מתחרים לאורך תהליך האימון. אנא לחץ כאן להורדת קובץ זה.
איור משלים 3: השוואת דיוק הבדיקה. השוואה של דיוק הבדיקה שהושג על ידי ML-HQNC ומודלים מתחרים במהלך תהליך הבדיקה. אנא לחץ כאן להורדת קובץ זה.
איור משלים 4: ניתוח הפסד האימון. השוואה של הפסד האימון שהושג על ידי ML-HQNC ומודלים מתחרים במהלך אופטימיזציית המודל. אנא לחצו כאן להורדת קובץ זה.
איור משלים 5: ניתוח הפסד בבדיקה. השוואה של הפסד הבדיקה שהושג על ידי ML-HQNC ומודלים מתחרים במהלך הערכת המודל. אנא לחצו כאן להורדת קובץ זה.
טבלה נלווית 1: פרמטרי סימולציה והגדרות ניסיוניות. סיכום של פרמטרי הסימולציה, סביבת המימוש, חלוקת מערך הנתונים וההגדרות הניסיוניות ששימשו להערכת מסגרת ה-ML-HQNC המוצעת. אנא לחצו כאן להורדת קובץ זה.
טבלה נלווית 2: תוצאות תיקוף של שלב עיבוד המקדימה Box–Cox Robust IQR Scaling (BCRIS). השוואה של מאפייני מערך נתונים מייצגים לפני ואחרי עיבוד מקדימה, כולל ערכים חסרים, רשומות כפולות, טיפול בחריגים, נרמול מאפיינים ועקביות נתונים. אנא לחץ כאן להורדת קובץ זה.
טבלה משלימה 3: מאפיינים מייצגים שהופקו על ידי מודל המצב הקוגניטיבי הקוונטי (QCSM). מאפיינים התנהגותיים מייצגים שהופקו על ידי ה-QCSM לאחר עיבוד מקדים של הנתונים, כולל מאפיינים של מצב קוגניטיבי, מעורבות, אי-ודאות, מעבר בין נושאים ועקביות התנהגותית. אנא לחצו כאן כדי להוריד קובץ זה.
טבלה נספחת 4: מאפיינים שנבחרו על ידי אלגוריתם בחירת המאפיינים Quantum-Enhanced Swarm–Whale Optimization Feature Selection (QES-WOFS). תת-קבוצת המאפיינים הסופית שנבחרה על ידי אלגוריתם QES-WOFS, יחד עם קטגוריות המאפיינים התואמות, רמות השפעה יחסיות ותפקידים תפקודיים במסגרת המוצעת. אנא לחצו כאן כדי להוריד קובץ זה.
טבלה משלימה 5: קטגוריות לחיזוי איכות ההוראה. תיאור של קטגוריות החיזוי ומאפיינים התנהגותיים מייצגים המשמשים את מסגרת ה-ML-HQNC המוצעת. אנא לחצו כאן להורדת קובץ זה.
טבלה נלווית 6: ניתוח רגישות שוליים. סיכום של ניתוח רגישות השוליים שבוצע במהלך הערכת המודל. אנא לחצו כאן להורדת קובץ זה.
קובץ משלים 1: שיטות משלימות, ניסוחים מתמטיים, מדדי הערכה וטבלאות משלימות. קובץ זה מכיל ניסוחים מתמטיים מפורטים עבור ה-Box–Cox Robust IQR Scaling (BCRIS), מודל מצב קוגניטיבי קוונטי (QCSM), בחירת תכונות באמצעות אופטימיזציית נחיל-לווייתנים משופרת קוונטית (QES-WOFS), ומסווג עצבי היברידי קוונטי-קלאסי מבוסס למידת-מטא (ML-HQNC) המתוארים בפרוטוקול הראשי. הוא כולל גם הגדרות של מדדי ההערכה, פרמטרי סימולציה, הגדרות ניסוייות, וטבלאות משלימות S1–S6 התומכות בתוצאות המוצגות בכתב היד הראשי. אנא לחצו כאן כדי להוריד קובץ זה.