מערכת גילוף שיניים בעזרת מציאות רבדית (AR-ATCS) מזהה סמני אובייקטים בתלת-ממד ומלבישה מודל שן וירטואלי על גבי בלוק שעווה אמיתי, ובכך מספקת רפרנס ויזואלי תלת-ממדי לסיוע לסטודנטים לרפואת שיניים בתחילת דרכם במהלך גילוף השן.
מאמר שיטה
מערכת גילוף שיניים בעזרת מציאות רבדית (AR-ATCS) מזהה סמני אובייקטים בתלת-ממד ומלבישה מודל שן וירטואלי על גבי בלוק שעווה אמיתי, ובכך מספקת רפרנס ויזואלי תלת-ממדי לסיוע לסטודנטים לרפואת שיניים בתחילת דרכם במהלך גילוף השן.
מטרתו של פרוטוקול זה היא לשפר את ההוראה באנטומיה דנטלית באמצעות פיתוח ויישום של מערכת לגילוף שיניים בסיוע מציאות רב-שכבתית (AR-ATCS). מורפולוגיה של שיניים היא מרכיב יסודי בחינוך דנטלי, הדורש מהסטודנטים לשלוט במבנים אנטומיים תלת-ממדיים (3D) מורכבים ובנקודות ציון תפקודיות החיוניות להליכים קליניים כגון רפואת שיניים משמרת וטיפולי אנדודונטיה. באופן מסורתי, מיומנויות אלו נרכשות באמצעות תרגילי גילוף בבלוק שעווה; עם זאת, גישה זו מוגבלת לעיתים קרובות בשל יעילות הוראה נמוכה ופער קוגניטיבי משמעותי כאשר סטודנטים מנסים לתרגם איורי ספרי לימוד דו-ממדיים (2D) למבנים פיזיים תלת-ממדיים. כדי להתמודד עם אתגרים אלו, פרוטוקול זה מתאר שילוב של טכנולוגיית מציאות רב-שכבתית (AR) באימון גילוף שיניים ידני. המערכת משתמשת במעקב אחר אובייקטים תלת-ממדיים ובאלגוריתמים של ראייה ממוחשבת כדי להשליח מודל שן וירטואלי תלת-ממדי בעל נאמנות גבוהה על סביבת העבודה הפיזית. באמצעות זיהוי סימני מעקב ייעודיים עם מצלמה של מכשיר נייד, המערכת מקרינה מדריך דיגיטלי בקנה מידה ובכיוון נכונים ישירות על בלוק השעווה. יישור זה, מהמישור הווירטואלי לפיזי, מאפשר לסטודנטים להדמיז את מורפולוגיית השן המבוקשת בזמן אמת ולזהות סטיות בהתקדמות הגילוף שלהם בעת התרחשותן. הפרוטוקול מספק זרימת עבודה מפורטת להקמת סביבת ה-AR, יישור מודלים וירטואליים עם חומרים פיזיים, ושימוש במערכת ככלי אימון בהנחיה עצמית. על ידי אספקת משוב חזותי אינטראקטיבי מרב-זוויות, המערכת מפחיתה את התלות בהדגמות רציפות של המדריך וממזערת את ההשפעה של שגיאות גילוף בלתי הפיכות. באופן כללי, גישה זו בסיוע AR מספקת כלי הנחיה חזותי משלים לאימון מסורתי באנטומיה דנטלית, על ידי תמיכה בסטודנטים מתחילים במהלך גילוף שיניים והצעת מסגרת יעילה יותר לתרגול מורפולוגיה של שיניים.
מורפולוגיה דנטלית היא מרכיב ליבה בחינוך לרפואת שיניים, שמטרתו לסייע לסטודנטים להבין באופן שיטתי את המורפולוגיה האנטומית של השן ואת מאפייניה המבניים התלת-ממדיים1,2. תרגול גילוף שיניים, כחלק חשוב מהוראת המורפולוגיה הדנטלית, אינו משקף רק את השליטה של הסטודנטים באנטומיה של השן, אלא גם מאמן את המיומנות הידנית ואת הכישורים האופרטיביים שלהם3,4. הוא מספק בסיס חיוני לפרקטיקה קלינית, בייחוד בטיפול פרוסטודונטי2,5.
הדרכה מסורתית בפיסול שיניים מתבצעת בדרך כלל תחת הדרכתם של מדריכים, כאשר הסטודנטים מפסלים את המורפולוגיה האנטומית של שיניים קדמיות ואחוריות באמצעות בלוקים של שעווה או סבון3,5. עם זאת, חוסר האיזון בין מספר המדריכים למספר הסטודנטים מקשה על המורים לספק הדרכה אינדיבידואלית מספקת במסגרת זמן ההוראה המוגבל4,5. בנוסף, סטודנטים חווים לעיתים קשיים קוגניטיביים ניכרים בעת המרת תמונות דו-ממדיות לצורות תלת-ממדיות, דבר העשוי להפחית הן את יעילות הלמידה והן את אפקטיביות ההוראה2,5,6.
בשנים האחרונות, עם הפיתוח המהיר של טכנולוגיות דיגיטליות, הדפסה תלת-ממדית, מציאות רבדית (augmented reality), מציאות מדומה וגישות דיגיטליות אחרות יושמו בהדרגה בחינוך לאנטומיה רפואית ובהוראה במעבדות דנטליות6,7,8,9. טכנולוגיות אלו מתגברות על המגבלות של אטלסים דו-ממדיים מסורתיים, תצפית במודלים פיזיים והדגמה של מורה בהצגה מרחבית, ובכך מספקות לסטודנטים חווית למידה אינטואיטיבית, דינמית ותלת-ממדית יותר5,6,9.
מציאות רבדית (Augmented reality) היא טכנולוגיית ויזואליזציה המטילה מידע וירטואלי שנוצר במחשב על הסביבה האמיתית בזמן אמת, ובכך משיגה מיזוג בין הממדי הוירטואלי לממדי הממשי ואינטראקציה בין אדם למחשב. באמצעות השלמת נתונים תלת-ממדיים ומידע מרחבי בתרחישים מהעולם האמיתי, AR יכולה להרחיב את תפיסתו של הצופה לגבי מבנים מרחביים מורכבים10,11. תכונה זו הופכת את ה-AR למתאימה במיוחד לתרחישי הוראה מעשיים הדורשים הבנה מרחבית וקואורדינציה בין העין ליד. נכון להיום, טכנולוגיית AR יושמה באופן ראשוני בחינוך לאנטומיה וקיבלה משוב חיובי11,12,13. מעבר למסגרות חינוכיות, AR הוטמעה גם ברפואת שיניים קלינית. לדוגמה, Macrì וחב' דיווחו על שימוש ב-AR לסיוע בחשיפה כירורגית של שן כלואה, והדגימו כי רישום מרחבי מבוסס AR והטלה וירטואלית-ממשית בזמן אמת יכולים לשמש בניווט כירורגי פה14. יישום קליני זה מספק תמיכה נוספת להכנסת ויזואליזציה מרחבית מונחית AR לאימון במורפולוגיה של שיניים.
בפרוטוקול זה, נעשה שימוש בטכנולוגיית AR כדי לסייע באימון גילוף שיניים על ידי אספקת רפרנס ויזואלי תלת-ממדי, רציף ואינטואיטיבי לסטודנטים במהלך התרגול, אשר עשוי לשמש כתוסף להדרכה קונבנציונלית של מדריך. למטרה זו, פותחה במשותף מערכת לגילוף שיניים הנעזרת ב-AR, המורכבת בעיקר מתוכנת AR, מצלמה ברזולוציה גבוהה, בסיס נשא לבלוק שעווה וארבעה מרקרי מעקב אחר אובייקטים תלת-ממדיים שיוצרו בנפרד. המרקרי הורכבו על בסיס הנשא, המחזיק את בלוק השעווה במיקום שנקבע מראש. במהלך הפעולה, המערכת לוכדת תמונות של אזור העבודה הפיזי באמצעות המצלמה. לאחר זיהוי מרקר של אובייקט תלת-ממדי על הבסיס, מודל השן הווירטואלי מושלך בזמן אמת על המיקום התואם בבלוק השעווה בממשק התצוגה, ובכך מסופק לסטודנטים רפרנס ויזואלי לגילוף.
על בסיס מערכת זו, בוצעה ולידציה של דגימה בודדת. סטודנט שסיים את הקורס באנטומיה של השן ביצע את הליך גילוף השן תחת הנחיית הפרוטוקול המוצע המסייע ב-AR. השן הגלויה נסרקה לאחר מכן ועובדה כמודל תלת-ממדי, ובוצע ניתוח אובייקטיבי של סטיות מורפולוגיות באמצעות השוואה למודל השן הסטנדרטי. תוצאות ראשוניות של דגימה בודדת העלו את ההיתכנות של שימוש ב-AR-ATCS ככלי עזר לאימון במורפולוגיה דנטלית.
1. הקמה של מודל שן דיגיטלי סטנדרטי
הערה: בפרוטוקול זה, הטוח הראשון התחתון השמאלי שימש כשן היעד כדי להדגים את ההיתכנות של זרימת העבודה של גילוף שיניים בסיוע AR. עבור מיקומי שיניים אחרים, ניתן להחיל את זרימת העבודה לאחר ייבוא המודל הדיגיטלי הסטנדרטי של השן המתאימה והגדרה מחדש של הקשר המרחבי שלה עם סימן האובייקט התלת-ממדי. שלב זה אורך כ-10 min.
2. תכנון מחזיק בלוק השעווה ובסיס מעקב ה-AR
הערה: סימני מעקב האובייקטים התלת-ממדיים ובסיס בלוק השעווה למעקב AR הם רכיבים מותאמים אישית. עיצובם עשוי להשתנות בהתאם למטרת התכנון ולאסטרטגיית המידול. לכן, הבסיס המתואר בפרוטוקול זה אינו העיצוב היחיד האפשרי וניתן לשנותו, בתנאי שקיבוע בלוק השעווה, זיהוי הסימנים ונוחות העבודה נשמרים. שלב זה אורך כ-30 min.
3. הדפסה בתלת-ממד ועיבוד לאחר הדפסה של המודלים
הערה: שימוש במדפסת ובפרמטרי ההדפסה המתוארים בפרוטוקול זה, להדפסת סט מלא של מודלים, אורך כ-70 min.
4. הגדרת תוכנת ה-AR ורישום וירטואלי-ממשי
הערה: בפרוטוקול זה, נעשה שימוש בתוכנת מציאות רב-שכבתית (AR) כדי לייבא את מודל השן הדיגיטלי הסטנדרטי וליצור את השכבה הווירטואלית-ממשית. נעשה שימוש במצלמת RGB ברזולוציה גבוהה כדי ללכוד תמונות RGB ב-1080p בקצב של 30 fps. פונקציית חישוב העומק של המצלמה לא שימשה למעקב או לרישום (איור 3A,B). ייבוא המודלים הווירטואליים לתוכנה והגדרת צבע המודל והשקיפות שלו ארכו פחות מ-1 min. תהליך הרישום ארך פחות מ-5 s, וניווט בזמן אמת הושג מיד לאחר רישום מוצלח.
5. פרוצדורת גילוף שן בסיוע AR
מערכת ה-AR-ATCS זיהתה בהצלחה את סמן מעקב האובייקטים התלת-ממדי בבסיס והלבישה באופן יציב ובזמן אמת את מודל השן הווירטואלי על המיקום המתאים בבלוק השעווה. המודל הווירטואלי ייצג במדויק מבנים אנטומיים עיקריים, גבולות מורפולוגיים וקווי מתאר של פני השטח, כולל ה-cusps, ה-fossae והחריצים, רכסים שוליים, קווי מתאר של השטח האקסיאלי ומתווה הכתר. כאשר הבסיס סובב לאט, וסמן המעקב נותר ללא חסימה, נשמר רישום (registration) יציב בין מודל השן הווירטואלי לבין בלוק השעווה. דבר זה אפשר ויזואליזציה של מורפולוגיית השן המטרה ממספר נקודות מבט, כולל המבטים הבוקאלי, הלינגוואלי, המזיאלי, הדיסטאלי והאוקלוזאלי. ממצאים אלו מדגימים כי המערכת מספקת רפרנס ויזואלי תלת-ממדי רציף המקל על זיהוי סטיות מורפולוגיות מקומיות במהלך גילוף השן.
כאשר סימן המעקב היה מסתתר חלקית על ידי יד המפעיל או כלי הגילוף, או כאשר הבסיס סובב במהירות רבה מדי, זיהוי הסימן נקטע, מה שהוביל לאובדן של שכבת המודל הווירטואלי. מיקום מחדש של הבסיס והסרת החסימה החזירו את זיהוי הסימן וכוננו מחדש רישום וירטואלי-ממשי יציב, מה שאיפשר את המשך הגילוף.
בוצע ניתוח סטיית חפיפה במישור תמונה דו-ממדי כדי להעריך את שגיאת החפיפה הווירטואלית-ממשית. עבור כל ניסוי רישום, המצלמה הייתה מקובעת, ובסיס גילוף השן עם סמן מעקב האובייקט הועבר למרכז שדה הראייה של המצלמה. כאשר קווי המתאר של הסמן הווירטואלי חפפו בקירוב לקווי המתאר של הסמן הפיזי, המערכת השלימה את הרישום באופן אוטומטי. לאחר מכן נלכדה תמונת חפיפה דו-ממדית. ארבע נקודות ציון בפינות של בסיס גילוף השן נבחרו מכל תמונה שנלכדה, ונקודות הציון הפיזיות והווירטואליות התואמות נרשמו (איור 4). המרחק האוקלידי בין כל זוג נקודות פיזיות-ווירטואליות חושב כסטיית החפיפה הדו-ממדית. עבור כל משטח, בוצעו 10 ניסויי רישום חוזרים, ובכל ניסוי נמדדו ארבעה זוגות תואמים של נקודות ציון פיזיות-ווירטואליות. לפיכך, נותחו 40 זוגות נקודות למשטח, ובסך הכל 200 זוגות נקודות בחמישה משטחים. עבור המשטחים הבוקאלי, הדיסטלי, המזיאלי והלינגואלי, הרישום בוצע באמצעות סמן מעקב האובייקט התואם לכל משטח. עבור המשטח האוקלוזלי, הרישום הושלם תחילה באמצעות סמנים על המשטחים האחרים, ולאחר מכן הבסיס סובב כדי לקבל את תמונת החפיפה במבט אוקלוזלי. סיבוב נוסף זה עשוי היה לתרום לסטייה הגדולה יותר שנצפתה במבט זה. סטיית החפיפה הדו-ממדית הממוצעת הכוללת הייתה 0.679 ± 0.381 mm, עם סטיית RMS של 0.778 mm. המשטח האוקלוזלי הראה את הסטייה והשונות הגדולות ביותר, בעוד שהמשטחים הבוקאלי, הדיסטלי, המזיאלי והלינגואלי הראו סטיות חפיפה קטנות יותר (טבלה 1).
תוצאת הגילוף המוצגת כאן התקבלה מסטודנט יחיד שסיים לאחרונה קורס באנטומיה דנטלית והשלים את הליך גילוף השן בתוך שעתיים תחת הדרכה רציפה של ה-AR-ATCS; לפיכך, ניתוח הסטייה הכמותי מייצג נתוני מדגם יחיד. ניתוח סטייה תלת-ממדי בוצע על ידי השוואה בין מודל השן הגילוף שנסרק לבין מודל שן סטנדרטי. תוך שימוש בטווח סבילות שהוגדר מראש של ±0.5 mm, 52.26% מנקודות הפני השטח היו בטווח זה. הסטייה הממוצעת הסימנית הייתה 0.1025 mm, וסטיית השורש הממוצע של הריבועים (RMS) הייתה 0.7434 mm. הסטיות החיוביות והשליליות המקסימליות היו +1.9275 mm ו-−1.9272 mm, בהתאמה. מפת הסטייה המקודדת בצבעים הצביעה על כך שהאי-התאמות המורפולוגיות הגדולות ביותר היו ממוקמות בעיקר במשטח האוקלוזלי ובאזורים נבחרים של קווי המתאר האקסיאליים (איור 5). ערכי סטייה אלו מייצגים את אי-ההתאמה המצטברת בין מודל השן הגילוף הסופי לבין מודל השן הסטנדרטי לאחר סריקה תלת-ממדית ויישור המודלים, ולא מדידות מבודדות של שגיאת גילוף, שגיאת רישום AR או שגיאת סריקה.
תוצאות ראשוניות אלו של דגימה בודדת תומכות בהיתכנות הטכנית של תהליך העבודה של ה-AR-ATCS. במהלך הליך גילוף השן שנצפה, המערכת שמרה על שכבת מידע (overlay) בזמן אמת של מודל השן הווירטואלי על גבי גוש השעווה הפיזי, ובכך סיפקה רפרנס תלת-ממדי למורפולוגיית השן ולמאפיינים אנטומיים קשורים.

איור 1: הכנת המודל הדיגיטלי של שן שעווה סטנדרטית. (A) סריקה תלת-ממדית של שן השעווה הסטנדרטית. (B) נתוני סריקה ראשוניים של שן השעווה הסטנדרטית והמבנים שסביבה. (C) עיבוד המודל הדיגיטלי של השן הסטנדרטית לאחר קיטום ואופטימיזציה של פני השטח. (D) מודל השן הסטנדרטית הותאם לבסיס בלוק השעווה הווירטואלי כדי להגדיר את מיקומו המרחבי במערכת ה-AR. אנא לחצו כאן כדי לצפות בגרסה גדולה יותר של איור זה.
איור 2: תכנון וייצור של בסיס נשאי בלוק השעווה. (A) מודל תכנון תלת-ממדי של בסיס נשאי בלוק השעווה וסימן מעקב אחר אובייקט תלת-ממדי שתוכנן בנפרד. (B) הגדרת הקשר מרחבי בין המודל הדיגיטלי של שן סטנדרטית לבין בסיס נשאי בלוק השעווה. (C) בסיס נשאי בלוק השעווה המודפס בתלת-ממד עם סימן מעקב אחר אובייקט שהודפס בנפרד. (D) בלוק השעווה מורכב על הבסיס הנשאי המודפס בתלת-ממד לצורך גילוף שיניים מונחה AR).

איור 3: זרימת העבודה של גילוף שן בסיוע מציאות רב-שכבית (AR). (A) ממשק תוכנת הניווט של המציאות הרב-שכבית המציג את המודל הדיגיטלי המיובא של שן סטנדרטית וסימן למעקב אחר אובייקטים תלת-ממדיים. (B) לאחר זיהוי סימן האובייקט התלת-ממדי על הבסיס, המערכת מניחה את מודל השן הווירטואלי הסטנדרטי מעל המיקום התואם של גוש השעווה הפיזי בזמן אמת. (C) גילוף ראשוני של השן מבוצע תחת הדרכת AR תוך שימוש במודל השן הווירטואלי כנקודת ייחוס מורפולוגית תלת-ממדית. (D) כוונון עדין של מבנים אנטומיים מקומיים, כולל cusps, fossae ו-grooves, רכסים שוליים (marginal ridges) וקווי מתאר של פני השטח האקסיאליים, מבוצע תחת הדרכת AR. אנא לחץ כאן כדי לצפות בגרסה גדולה יותר של איור זה.

איור 4: מדידת סטיית חפיפה במישור תמונה דו-ממדי לאחר רישום AR. לאחר רישום AR אוטומטי, נלכדה תמונת חפיפה דו-ממדית. P1–P4 מציינים את ארבע נקודות הציון בפינות שנבחרו על בסיס גילוף השן הפיזי, ו-P1′–P4′ מציינים את נקודות הציון התואמות שנבחרו בחפיפה הווירטואלית. אנא לחצו כאן כדי לצפות בגרסה מורחבת של איור זה.

איור 5: ניתוח סטיות תלת-ממדי של מודל השן הגזוז בהשוואה למודל השן הסטנדרטי. מוצגות מפות סטיות תלת-ממדיות מהמבט הבוקאלי (A), המבט הלינגוואלי (B), המבט האוקלוזלי (C), המבט המזיאלי (D), והמבט הדיסטלי (E). אנא לחצו כאן כדי לצפות בגרסה גדולה יותר של איור זה.
| משטח | זוגות נקודות, n | ממוצע ± SD (mm) | RMS (mm) | מינימום (mm) | מקסימום (mm) |
| משטח בוקאלי | 40 | 0.711 ± 0.226 | 0.745 | 0.235 | 1.174 |
| משטח דיסטלי | 40 | 0.489 ± 0.156 | 0.513 | 0.146 | 0.913 |
| משטח מזיאלי | 40 | 0.510 ± 0.207 | 0.549 | 0.194 | 0.856 |
| משטח לינגוואלי | 40 | 0.540 ± 0.262 | 0.599 | 0.181 | 1.098 |
| משטח אוקלוזלי | 40 | 1.145 ± 0.494 | 1.245 | 0.27 | 2.401 |
| סה"כ | 200 | 0.679 ± 0.381 | 0.778 | 0.146 | 2.401 |
טבלה 1: סטיית חפיפת מישור-תמונה דו-ממדית של רישום וירטואלי-ממשי ב-AR.
ההוראה של האנטומיה של השן התפתחה עם הזמן, תוך אימוץ מודל הוראה קלאסי המשלב הדרכה תיאורטית עם הכשרה מעשית. הבנה מדויקת של המורפולוגיה האנטומית של השן מהווה בסיס חשוב לפרקטיקה קלינית רפואית בפה, במיוחד בפרוצדורות הקשורות לטיפול פרוטזטי, טיפול אנדודונטי, שחזור סגר ושחזור שתלים. לפיכך, חוקרים בחנו באופן רציף שיטות הוראה וטכנולוגיות חדשות כדי לתמוך בביסוס מערכות ידע אנטומיות. מחקרים קודמים שיפרו בעיקר את הוראת האנטומיה של השן באמצעות אופטימיזציה של שיטות ההוראה ובחינת הישימות של חומרי גילוף שונים. עם התפתחות הטכנולוגיות הדיגיטליות, סריקה תלת-ממדית, שחזור תלת-ממדי, הדפסה בתלת-ממד, מציאות מדומה ומציאות רבדית התרחבו בהדרגה מיישומים קליניים לחינוך רפואי, ובכך סיפקו כלים חדשים לסטודנטים להבנת מבנים תלת-ממדיים מורכבים15. בעתיד, עם התפתחות הבינה המלאכותית והמחשוב הנייד, צפוי שטכנולוגיות אלו ישולבו בהוראה השוטפת באופן זול ונוח יותר.
במערכת זו, ניתן להשתמש שוב במודל השן הסטנדרטי. ניתן לתכנן את סימני המעקב התלת-ממדיים של האובייקטים בתוכנה למידול תלת-ממדי, ולקבוע את יחסי המרחב ביניהם לפני ייבואם ישיר לתוכנת ה-AR. ניתן להשלים את כל זרימת העבודה על ידי הדפסה בתלת-ממד של בסיס גילוף השן. ראוי לציין כי שימוש במודלי שיניים מודפסי תלת-ממד כנקודות ייחוס פיזיות לאימון בגילוף שיניים הראה אף הוא ערך חינוכי, עם יתרונות כגון עלות נמוכה, מורפולוגיה אינטואיטיבית ותצפית חוזרת. עם זאת, טכנולוגיית AR מציעה ניווט ויזואלי בזמן אמת. היא יכולה לספק ייחוס ויזואלי תלת-ממדי בזמן אמת, ניתן לסיבוב וניתן להבניתו, בסביבת גילוף בפס waxed ממשית13. ככל שהטכנולוגיה תמשיך להתפתח, צפוי ש-AR ייושם בחינוך בצורה זולה יותר, פשוטה ונוחה יותר. לכן, להוראה בסיוע AR יש פוטנציאל ניכר לפיתוח נוסף.
עבור מערכות AR, איכות הוויזואליזציה, יציבות המעקב ודיוק הרישום (registration) הם גורמים טכניים מרכזיים הקובעים את אמינות ההנחה של המודל הווירטואלי על הממשי ואת חוויית המשתמש16. מחקרים קודמים בחנו את השימוש במערכות AR ללימוד גילוף שיניים, אך רובם אימצו מעקב תמונה (image tracking)5,13. בניגוד לכך, המערכת הנוכחית משתמשת במעקב אובייקטים תלת-ממדי. מעקב באמצעות סימני תמונה מציע הכנה פשוטה, עלות נמוכה ופריסה קלה, והוא יכול לספק זיהוי יציב כאשר הסימן גלוי בבירור ובזווית צפייה מתאימה. במהלך גילוף שיניים, לעיתים קרובות יש לסובב את גוש השעווה כדי שהמבצע יוכל לצפות במורפולוגיית השן המטרה מזוויות מרובות. בתנאים אלה, ייתכן שסימן תמונה לא יישאר גלוי במלואו בשדה הראייה של המצלמה, מה שעלול להפסיק את זיהוי הסימן ולהגביל את הרציפות של ההנחיה ב-AR בזמן אמת. בהשוואה למעקב תמונה, הנשען בעיקר על סימני תמונה מישוריים, מעקב אובייקטים תלת-ממדי מעריך את התנוחה המרחבית (spatial pose) של האובייקט על בסיס קווי המתאר הגאומטריים ומאפייניו החזותיים הטבעיים. דבר זה מאפשר למערכת לרשום את מודל השן הווירטואלי עם בסיס גוש השעווה הפיזי מזוויות צפייה מרובות, ובכך להתאים בצורה הדוקה יותר לתרחיש גילוף השיניים בפועל, שבו המבצע צריך לסובב ולבחון את גוש השעווה במהלך התרגול. עם זאת, גישה זו דורשת בדרך כלל מודל CAD או מודל סרוק תלת-ממדי של אובייקט המעקב, ולאחריו הדפסה תלת-ממדית והרכבה, מה שמעלה את מורכבות הכנת המודל בהשוואה למעקב באמצעות סימני תמונה מישוריים. לכן, אסטרטגיה מעשית היא לקבע את גוש השעווה על בסיס בעל מבנים גאומטריים ומאפיינים חזותיים מובחנים. בהתבסס על גישת מעקב זו, המערכת מבצעת אופטימיזציה לאסטרטגיית המעקב על ידי הסתמכות על סימנים המורכבים בתוך הבסיס כדי לצפות במודל השן הווירטואלי בתוך שדה ראייה מלבני. במהלך איטרציות של המערכת, נוספה פונקציה להתאמת סף הרישום כדי לאזן בין רגישות הזיהוי לדיוק ההנחה. סף נמוך יותר משפר את הצלחת הזיהוי אך עלול להפחית את יציבות ההנחה, בעוד שסף גבוה יותר משפר את דיוק הרישום אך עלול להגביר את קשיי הזיהוי. בנוסף, ממשק המעקב מאפשר למשתמשים להחליף מודלי מעקב ולהתאים את השקיפות בזמן אמת, ובכך לפשט את התפעול.
עם זאת, למערכת זו עדיין יש מספר מגבלות. ראשית, המערכת הנוכחית מסתמכת על מחשב ומצלמה חיצונית ברזולוציית גבוהה. חיבור המכשירים והסידור המרחבי הם מורכבים יחסית, דבר המגביל את יישומה בהוראה בכיתות גדולות. כדי להפחית עלויות ולשפר את הנגישות, נערכים מאמצים להתאימה של המערכת למכשירים ניידים כגון טאבלטים וסמארטפונים. שנית, ביצועי הזיהוי מושפעים מהתאורה, מזווית המצלמה, מהסתרת המרקר ומהירות הסיבוב של הבסיס. כאשר המרקר מוסתר או כאשר הבסיס מסתובב במהירות רבה מדי, המערכת עלולה להיכשל בזיהויו, ויש לחשוף את המרקר שוב כדי להשיב את הזיהוי. מגבלה נוספת של פרוטוקול זה היא השימוש במספר חבילות תוכנה מסחריות או מותאמות אישית לעיצוב המודל, לעיבוד הרשת (mesh processing) ולרישום ה-AR. חלק מהפונקציות עשויות להיות מוחלפות חלקית בחלופות קוד פתוח או בעלות נמוכה. לדוגמה, ניתן להשתמש ב-FreeCAD או ב-Blender לעיצוב ועריכה של מודלים תלת-ממדיים, וב-MeshLab או ב-CloudCompare לעיבוד רשת. בנוסף, שילוב של Unity עם Vuforia Engine עשוי לספק מסגרת פיתוח פוטנציאלית עבור AR המבוססת על זיהוי אובייקטים תלת-ממדיים, כגון מעקב מבוסס-מטרה (model-target-based tracking). עם זאת, שחזור זרימת העבודה של ה-AR המשמשת בפרוטוקול זה עדיין ידרוש פיתוח תוכנה נוסף, אופטימיזציה של פרמטרים ותיקוף. לכן, למרות שניתן לשחזר חלקית את שלבי המידול ועיבוד הרשת באמצעות תוכנות חלופיות, לא ניתן להחליף ישירות את מודול המעקב והרישום של ה-AR המיושם בפרוטוקול זה בחבילת קוד פתוח קיימת ללא פיתוח ותיקוף נוספים.
לבסוף, ניתוח סטיית חפיפת מישור התמונה הדו-ממדי יכול לשקף באופן חלקי בלבד את דיוק החפיפה של המערכת. מכיוון שגילוף שיניים הוא הליך תלת-ממדי, הנתונים הנוכחיים אינם יכולים להדגים באופן מלא את דיוק הרישום התלת-ממדי הנדרש לאימון גילוף שיניים עדין. השפעותיהם של הסתרת סימנים, זווית המצלמה, התאורה ומהירות הסיבוב על ביצועי הרישום לא הוערכו בנפרד. לכן, עדיין לא ברור האם המערכת מספקת דיוק מספיק להנחיה של גילוף שיניים עדין. לבסוף, מחקר זה השלים אישוש של זרימת עבודה על דגימה בודדת בלבד, ויכולתה לשפר את איכות הגילוף ואת תוצאות הלמידה של הסטודנטים עדיין דורשת אישור באמצעות מחקרים מבוקרים עם מדגם גדול.
לסיכום, מחקר זה מציע פרוטוקול לגילוף שיניים בסיוע מציאות רב-שכבתית (AR) המבוסס על מעקב תלת-ממדי אחר אובייקטים. תוצאות התיקוף של דגם בודד מעידות כי תהליך עבודה זה יכול להשיג חפיפת AR בין מודל השן הסטנדרטי לבין סביבת העבודה של גוש השעווה הפיזי, ובכך לספק רפרנס ויזואלי תלת-ממדי אינטואיטיבי לאימון בגילוף שיניים. אף על פי שהתוצאות הנוכחיות אינן יכולות להוכיח באופן ישיר כי ההשפעה החינוכית שלו עולה על זו של שיטות מסורתיות, פרוטוקול זה מדגים את ההיתכנות והערך של מחקר נוסף ליישום טכנולוגיית AR באימון לגילוף שיניים. עם ההתקדמות במכשירים ניידים, באלגוריתמים של זיהוי תלת-ממדי ובבינה מלאכותית, ניתן יהיה לשלב הוראת גילוף שיניים בסיוע AR בתוך הלימודים במעבדות שיניים באופן זול יותר, נוח יותר ובעל יכולת הרחבה רבה יותר.
למחברים אין ניגודי עניינים להצהיר עליהם.
עבודה זו נתמכה על ידי הצוות של אוניברסיטת קונמינג לרפואה לאבחון וטיפול במלפורמציות קרניו-פציאליות מורכבות (2024XKTDTS08), פרויקט מחקר של המרכז הרפואי הקליני של מחוז יוננאן (2024YNLCYXZX0227, 2024YNLCYXZX0229), המרכז למחקר קליני של מחלות הפה של יוננאן (202505AJ310001), ותוכנית התמיכה להכשרת כישרונות ברמה גבוהה של מחוז יוננאן (YNWR-MY-2020-086).
| שם | חברה | מספר קטלוג | הערות |
|---|---|---|---|
| סורק תלת-ממדי | SHINING 3D | AutoScanEPCG-BD032G26 | משמש לסריקה תלת-ממדית של שן שעווה סטנדרטית. |
| מצלמה | Intal RealSense | D415 | משמשת לרכישת שדה ראייה בזמן אמת לזיהוי סימן אובייקט תלת-ממדי. |
| כלי גילוף לשעווה דנטלית | גילוף בלוק השעווה. | ||
| E3D CMF | Hunan Liuwei Jinghang Digital Technology Co., Ltd., Hunan, China. | https://www.e3d-med.com/ | תוכנת ניווט AR. |
| מדפסת תלת-ממדית FDM | Bambu Lab | 31B8BP631300564 | משמשת לייצור בסיס נשא לבלוק השעווה וסימן מעקב אחר אובייקט תלת-ממדי. |
| Geomagic Wrap | 3D Systems Corporation | version 2021 | משמשת לעיבוד נתוני סריקה תלת-ממדית של שן שעווה סטנדרטית. |
| פילמנט PLA | Bambu Lab | 10105 | משמש להדפסת תלת-ממדית בשיטת FDM. |
| SOLIDWORKS | Dassault Systèmes | version 2025 | משמש למידול תלת-ממדי של בסיס נשא לבלוק השעווה וסימן מעקב אחר אובייקט. |
| בלוק שעווה | תרגול גילוף שיניים. |
בקש הרשאה לשימוש חוזר בטקסט או באיורים של מאמר JoVE זה
בקש הרשאה