ניגון אוטומטי של וידאו אינטראקטיבי ללימודי תקשורת של בעלי חיים

Summary

וידאו השמעה היא טכניקה בשימוש נרחב התנהגות בעלי חיים. יצרנו תוכנית והערכה כי חל מבוססת כללים, השמעה אינטראקטיבית של 3-D אנימציות מחשב בתגובה בזמן אמת, נתונים אוטומטיים על התנהגות הנושא.

Abstract

צפייה בווידאו היא טכניקה בשימוש נרחב למניפולציה את המצגת מבוקרת של אותות חזותיים תקשורת בעלי חיים. בפרט, פרמטר מבוססי המחשב אנימציה מציעה את ההזדמנות כדי לתפעל באופן עצמאי כל מספר של מאפיינים התנהגותיים, מורפולוגיים, או ספקטרלי בהקשר של דימויים ריאליסטיים מרגש של חיות על המסך. המגבלה העיקרית של השמעה רגילה, לעומת זאת, היא הגירוי החזותי חסר את היכולת לתקשר עם בעלי החיים לחיות. שאילת מהטכנולוגיה וידאו המשחק, יצרנו מערכת אוטומטית, אינטראקטיבית עבור השמעת וידאו השולט אנימציות בתגובה בזמן אמת אותות ממערכת מעקב וידאו. הפגנו בשיטה זו על ידי ביצוע ניסויים בחירה בן זוג על דגים swordtail הנשי, Xiphophorus birchmanni. נקבות ניתנה בחירה סימולטני בין הזכר מחזר אחרי conspecific ואת זכר חיזור heterospecific (X. malinche) בצדדים מנוגדים של אקווריום. גירוי הזכר וירטואלי היה מתוכנת כדי לעקוב אחר המיקום האופקי של נשים, כמו גברים מחזרים לעשות בטבע. מטה בחירה ניסויים על ניצוד X. הנקבות birchmanni שימשו כדי לאמת את יכולתו של אב הטיפוס ביעילות ליצור גירוי חזותי ריאליסטי.

Protocol

1. הגדרת החומרה ומערכת Viewer.

המערכת כוללת של טנק בדיקות ולצדו שני צגים. מצלמת וידאו המחוברת למערכת Viewer BIOBSERVE רשומות התנועה של הנושא בזמן אמת. נתונים Motion הוא עבר את תוכנית אינטראקטיבית השמעה (IVP) וידאו על שרת נפרד, הקובע את ההצעה של הגירוי אנימציה על המסך.

1. מניחים שתי צגי CRT בקצוות מנוגדים של האקווריום 80-l מלא מים נקיים; לפקח פלט להתאים.
2. המצלמה מעל המקום כדי ללכוד לעיני האקווריום; להתחבר BIOBSERVE כרטיס המסך.
3. הגדר את מערכת Viewer לקבל מידע מעקב מהמצלמה.
4. אפשר התוספת Viewer ששולח את הקואורדינטות של חוטם של בעל החיים, הגוף, זנב לשרת אנימציה בזמן אמת באמצעות כתובת ה-IP שצוין הרשת.
5. הפעל את שרת אנימציה.

2. כיול.

1. בשרת אנימציה, לפתוח InteractiveDisplaySetup.txt. הזן רוחב המסך גובה המסך בפיקסלים תחת "מידע מוניטור". תחת "ProgramType" להיכנס "כיול". שמור את השינויים בקובץ.
2. לחץ לחיצה כפולה על סמל התוכנית IVP להתחיל בתוכנית.
3. הזן את גודל הממדים מיכל כמפורט למעלה במערכת Viewer בשלב 2.3. זה יבטיח התאמה בין הנתונים מציג פלט אינטראקטיביים מתוך IVP.
4. מאז הקצוות של אקווריומים קטנים יותר מפקחת, התוכנה מאפשרת למשתמש להשתמש במקלדת (א ו ר עבור רוחב, z ו-x עבור גובה מקשי החצים לתפקיד) כדי להעביר את שטח הצפייה (viewport) של גירויים כדי ליישר את הקצוות של הטנק בדיקות. צפו בשרת אנימציה, viewport הוורוד הוא הדהד בצג אחד בדיקות viewport כחול בצד השני (איור 1).
5. השתמש z ו-x במקלדת כדי לשנות את גודל התצוגה של דגים זכרים על viewports שניהם עד שזה מתאים לגודל הגירוי הרצוי.
6. העבר את תיבות מוצגים כך ליישר את הקצוות של טנק הבדיקה. המשתמש עושה שימוש במקשי Q או W כדי להזיז את תיבות כלפי או ממרכז של הדג.
7. הזן את פרטי הניסוי כאשר תתבקש לעשות זאת על ידי התוכנית. למשתמש יש אפשרות לבחור בין מודלים מראש (בהפגנה שלנו, החיזור הזכר Xiphophorus birchmanni, X. malinche). המשתמש מפרט גם את ההתנהגות של כל הדגים בכל שלב (לא אינטראקטיבי או אינטראקטיבית), הצד שלב שבו כל גירוי יופיע, ואת הגודל הרצוי (אורך סטנדרטי) של כל גירוי.
8. השאלה הבאה שואל אם המשתמש רוצה התנועות דגים להיות שיקוף, כלומר את התנועה של המודל בכל צד של האקווריום יהיה בדיוק אותו הדבר. זה משמש רק כאשר דגים הן במצב אנימציה. השאלות הסופי דאגה התנועה של סנפיר הגב. המשתמש יכול לבחור הגבי מחדל, זה יגרום הגבי רק להעלות במהלך החיזור להציג לרוחב. אם הגב לא מוגדר כברירת מחדל, המשתמש יכול להחליט אם המודל מעלה סנפיר הגב שלו בהתאם למרחק של הנושא מהצג.

3.Starting IVP למבחן זוג בחירה.

1. InteractiveDisplaySetup.txt פתח ולהגדיר "ProgramType" כדי liveTesting ולהגדיר "experimentName" שם את אותו הקובץ המכיל את נתוני הניסוי.
2. בעדינות במקום דגים באקווריום נושא ולהמתין 10 דקות.
3. התחל 2.0 מציג את IVP.

4. מטה בחירה לדין.

רצף ניסיוני הכולל כדלקמן מחקרים קודמים לא אינטראקטיבי באמצעות גירויים וידאו ^1-4. נקבות מוצגים שני גירויים שונים על מסכי בקצוות מנוגדים של האקווריום בדיקה. ההתנהגות הנשית היא מעקב בזמן אמת על ידי מערכת Viewer Biobserve. Assay בתגובה הזמן העמותה, את משך הזמן הזה הנקבה מבלה בתוך 10 ס"מ של צג אחד או אחר. זמן האגודה מחושבת באופן אוטומטי על ידי הצופה.

1. גירויים הווידאו מוצגים נושאים במשפט המורכב משתי, 20 דקות שלבים. הבמה מורכבת מארבעה מקטעים של 5 דקות:
   1. הקטע הראשון acclimatizes הנקבה למיכל מבחן למשך חמש דקות על ידי הצגת מסך מונוכרומטי מפקחת על שניהם.
   2. בקטע השני, שני גירויים שונים מוצגים וידאו לנקבה, אחד בצג שמאל והשני בצד ימין במשך חמש דקות.
   3. מיד לאחר התצוגה של גירויים וידאו, מסך מונוכרומטי מוצג שוב בשני צגים במשך חמש דקות.
   4. בקטע הרביעי והאחרון, גירויים מתוך קטע השנייה מוצגים, אבל את המיקום של כל גירוי מופעלת. זה מספק בקרה בתוך נקבה עבור הטיה לצד.
2. ה-SECבשלב ond חוזר על אותו דפוס, עם סט שונה של גירויים בו זמנית, הציג.
3. ניסויים נוספים מנוהלות על ידי חזרה לשלב 2 שיטתי שונות בצד והסדר של המצגת.

5. נציג תוצאות.

הערכנו את היעילות של הפעלת אינטראקטיבי על ידי השוואת תגובת הנקבה אנימציות אינטראקטיביים לא אינטראקטיבי של גברים מחזרים. גירוי שאינו אינטראקטיבי ביצע גירוי החיזור המסך, עצמאית של התנהגות נשית, כמו במחקרים קודמים ^1-4.

גירוי אינטראקטיבי מעקב את המיקום האופקי של הנקבה על פני המסך. העמדה של הדג או מדומה או את הדג הנושא הוגדר תפעולית האמצע של הקו המחבר את centroid ואת חוטם. שלושת הכללים המנחים התנהגות גברית היו כדלקמן, שם את הכיוון X מתייחס אורך של הטנק, ואת הכיוון Z מתייחס לרוחב של הטנק (איור 2):

כלל 1: הזכר מדומה תמיד מלווה את הנושא על פני המסך, מעקב אותה בכיוון Z.

כלל 2: סנפיר הגב של הזכר מדומה מועלית רק כאשר הוא מבצע חיזור לרוחב.

כלל 3: דגים מדומה swordtail זכר רק לבצע חיזור לרוחב 50% מהזמן הכולל בו מוצגת לנקבה. התצוגה החיזור לרוחב מופעלת על ידי דג זכר להיות בתוך באורך רבע הגוף הגברי של הדג נקבה בכיוון Z. תצוגת החיזור לרוחב אינו תלוי כמה קרוב הנקבה היא לפקח על בכיוון X.

גירוי אינטראקטיבי מקרוב מסומנים העמדה של הנקבה בזמן אמת (איור 3).

עבודות קודמות שימוש לא אינטראקטיבי גירויים ^4,5 הראו כי נשים X. birchmanni בתוקף המועדפת אותות חזותיים של המין שלהם. לא אינטראקטיבי שנוצר על ידי גירויים IVP היו יעילים באותה מידה לעורר העדפות להזדווג conspecific (t = 1.923, N = 9, p = 0.046). כאשר נבדקו הנשים על הגברים מדומה conspecific ו heterospecific אינטראקטיבי מיד לפני או לאחר מכן במשפט עם זאת, הם לא הראו העדפה (איור 4).

באיור 1. צג ההתקנה כיול.

איור 2. התצוגה סכמטי של טנק ההתקנה לפקח, גרזנים המציין המשמש לתיאור עמדה.

איור 3. המיקום האופקי של מופת אנימציה ובכפוף נקבה נציג לאורך זמן.

איור 4. פעם האגודה (ים) של נשים עם אינטראקטיביים לא אינטראקטיבי גירויים זכר conspecific ו heterospecific. כל העלילה נוצרת שיא של חמש דקות של פלט עמדות על ידי אב. בחלקות אלה, שהזמן מתקדם בכיוון Y אנכי 0-5 דקות.

איור 5. נציגת עמותת נתונים בזמן מעקב על ידי שני גירויים אינטראקטיביים. שני קטעים של חמש דקות עבור שתי נקבות מוצגים.

Discussion

שיטות הקודם עבור השמעת וידאו אינטראקטיבי בהתנהגות בעלי חיים יש לסמוך על מפעיל אנושי כדי לספק תשובות רמזים התנהגותיים של נושאים. עם IVP, יצרנו תוכנית להחיל כללים מבוססי אינטראקטיביות בתגובה בזמן אמת, נתונים אוטומטיים על התנהגות הנושא. אנו מתאר בקצרה את הצעדים הכרוכים ביצירת התוכנית הבאה.

הצעד הראשון היה ליצור עותקים דיגיטליים של זכר X. birchmanni ו X. malinche. לקחנו גישה דומה מחקרים קודמים ^6. יצרנו meshes 3D כי הם על פי הדגם של טקסטורות המבוסס על תצלומים של X. אמיתי birchmanni ו X. malinche. כדי ללכוד את טקסטורות ריאליסטיות של הדג האמיתי, תצלומים אותה משמש מודל הצורות הדגים ששימשו טקסטורות לדגים. מפה מישוריים להחיל UV קואורדינטות שלהם מיושר את המפה UV עם מרקם תצלום. שנית, רשת דגים דיגיטלי צריך לעוות כמו דג אמיתי. כדי להשיג זאת, שלד הווירטואלי נוצרה עבור הגוף סנפיר "עור" על הרשת. תהליך הפשטה מאפשרת רשת להיות מעוות כאשר המפרקים הם מסובבים.

שנית, הוספנו תנועה לדגים דיגיטלית. שש תנועות המפתח דג swordtail זכר גורם היו אנימציה. שלוש התנועות שימשו כדי לייצג את מהירויות שונות בו דג שוחה. שלושת האחרים היו תנועות הדגים שנותרו עדיין, מפנה, או מציג חיזור לרוחב. מאז הזכרים יכולים להגדיל או להקטין את סנפיר הגב שלהם בהתאם אם מקלטי זכר או נקבה נוכחים ^3, אנו decoupled התנועה של סנפיר הגב מזו של להציג את החיזור לרוחב. סנפיר הגב היה מתוח עד כדי כך שזה יכול להיות העלה או מונמך בכל נקודה במהלך המחזור. סך של 24 מחזורים האנימציה היו בשימוש. כל מחזור התחיל והסתיים הדגים באותה תנוחה כך מחזורי אנימציה יכול בקלות מתמזגים. כל 24 מחזורים אנימציה שנוצרו על ידי rotoscoping ^7,8 התנועה הרצוי מתוך וידאו תקורה של חיה, החיזור הזכר X. birchmanni.

שלישית, עלינו לאפשר אינטראקטיביות. השתמשנו במערכת Viewer Biobserve לעקוב בזמן אמת את מיקום החרטום, גוף וזנב של swordtail הנשי ולהעביר את המידע בזמן אמת לתוכנית IVP. הדבר נעשה בנפרד עבור כל זכר מחזר על כל צג. אנימציה זכר בעקבות עמדת הדגים של הנושא. אנו הדגם הבא באמצעות ריינולדס הגיע התנהגות היגוי ^9,10, אשר אפשרה הזכר לעקוב הנשי להאט כפי גישות הנשי.

כדי לחשב את המיקום של הדג swordtail זכר בכל צעד זמן, המערכת סופקה עם המיקום הנוכחי של הנקבה, אשר אפשרה התוכנית כדי לחשב את הכוחות המניעים את הזכר. ראשית, וקטור היעד-לקזז היה מחושב על ידי הפחתת העמדה של הדג זכר מעמדה של דגים ממין נקבה. המרחק בין שני הדגים זכר לדגים הנקבה נקבע על ידי לקיחת גודל של וקטור, לקזז את היעד. שלישית, המהירות הרצויה של הדג זכר נקבע על ידי חלוקת המרחק לפי ערך האטה מתמדת. זה איפשר את הדג זכר להאט ככל שהתקרבה הדגים נקבה. לאחרונה, האצה הרצוי היה מחושב על ידי הפחתת המהירות הנוכחית של הזכר מן המהירות הרצויה.

מאז אנימציות מוצגים כפי מסגרות נפרדות של וידאו בתדירות של 60 הרץ, החישובים נעשו עבור כל שלב בזמן בדיד, במרווחים של 0.016 שניות. מקסימום מהירות נקבע לפי שווי של 10 ס"מ / s עבור ניסויים אלו. אם גודל המהירות החדש היה גדול יותר מאשר מהירות מקסימלית, מהירות נקבע למקסימום.

סימולציה זו בפרט, דגים זכרים אינטראקטיבי העלה סנפיר הגב שלה 50% מהזמן, ורק במהלך אינטראקציות החיזור. התנהגות החיזור לרוחב להציג הופעלה בכל פעם את הגירוי הגברי היה בתוך 0.25 אורכי הגוף של הדג swordtail הנשי ברובד Z.

הופתענו כי אינטראקטיביות ביטל את ההעדפה הנשית עבור conspecifics, חרף העובדה כי לא אינטראקטיבי אנימציות שהושרו העדפה חזקה בהתחשב בכך הנקבות בילה את רוב הזמן בקשר עם גירויים אינטראקטיביים. אפשרות אחת היא עוקבת מקרוב אחר הנקבה עשויה לעקוף רמזים חזותיים המשמשים להערכת זכרים, כגון החרב סנפיר הגב. לחלופין, נקבות עשוי להיות פחות סיכוי לאבד עניין הזכר מחזר אחרי, ולכן פחות סביר מדגם יחידים (איור 5).

עם זאת, התוצאות שלנו מראות כי עקרון הפעולה של טכנולוגיית וידאו המשחק כלומר, תוכנה מונחה, כללים מבוססי סוכנים להגיב קלט משתמש יכול להיות מיושם בהצלחה השמעה אינטראקטיבית במחקרים שלהתנהגות בעלי חיים. סוג זה של הפעלת כללים מבוססי אינטראקטיבי צריך להיות שימושי עבור מחקרים של התנועה shoaling והקולקטיבית ^11,12. בפרט, היכולת לתפעל את הכללים מופת וירטואלי שימושים shoaling צריך לתת לנו תובנה התהליכים חיות להשתמש כדי לקבל החלטות shoaling.

Materials

Name	Company	Catalog Number	Comments
Maya 8.0
C# program using Microsoft’s XNA Game Studio 2.0
BIOBSERVE Viewer 2
Dell 15” CRT monitor (2)
20 X 20 X 80 cm Plexiglas testing aquarium
Dell Latitude computer (animation server)