Method Article

Bewertung der Flugleistung und der Augenbewegungsmuster mit dem Virtual Reality Flight Simulator

DOI:

10.3791/65170

May 19th, 2023

In This Article

Summary

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Es wurde ein neuer Virtual-Reality-Flugsimulator gebaut, der eine effiziente und kostengünstige Bewertung der Flugleistung und der Augenbewegungsmuster ermöglicht. Es bietet auch ein vielversprechendes Forschungsinstrument für die Ergonomie und andere Forschungen.

Abstract

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Die effiziente und wirtschaftliche Leistungsbewertung von Piloten ist für die Luftfahrtindustrie von entscheidender Bedeutung geworden. Mit der Entwicklung von Virtual Reality (VR) und der Kombination von Eye-Tracking-Technologie werden Lösungen, die diesen Anforderungen gerecht werden, Realität. Frühere Studien haben VR-basierte Flugsimulatoren untersucht, wobei der Schwerpunkt hauptsächlich auf der Technologievalidierung und dem Flugtraining lag. In der aktuellen Studie wurde ein neuer VR-Flugsimulator entwickelt, um die Flugleistung von Piloten anhand von Augenbewegungen und Flugindikatoren in einer immersiven 3D-Szene zu bewerten. Während des Experiments wurden 46 Teilnehmer rekrutiert: 23 Berufspiloten und 23 Studenten ohne Flugerfahrung. Die Versuchsergebnisse zeigten signifikante Unterschiede in der Flugleistung zwischen Teilnehmern mit und ohne Flugerfahrung, wobei erstere höher waren als letztere. Im Gegensatz dazu zeigten diejenigen mit Flugerfahrung strukturiertere und effizientere Augenbewegungsmuster. Diese Ergebnisse der Differenzierung der Flugleistung zeigen die Validität des aktuellen VR-Flugsimulators als Methode zur Bewertung der Flugleistung. Die unterschiedlichen Blick-Bewegungsmuster mit Flugerfahrung bilden die Grundlage für die zukünftige Flugauswahl. Dieser VR-basierte Flugsimulator hat jedoch Mängel wie Bewegungsfeedback im Vergleich zu herkömmlichen Flugsimulatoren. Diese Flugsimulator-Plattform ist sehr flexibel, abgesehen von den scheinbar niedrigen Kosten. Es kann die unterschiedlichen Bedürfnisse von Forschenden erfüllen (z. B. Messung des Situationsbewusstseins, der VR-Krankheit und der Arbeitsbelastung durch Hinzufügen relevanter Skalen).

Introduction

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Die Europäische Agentur für Flugsicherheit (2012) kategorisiert Flugsimulatoren als Schulungseinrichtungen, Flug- und Navigationsprogrammtrainer, Flugtrainingsgeräte und komplette Flugsimulatoren1. Bisher steht eine Reihe von Flugsimulatoren für die Ausbildung zur Verfügung, von Low-Level-Tischsystemen bis hin zu hochkomplizierten, bewegungsbasierten Vollflugsimulatoren2. Der traditionelle Simulator umfasst ein Flugdynamikmodell, eine Systemsimulation, ein Hardware-Cockpit, eine externe Visualisierung und eine optionale Bewegungssimulation3.

Diese traditionellen Flugsim....

Access restricted. Please log in or start a trial to view this content.

Protocol

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Alle hier beschriebenen Methoden wurden vom Institutional Review Board (IRB) der Tsinghua-Universität genehmigt, und es wurde eine Einverständniserklärung aller Teilnehmer eingeholt. Nach Abschluss des Turniers erhielten alle Teilnehmer 12 $ (oder ein Geschenk im gleichen Wert).

1. Auswahl der Teilnehmer

  1. Rekrutieren Sie die Teilnehmer gemäß einer früheren Studie zur Leistungsanalyse mit der G*Power-Software35 (siehe Materialtabelle), um sicherzustellen, dass die Teilnehmerzahl der von G*Power angegebenen erwarteten Stichprobengröße entspricht, die 21 beträgt.
    HINWEIS: Di....

Access restricted. Please log in or start a trial to view this content.

Results

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Für das aktuelle Experiment wurden 23 Experten mit Flugerfahrung und 23 Neulinge ohne Flugerfahrung ausgewählt. Die Teilnehmer waren zwischen 25 und 58 Jahre alt (Experten: M = 32,52 Jahre, SD = 7,28 Jahre; Anfänger: M = 29,57 Jahre, SD = 5,74 Jahre). Das Geschlecht aller Teilnehmer war männlich. Alle Neulinge wurden von der Tsinghua-Universität rekrutiert (Studenten oder Dozenten), und alle Experten kamen von China Eastern Airlines.

Augenbewegung

Access restricted. Please log in or start a trial to view this content.

Discussion

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

In der aktuellen Studie wurde untersucht, ob Teilnehmer mit Flugerfahrung eine bessere Flugleistung aufwiesen als diejenigen ohne Flugerfahrung in einem VR-basierten Flugsimulator. Vor allem aber wurde untersucht, ob bei diesen Teilnehmern mit besserer Flugleistung ein optimiertes Augenbewegungsmuster gefunden werden konnte. Die Ergebnisse zeigen signifikante Unterschiede zwischen Teilnehmern mit und ohne Flugerfahrung bei drei wichtigen Flug-QAR-Indikatoren: Nickwinkel 1 s vor der Landung, die mittlere Entfernung zur Re.......

Access restricted. Please log in or start a trial to view this content.

Disclosures

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Die Autoren gaben an, keine finanziellen Angaben oder Interessenkonflikte zu machen.

Acknowledgements

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Die Autoren sind Herrn Li Yan unglaublich dankbar für seine Hilfe bei der Rekrutierung von Pilotteilnehmern und danken Frau Bu Lingyun für ihre Arbeit beim Zeichnen von Bildern. Die Forschung wurde unterstützt von der National Natural Science Foundation of China (Fördernummer T2192931, 72071185), dem National Brain Project (Fördernummer STI2030-Major Projects2022ZD0208500), dem National Key Laboratory Project of Human Factors Engineering (Fördernummer SYFD062003), dem National Key Laboratory Project of Human Factors Engineering (Fördernummer 6142222210201) und dem Jahr 2022 Major Projects of Military Logistic Research Grant und Key Project of Air Force Equipment Compr....

Access restricted. Please log in or start a trial to view this content.

Materials

List of materials used in this article
NameCompanyCatalog NumberComments
3D-Engine SDKEpic GamesUnreal Engine 4
GameAnalytics Unreal SDK
Dieses SDK ist ein leistungsstarkes und dennoch flexibles kostenloses Analysetool, das für Spiele entwickelt wurde.
CPUIntelIntelCore i9Eine der leistungsstärksten CPUs auf dem Mainstream-Markt.
Eye-Tracking-SDKTobiiTobii XR SDKDieses SDK bietet geräteunabhängigen Zugriff auf Eye-Tracking-Daten, um die Entwicklung von Headsets von vielen verschiedenen Hardware-Anbietern zu ermöglichen, und ist nicht auf Geräte beschränkt, die Tobii Eye-Tracking-Hardware verwenden.
Eye-Tracking-SoftwareEntwickelt vom ForschungsteamEin Programm, das die Bewegung der Augen einer Person verfolgt, während sie ein Virtual-Reality-HMD verwendet.
FlySimulator-ProgrammVom ForschungsteamEine Software, die Flugerlebnisse in einer virtuellen Umgebung mit VR-HMD und Handheld-Controllern simuliert.
GrafikkarteNVIDIAGeForce RTX 3090
10496 NVIDIA CUDA Cores
1.70 GHz Boost Takt   
24 GB Arbeitsspeicher Größe
GDDR6X Speichertyp
Eine der leistungsstärksten Grafikkarten auf dem Mainstream-Markt.
Betriebssystem (OS)MicrosoftWindows XPEin Betriebssystem (OS), das von Microsoft Corporation entwickelt und exklusiv vertrieben
Replica BedienfeldTHRUSTMASTER2960720 2971004 2962072 2960748 2960769U.S. Air Force A-10C Kampfflugzeug HOTAS
Replica JoystickTHRUSTMASTER2960720U.S. Air Force A-10C Kampfflugzeug HOTAS
Replica PedalTHRUSTMASTERTPR Pendelruder
Replik DrosselklappeTHRUSTMASTERU.S. Air Force A-10C Angriffsflugzeug HOTAS
Bildschirm mit PC verbundenRedmiRMMNT27NF, 27 Zoll, Auflösung 1920 x 1080Bildschirm ermöglicht es dem Experimentator, gleichzeitig zu sehen, was in der VR HMD
BildschirmaufzeichnungssoftwareOBS ProjectOBS Studio Version 28.0passiertEine kostenlose Open-Source-Software für Videoaufzeichnung und Live-Streaming
Software zur Analyse der statistischen TrennschärfeOpen-SourceG*power Version 3.1.9.6Ein kostenloses und benutzerfreundliches Tool zur Schätzung der statistischen Aussagekraft und der Stichprobengröße.
StatistiksoftwareIBMSPSS Version 24.0Eine leistungsstarke Statistik-Softwareplattform
Vielseitiges Statistik-ToolGraphPad SoftwareGraphPad Prism Version 9.4.0Ein vielseitiges Statistik-Tool, das speziell für Wissenschaftler entwickelt wurde - nicht für Statistiker
VR-App-StoreHTC CorporationVIVE Software 2.0.17.6 / 2.1.17.6Ein App-Store für Virtual Reality, in dem Kunden die Inhalte erkunden, erstellen, verbinden und erleben können, die sie lieben und brauchen.
VR-Head-Mounted-Display (HMD)HTC CorporationVIVE Pro EyeEin VR-Headset mit präziser Eye-Tracking-VR-Software
SteamSteam VR Version 1.23Ein Tool zum Erleben von VR-Inhalten auf der Hardware
entwickelt wird

References

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,
  1. Oberhauser, M., Dreyer, D., Braunstingl, R., Koglbauer, I. What's real about virtual reality flight simulation. Aviation Psychology and Applied Human Factors. 8 (1), 22-34 (2018).
  2. Oberhauser, M., Dreyer, D. A virtual reality flight simulator for h....

Access restricted. Please log in or start a trial to view this content.

Reprints and Permissions

Request permission to reuse the text or figures of this JoVE article

Request Permission

Tags

Virtual Reality Flight SimulatorEye Movement PatternsFlight Performance EvaluationPilot AssessmentEye Tracking TechnologyFlight Experience Comparison3D Immersive SimulationFlight Control ModuleSituation Awareness MeasurementVR Sickness Assessment

Related Articles