Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
JoVE Journal Behavior
Click here for the English version

Behavior

Untersuchung der Auswirkungen visueller Bilder und Lernform-Audio-Regularitäten auf Bouba und Kiki

Published: September 13, 2019 doi: 10.3791/59954
Automatic Translation
1, 1
1Department of Experimental Psychology, University of Oxford

Summary

Ziel des vorgestellten Protokolls ist es, die Rolle der visuellen Bildsprache im Bouba/Kiki-Effekt zu untersuchen, ob das Training zur Kenntnis der Bouba/Kiki-Form-Audio-Regelmäßigkeiten den Bouba/Kiki-Effekt und die Erkennung einzelner Bouba- und Kiki-Formen beeinflusst, und schließlich, welche mentalen Bilder diese Regelmäßigkeiten produzieren.

Abstract

Dieser Artikel stellt ein Protokoll zur Untersuchung der Rolle visueller Bilder im Bouba/Kiki-Effekt vor, ob das Training in der Erfassung der Bouba/Kiki-Form-Audio-Regelmäßigkeiten den Bouba/Kiki-Effekt und die Erkennung einzelner Bouba- und Kiki-Formen beeinflusst, und schließlich, welche mentalen Bilder diese Regelmäßigkeiten produzieren. Um Bouba/Kiki-Form-Audio-Regelmäßigkeiten zu erzeugen, gab es zwei Arten von Formen (gefüllt; umrissen) und zwei Arten von Audio (Wort; Nicht-Wort-Sound). Drei Gruppen von Individuen nahmen an drei Experimenten teil: Blind, Augenbinde und Vision. Die Experimente wurden in fester Reihenfolge über die Teilnehmer hinweg durchgeführt, ohne Pause zwischen ihnen. In Experiment 1 (Vortest-Nachtest-Design mit drei wiederholten Gruppenmaßen) wurden die Teilnehmer gebeten, die Form auszuwählen, die sie mit dem auditiven Bouba/Kiki assoziierten; in Experiment 2 (innerhalb des Subjektdesigns), um eine Form und einige Audiodaten (manchmal übereinstimmend; manchmal unpassend) als "bouba" oder "kiki;" zu benennen, und in Experiment 3 (nur Nachversuchsdesign), um die Form zu zeichnen, die sie mit dem auditiven Bouba/Kiki assoziierten. Die Ergebnisse deuten darauf hin, dass die Augenbinde-Gruppe auf visuelle Bilder zurückgreifen, um neue Probleme zu lösen, aber nicht langfristig; dass das Training zur Kenntnis von Bouba/Kiki-Form-Audio-Regelmäßigkeiten den Bouba/Kiki-Effekt und die Erkennung einzelner Bouba- und Kiki-Formen beeinflusst, jedoch in jeder experimentellen Gruppe unterschiedlich; und dass alle experimentellen Gruppen mentale Bilder des charakteristischsten Formmerkmals von Bouba (Kurve) und Kiki (Winkel) erzeugen. Tatsächlich ist die Wirkung visueller Bilder aufgabenübergreifend robust, aber nicht langfristig; die Wirkung des Lernens von Form-Audio-Regelmäßigkeiten ist langfristig robust, aber nicht aufgabenübergreifend. Das vorgestellte Protokoll eignet sich, um die Auswirkungen visueller Bilder und Lernform-Audio-Regelmäßigkeiten zu untersuchen, wann sie auftreten und wie robust sie sind; in bestimmten Personen und Gruppen von Einzelpersonen. Dieses Protokoll ist insofern einzigartig, als es sowohl die visuellen Bilder als auch die sensorischen Informationen während des Trainings und Testens unter Kontrolle hält.

Introduction

95% der Weltbevölkerung zeigt einen auditiv-visuellen Bouba/Kiki-Effekt, der die visuell abgerundete Form mit dem gesprochenen Wort "bouba;" und der visuell eckigen Form mit dem gesprochenen Wort "kiki" assoziiert, und sie tun dies, auch wenn sie keine Erfahrung hatten. entweder mit der Form oder dem Wort1. Der Bouba/Kiki-Effekt geht dem Sprachenlernen voraus; es tritt in den Sprachen1,2,3,4,5, mit Bouba und Kiki (vgl. die Vorliebe der Menschen für visuelle Kurven gegenüber visuellen Winkeln6,7 , 8 , 9), und es hängt von der Kombination von Vokalen und Konsonanten ab (z. B. tritt es nicht mit 'bibi' und 'kuku' auf.) 1 , 5 , 10 , 11 , 12. Diese Form-Wort-Assoziation tritt auch mit anderen Form- und Wortpaaren auf, solange sie hauptsächlich gekrümmt sind, als Bouba, und hauptsächlich eckig, als kiki11,13; und/oder sie haben die gleiche Kombination von Vokalen und Konsonanten wie 'bouba' und 'kiki', z. B.: 'Baluma' und 'takete', 'maluma' und 'takete', 'uloomo' und 'takete', 'maa-boo-maa' und 'tuh-kee-tee'1,3, 4,10,11,12,14. Tatsächlich assoziieren die Menschen die abgerundeten visuellen Formen mit den gesprochenen Wörtern, die fortwährende Konsonanten (z. B. /l/ und /m/) und offene Backvokale (z. B. /':/, und /':/) enthalten, und die visuellen Winkelformen mit den gesprochenen Wörtern, die plosive Konsonanten (z. B. / k/ und /t/) und schließen Sie die vorderen Vokale (z. B. (//// und /I/)11,12,15,16. Sie werden mehr von den Konsonanten als von den Vokalen beeinflusst, insbesondere von den stimmlosen (z.B. /k/ und /t/)11,12,15,16. Tatsächlich scheinen die Merkmale der globalen Formen – ihre Kurven und Winkel17 – und der Klang der gesprochenen Worte – ihre Melodie17 – die wichtigsten zu sein, im Gegensatz zu den globalen Formen und Wörtern selbst.

Eine Studie hat den Bouba/Kiki-Effekt mit taktilen Bouba und Kiki anstelle der visuellen Bouba/Kiki-Formen untersucht und festgestellt, dass Sehbehinderte Teilnehmer einen deutlich weniger robusten Bouba/Kiki-Effekt zeigten (ca. 64%) als die vollständig gesichteten (90 %)18. Diese Studie argumentierte, dass der deutlich weniger robuste Bouba/Kiki-Effekt unter den blinden und sehbehinderten Teilnehmern auf einen Mangel an visuellen Bildern zurückgeht: Die voll gesichteten Teilnehmer hatten Regelmäßigkeiten in ihrer Umgebung bemerkt, die nicht leicht zugänglich, wenn das Sehvermögen beeinträchtigt ist18. Ob für den Bouba/Kiki-Effekt eine visuelle Bildsprache notwendig ist, ist aus dieser Studie jedoch nicht ersichtlich: Nur sechs der 42 Teilnehmer mit Sehbehinderung waren angeboren völlig blind18, hatten also überhaupt keine visuellen Bilder. Darüber hinaus haben die anderen Teilnehmer, von denen keiner mit verbundenen Augen ist, möglicherweise die Lippenbewegungen des Experimentators beobachtet, wenn sie das Bouba/Kiki-Wort ankündigten – abgerundete Lippenbewegungen bei der Ankündigung von "Bouba" und eckigen Lippenbewegungen bei der Ankündigung von "kiki"1 , 18 – zeigt einen taktil-visuell-auditorischen Bouba/Kiki-Effekt, anstatt auf visuelle Bilder zu zeichnen. Darüber hinaus wurde keine Wirkung des Bemerkens taktil-auditorischer Regelmäßigkeiten untersucht, z. B. durch einen Vergleich des Bouba/Kiki-Effekts auf Versuch eins und Versuch vier, anstatt den Effekt in allen vier Studien zu berechnen. Darüber hinaus waren die taktilen Bouba und Kiki in den Einzelnen versuchen ziemlich unterschiedlich: In versuchen eins und zwei waren sie 3D- und 2D-Formen (gekrümmt v eckig); in den Versuchen drei und vier, identisch in der Form (Kreis) und unterschiedlich in der Textur (glatt v rau; glatt v stachelig)18. In einer verwandten Ader hat eine Studie einen kinesthetisch-auditorischen Bouba/Kiki-Effekt bei verbundenen (voll gesichteten) Individuen untersucht und festgestellt, dass nach einer zweiminütigen Trainingszeit des Haltens eines Roboterstifts, der programmiert ist, um Flugbahnen der Bouba und Kiki zu zeichnen, zeigten 82% den Bouba/Kiki-Effekt19. Aus dieser Studie geht jedoch nicht hervor, ob der Bouba/Kiki-Effekt aufgrund der Ausbildungszeit aufgetreten ist: Die Studie enthielt weder einen Vortest noch eine Kontrollgruppe.

Zu diesem Zweck haben wir die Rolle der visuellen Bildsprache im Bouba/Kiki-Effekt untersucht, ob das Training zur Erfassung taktiler/visuell-auditorischer Bouba- und Kiki-Regelmäßigkeiten den Bouba/Kiki-Effekt und die Erkennung individueller taktiler/visueller Bouba und kiki Formen, und schließlich, welche mentalen Bilder diese Form-Audio-Regelmäßigkeiten produziert17. Um Bouba/Kiki-Form-Audio-Regelmäßigkeiten zu erzeugen – nicht nur kiki-shape/kiki-word-Besonderheiten1 – umfasste diese Studie zwei Arten von taktilen/visuellen Bouba/Kiki-Formen (gefüllt; umrissen) und zwei Arten von auditiven Bouba/Kiki [Audio ( Wort; Nicht-Wort-Sound)]17. Drei Gruppen von Individuen nahmen an drei Experimenten teil: Blind (N = 12), Augenbinde (N = 12) und Vision (N = 12). Die Experimente wurden in fester Reihenfolge über die Teilnehmer und ohne Pause zwischen ihnen durchgeführt, um die Menge und Art der Erfahrung der Teilnehmer mit Bouba und Kiki unter Kontrolle zu halten. In Experiment 1 (Vortest-Nachtest-Design mit drei wiederholten Gruppenmaßen) wurden die Teilnehmer gebeten, die taktile/visuelle Form auszuwählen, die sie mit dem auditiven Bouba/Kiki assoziierten; in Experiment 2 (innerhalb des Subjektdesigns), um eine taktile/visuelle Form und einige Audioformen (manchmal übereinstimmend; manchmal unpassend) als "bouba" oder "kiki; und in Experiment 3, (nur nach dem Test design) zu bezeichnen, um die taktile/visuelle Form zu zeichnen, die sie mit dem audity bouba/kiki17. Insgesamt ergab diese Studie, dass die Wirkung visueller Bilder über Aufgaben hinweg robust ist, aber nicht langfristig innerhalb jeder Aufgabe, während die Auswirkungen des Lernens von Form-Audio-Regelmäßigkeiten langfristig innerhalb jeder Aufgabe robust sind, jedoch nicht über Aufgabenhinweg 17. Dieser Artikel stellt das Protokoll aus dieser Studievor 17. Das vorgestellte Protokoll eignet sich, um die Auswirkungen visueller Bilder und Lernform-Audio-Regelmäßigkeiten zu untersuchen, wann sie auftreten und wie robust sie sind; in bestimmten Personen und Gruppen von Einzelpersonen. Dieses Protokoll ist insofern einzigartig, als es sowohl die visuellen Bilder als auch die sensorischen Informationen während des Trainings und Testens unter Kontrolle hält.

Protocol

Die Medical Sciences Inter-Divisional Research Ethics Committee (IDREC) University of Oxford hat die Genehmigung für dieses Protokoll erteilt (Ref-Nr: MS-IDREC-C1-2015-200, R46287/RE002 und R42687/RE004).

1. Design und Bedingungen

  1. Führen Sie drei Experimente in der folgenden festen Reihenfolge mit allen Teilnehmern durch: Experiment 1, Experiment 2 und Experiment 3, ohne Unterbrechung zwischen ihnen. Stellen Sie sicher, dass alle Teilnehmer an Experiment 2 und alle Teilnehmer an Experiment 3 auch an Experiment 2 (und Experiment 1) teilgenommen haben.
  2. Durchführungsexperiment 1 – ein Vortest-Post-Test-Design mit drei experimentellen Gruppen: Blind, Augenbinde und Vision; und drei wiederholte Gruppenmaßnahmen. Präsentieren Sie die Prüfungen in fester Reihenfolge allen Teilnehmern. (Gesamtzahl der Versuche: 8.)
    1. Führen Sie den Vortest (Prüfung 1) durch, um den taktilen/visuell-auditorischen Bouba/Kiki-Effekt zu testen.
    2. Führen Sie die erste wiederholte Gruppenmessung (Prüfung 4) durch, um die Wirkung wiederholter taktiler/visueller Form (entweder gefüllt oder umrissen) und abwechslungsreichen Tons (Wort- und Nichtwortton) zu testen.
    3. Führen Sie die zweite Gruppenmaßnahme (Prüfung 5) durch, um die Wirkung einer neuen taktilen/visuellen Form (entweder umrissen oder gefüllt) und abwechslungsreichen Tons (Wort- und Nichtwortton) zu testen.
    4. Führen Sie die dritte Gruppenmessung und den Nachtest (Prüfung 8) durch, um die Wirkung einer unterschiedlichen taktilen/visuellen Form (gefüllt und umrissen) und des abwechslungsreichen Audios (Wort- und Nichtwortton) zu testen.
    5. Weisen Sie zufällig zu, welche Art von taktilen/visuellen Bouba/Kiki-Shapes in Denbaschen 1-4 (entweder gefüllt oder umrissen) dargestellt werden sollen. Präsentieren Sie den anderen Typ in Denbfürz 4-8. Weisen Sie dann nach dem Zufallsprinzip das Hörwort (entweder Bouba oder Kiki) in Versuch 1 und das auditive Bouba/Kiki (entweder Bouba oder Kiki und entweder Wort oder Nicht-Wort-Sound) in jedem der Prüfungen 2-8 dar.
      HINWEIS: Stellen Sie sicher, dass es insgesamt vier Bouba- und vier Kiki-Versuche gibt; vier gefüllte und vier umrissene taktile/visuelle Formversuche; vier auditive Wörter und vier auditive Nicht-Wort-Sound-Tests.
  3. Conduct Experiment 2 – ein Design innerhalb des Subjekts, mit drei experimentellen Gruppen: Blind, Augenbinde und Vision; und zwei gruppenübergreifende Maßnahmen. Präsentieren Sie die Prüfungen in fester Reihenfolge allen Teilnehmern. (Gesamtzahl der Versuche: 8)
    1. Testen Sie die sofortige Erkennung von kongruenz (bouba/kiki + bouba/kiki) Form-Audio (Trial 1).
    2. Testen Sie die Erkennung von (a) kongruenten (bouba/kiki + bouba/kiki) und (b) unpassenden (bouba/kiki + kiki/bouba) Form-Audio [über vier Versuche pro Art von Kongruenz (Versuche 1-8)].
    3. Weisen Sie zufällig zu, welche Art von taktiler/visueller Bouba/Kiki-Form (entweder gefüllt oder umrissen) in Denbaschen 1-8 dargestellt werden soll. Dann nach dem Zufallsprinzip zuweisen, welche kongruöse taktile/visuelle Form und auditiven Nichtwortklang (entweder bouba + bouba oder kiki + kiki) in Versuch 1 zu präsentieren, und schließlich welche Art von Kongruenz (entweder übereinstimmende oder unpassende taktile/ visuelle Bouba/Kiki-Form + auditive bouba/kiki non-word sound) in jedem der Prüfungen 2-8 zu präsentieren.
      HINWEIS: Stellen Sie sicher, dass es insgesamt vier taktile/visuelle Bouba- und vier taktile/visuelle Kiki-Versuche gibt; vier gefüllte und vier umrissene taktile/visuelle Versuche; vier kongruenöse und vier unpassende (Form + Nicht-Wort-Sound) Versuche. (Das auditive Bouba/Kiki-Wort ist in diesem Experiment nicht enthalten.)
  4. Conduct Experiment 3 – ein Design nach dem Test, mit drei experimentellen Gruppen: Blind, Augenbinde und Vision. Präsentieren Sie die Prüfungen in fester Reihenfolge allen Teilnehmern (Gesamtanzahl der Versuche: 4).
    1. Testen Sie in vier getrennten Versuchen, welche mentalen Bilder das Training in der Kenntnis von Form-Audio-Regelmäßigkeiten (z.B. Experiment 1 und Experiment 2) hervorgebracht hat: Bouba-Wort, Bouba-Nichtwort-Sound, Kiki-Wort und Kiki-Nicht-Wort-Sound.
    2. Ordnen Sie zufällig zu, welche Art von auditiver Bouba/Kiki (entweder Bouba oder Kiki und entweder Wort- oder Nicht-Wort-Sound) in jedem der Prüfungen 1-4 vorhanden sein soll.
      HINWEIS: Stellen Sie sicher, dass es insgesamt eine auditive Bouba-Wort-Studie, eine auditive Bouba-Nicht-Wort-Sound-Studie, eine auditive Kiki-Wort-Studie und eine auditive Kiki-Nicht-Wort-Sound-Studie gibt.

2. Teilnehmer

  1. Rekrutieren Sie eine Gruppe von Teilnehmern, die angeboren blind sind; das heißt, geblendet weniger als vier Monate nach der Geburt20,21,22: Kategorien 5: totale Blindheit; und 4: Lichtwahrnehmung (Wahrnehmung einer Lichtquelle) und Lichtprojektion (Wahrnehmen, wo sich eine Lichtquelle befindet)22. Stellen Sie sicher, dass sie alle Braille-Leser sind.
  2. Rekrutieren Sie eine Gruppe von voll gesichteten Teilnehmern, die doppelt so groß sind wie die Gruppe der Teilnehmer, die angeboren blind sind. Stellen Sie sicher, dass sie alle normal/korrigiert auf normales Sehen haben.
    HINWEIS: Stellen Sie sicher, dass alle Teilnehmer zwischen 18 und 70 Jahre alt sind, mit normalem/korrigiertem normalem Hören, keiner kognitiven Verzögerung oder Beeinträchtigung oder körperlichen Behinderungen, und dass sie alle naiv gegenüber dem Bouba/Kiki-Effekt sind.
  3. Nach dem Zufallsprinzip die Hälfte der Gruppe der voll gesichteten Teilnehmer der Augenbindegruppe und die andere Hälfte der Sehgruppe zuordnen.
    ANMERKUNG: Teilnehmer, Art der taktilen/visuellen Bouba/Kiki-Form(n), Art der auditiven Bouba/Kiki und Kongruenz werden nach dem Zufallsprinzip einer von zwei Kategorien zugeordnet: Augenbinde oder Sicht; gefüllt oder umrissen; Wort oder Nicht-Wort-Sound; Bouba oder Kiki; übereinstimmend oder unpassend. So kann die zufällige Zuordnung entweder durch ein Computerprogramm oder manuell (z.B. durch Dasinsse einer Münze) erfolgen.

3. Materialien

  1. Herstellung der taktilen/visuellen Materialien
    1. Übertragen Sie die visuellen Bouba/Kiki-Formen (30 x 23 mm) auf Anschwellen von Papier, entweder durch Drucken von einem PC oder durch Kopieren dann von einem Bild. Achten Sie darauf, zwei Arten von visuellen Bouba/Kiki-Formen zu übertragen: Eine gefüllte und eine umrissene [(1,5 Pt. Linie). Vgl. Abbildung 1].
    2. Passieren Sie das Swell-Papier durch einen Wärmefixierer. Stellen Sie sicher, dass die taktilen Bouba/Kiki-Formen bis zu 0,5 mm Höhe ansteigen. Alternativ können Sie die taktilen/visuellen Bouba/Kiki-Shapes aus einem Transkriptionsservice für Sehbehinderte bestellen (mit angehängter PDF-Datei).
    3. Das Anschwellenpapier auf Schaumstoffplatte [weiß (5 mm dick)] kleben. Verwenden Sie Sprühkleber.
    4. Schneiden Sie das Anschwellenpapier und die Schaumstoffplatte in die Größe (50 x 50 mm), d.h. um vier separate taktile/visuelle Bildkarten zu erstellen: Bouba gefüllt, Bouba umrandet, kiki gefüllt und kiki umrissen (vgl. Abbildung 1). Verwenden Sie ein Messer zum Schneiden tapeten.
    5. Schneiden Sie eine Kartonplatte/Schaumplatte, um die taktilen/visuellen Bouba/Kiki-Formen in Größe (297 x 210 mm) zu bedecken. Verwenden Sie ein Messer zum Schneiden tapeten. Alternativ können Sie das A4-Format bestellen.
    6. Kopieren Sie Papier/Kunststoff-Prägefolie in die Größe (210 x 148 mm). Verwenden Sie eine Guillotine. Alternativ können Sie das Format A5 bestellen.
    7. Schneiden Sie eine Gummimatte in die Größe (230 x 150 mm). Verwenden Sie ein Messer oder eine Schere. Alternativ können Sie den Moon Handrahmen bestellen und ihn auseinandernehmen, um die Gummimatte aufzudecken.

Figure 1
Abbildung 1: Zwei Arten von Bouba/Kiki-Formen: Gefüllt und umrissen Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzuzeigen.

  1. Herstellung der hörfertigen Materialien
    1. Nehmen Sie die gesprochenen Bouba (vgl. Audio 1) und Kiki-Wörter auf. Speichern im MP3-Format: Eine Datei für das Bouba-Wort und eine für das Kiki-Wort.
    2. Erstellen Sie die Bouba- und Kiki-Nicht-Wort-Sounds, indem Sie die Dauer und Frequenz (d. h. Melodie) der gesprochenen Wörter "bouba" und "kiki" imitieren. Verwenden Sie einen Schallwellengenerator und eine Pitch-Biegung. Speichern im MP3-Format: Eine Datei für den Bouba-Sound (vgl. Audio 2) und eine für den Kiki-Sound.
    3. Installieren Sie die VLC-App für iOS auf einem Smartphone. Übertragen Sie die MP3-Dateien für Bouba und Kiki in die VLC-App. Speichern Sie sie als vier separate Dateien: Bouba-Sound, Bouba-Wort, Kiki-Sound und Kiki-Wort.

Audio 1: Bouba-Wort Bitte klicken Sie hier, um diese Datei herunterzuladen.

Audio 2: Bouba-Sound Bitte klicken Sie hier, um diese Datei herunterzuladen.

4. Verfahren und Bewertung

  1. Einrichten der Testsitzung
    1. Führen Sie die drei Experimente in einem ruhigen Raum, der farbneutral ist, und mit allen Teilnehmern einzeln. Bitten Sie die Teilnehmer der Augenbindegruppe, ihre Augenbinde anzuziehen, bevor sie die taktilen/visuell-auditorischen Materialien aufstellen, und stellen Sie sicher, dass sie ihre Augenbinde während und zwischen allen drei Experimenten aufbewahren.
  2. Einrichten der taktilen/visuellen Materialien
    1. Stellen Sie die Gummimatte direkt vor den Teilnehmer. Platzieren Sie dann (Experiment 1) die beiden taktilen/visuellen Bouba- und Kiki-Formen (Experiment 2), die eine taktile/visuelle Bouba- oder Kiki-Form und (Experiment 3), die Kopierfolie Papier/Kunststoff-Prägung auf der Gummimatte.
      HINWEIS: Stellen Sie in Experiment 1 sicher, dass Sie immer Bouba auf der linken Seite und Kiki auf der rechten Seite präsentieren; und sowohl in Experiment 1 als auch in Experiment 2, sie immer in der gleichen Ausrichtung darzustellen (vgl. Abbildung 1): Verbesserung der Fähigkeit der Teilnehmer, mentale Bilder der Bouba- und Kiki-Formen ohne Störungen aus ihrer Position und/oder Ausrichtung auf gummimatte. Achten Sie darauf, die Teilnehmer nicht über diese feste Präsentation der taktilen/ visuellen Bouba- und Kiki-Formen zu informieren. Stellen Sie in der Vision-Gruppe immer das Testmaterial hinter einer Kartonplatte/Schaumplatte auf, um zu verhindern, dass diese Teilnehmer einen Blick auf das, was auf Lager ist, werfen.
  3. Einrichten der Auditmaterialien
    1. Stellen Sie den MP3-Player direkt vor den Teilnehmer (auf der anderen Seite der Gummimatte), mit dem Lautsprecher, der ihnen am nächsten ist.
      HINWEIS: Wiederholen Sie die akustischen Informationen des MP3-Players nicht verbal: Um zu verhindern, dass die Teilnehmer der Vision-Gruppe die Lippenbewegungen auf den Bouba/Kiki-Wortversuchen1beobachten, und behalten Sie so alle experimentellen Gruppen unter Kontrolle Die Menge und Art der sensorischen Informationen.
  4. Durchführen von Experiment 1, Experiment 2 und Experiment 3
    1. Bitten Sie die Teilnehmer, die die taktilen Formen (d. h. die Blinden- und Augenbindegruppe) erforschen und zeichnen, die Gummimatte (durch Berührung) zu erkunden: Zum Beispiel für Größe und Textur, ohne taktile/visuelle Bildkarten und/oder Kopierpapier oder Kunststoff Prägefolie oben platziert.
  5. Durchführungsexperiment 1
    1. Erklären Sie, dass zwei Bildkarten auf der Gummimatte präsentiert werden, von denen jede eine taktile/visuelle Form darstellt. Erklären Sie dann, dass einige Audiodateien vom MP3-Player abgespielt werden und dass dieses Audio einer der taktilen/visuellen Formen entspricht.
      HINWEIS: Informieren Sie die Teilnehmer nicht über die beiden Arten von taktilen/visuellen Bouba/Kiki (gefüllt und umrissen) und die beiden Arten von auditiven Bouba/Kiki (Ton und Wort).
    2. Legen Sie die beiden taktilen/visuellen Bildkarten auf die Gummimatte (vgl. Abbildung 1).
    3. Bitten Sie den Teilnehmer in der Blinden- und Augenbindegruppe, mit beiden Händen eine Faust zu machen und die Fäuste auf die präsentierten taktilen/visuellen Bildkarten zu legen und sie bei Bedarf zu führen. Legen Sie die linke Hand auf die Fäusbe des Teilnehmers.
    4. Bitten Sie den Teilnehmer, die beiden taktilen/visuellen Formen, die Blinden- und Augenbindegruppe durch Berührung und die Vision-Gruppe durch Sehen zu erkunden, wenn die Hand auf ihren Fäusten (Blind- und Augenbinde-Gruppe) / die Kartonplatte oder Schaumplatte (Vision-Gruppe) entfernt wird, und zu sagen ' ja', wenn sie ihre Erkundung beendet haben.
    5. Entfernen Sie die linke Hand von den Fäusten des Teilnehmers (in der Blinden- und Augenbindegruppe) / der Kartonplatte oder Schaumplatte (in der Sehgruppe).
    6. Sobald der Teilnehmer "Ja" sagt, bedecken Sie die taktilen/visuellen Bildkarten.
    7. Spielen Sie das Audio vom MP3-Player ab.
      HINWEIS: Spielen Sie die akustischen Informationen aus dem MP3-Player nur einmal ab und wiederholen Sie sie nicht mündlich an die Teilnehmer.
    8. Bitten Sie den Teilnehmer, zu signalisieren, welche taktile/visuelle Form er mit dem Audio assoziiert, z. B. indem er "links/rechts", "kurvig/angular" oder "Blume/Stern" sagt, und notieren Sie sich die angegebene Form. Antworten Sie nicht auf die Antwort des Teilnehmers.
    9. Geben Sie an, ob die Antwort des Teilnehmers richtig oder falsch ist.
      HINWEIS: Wiederholen Sie 4.5.2–4.5.9 für alle acht Versuche.
  6. Durchführungsexperiment 2
    1. Erklären Sie, dass eine Bildkarte mit einer taktilen/visuellen Form auf der Gummimatte präsentiert wird und dass einige Audiodateien vom MP3-Player abgespielt werden. Erklären Sie dann, dass das Audio einmal pro Bildkarte abgespielt wird, sobald der Teilnehmer beginnt, die taktile/visuelle Form zu erkunden.
      HINWEIS: Informieren Sie die Teilnehmer nicht über die beiden Arten von taktilen/visuellen Bouba/Kiki (gefüllt und umrissen), die eine Art von auditiven Bouba/Kiki (Ton) und die beiden Arten von Kongruenz (kongruous und unpassend).
    2. Legen Sie die taktile/visuelle Bildkarte auf die Gummimatte.
    3. Bitten Sie den Teilnehmer in der Blinden- und Augenbindegruppe, mit beiden Händen eine Faust zu machen und die Fäuste auf die vorgestellte taktile/visuelle Bildkarte zu legen und sie bei Bedarf zu führen. Legen Sie die linke Hand auf die Fäusbe des Teilnehmers.
    4. Bitten Sie den Teilnehmer, die taktile/visuelle Form, die Blinden- und Augenbindegruppe durch Berührung und die Sehgruppe durch Vision zu erkunden, wenn die Hand auf ihren Fäusten (Blind- und Augenbindegruppe) / die Kartonplatte oder Schaumstoffplatte (Vision-Gruppe) entfernt wird, und das Audio. Bitten Sie sie dann, die taktile/visuelle Form und den Ton als "bouba" oder "kiki" zu benennen: Ein Name nur23,24,25, wenn sie ihre Erkundung beendet haben.
    5. Entfernen Sie die linke Hand von den Fäusten des Teilnehmers (in der Blinden- und Augenbindegruppe) / der Kartonplatte oder des Schaumstoffbretts (in der Vision-Gruppe) und spielen Sie das Audio vom MP3-Player ab.
      HINWEIS: Spielen Sie die akustischen Informationen aus dem MP3-Player nur einmal ab und wiederholen Sie sie nicht mündlich an die Teilnehmer.
    6. Sobald der Teilnehmer die taktile/visuelle Form und das Audio benennt, bedecken Sie die Bildkarte und notieren Sie sich den angegebenen Namen. Antworten Sie nicht auf die Antwort des Teilnehmers.
    7. Geben Sie an, ob die Antwort des Teilnehmers richtig oder falsch ist.
      HINWEIS: Wiederholen Sie 4.6.2–4.6.7 für alle acht Versuche.
    8. In den kongruenten und unpassenden Studien zählen Sie einen Teilnehmer als "korrekt", wenn er 75 % der taktilen/visuellen Bouba- und Kiki-Formen erkannt hat.
  7. Durchführungsexperiment 3:
    1. Erklären Sie, dass anstelle der taktilen/visuellen Bildkarte(n) ein Kopierpapier/Plastikprägefilm auf die Gummimatte gelegt wird und dass der Teilnehmer aufgefordert wird, darauf zu zeichnen. In der Blinden- und Augenbindegruppe laden Sie die Teilnehmer ein, die verschiedenen Zeichengeräte auszuprobieren und selbst zu entscheiden, was sie bevorzugen: Die Kopierpapier- oder Kunststoffprägungsfolie und Rollballstift oder Sattelrückenstil. Erklären Sie als Nächstes, dass einige Audiodateien vom MP3-Player abgespielt werden und dass der Teilnehmer die taktile/visuelle Form zeichnet, die er mit diesem Audio assoziiert, eine Form pro Audiosegment, wenn er gefragt wird.
      HINWEIS: Informieren Sie die Teilnehmer nicht über die akustischen Informationen (Bouba und Kiki) noch über die beiden Arten von auditiven Bouba/Kiki (Ton und Wort).
    2. Legen Sie die Kopierpapier-/Kunststoffprägefolie auf die Gummimatte.
    3. In allen drei experimentellen Gruppen (blind; Augenbinde; Vision) bitten Sie den Teilnehmer, mit beiden Händen eine Faust zu machen, während er den Rollball-Stift/Sattelrücken-Stil hält, und ihre Fäuste auf die Kopierpapier-/Kunststoffprägungsfolie zu legen und sie bei Bedarf zu führen. Legen Sie die linke Hand auf die Fäusbe des Teilnehmers.
    4. Bitten Sie den Teilnehmer, die Form zu zeichnen, die er mit dem präsentierten Audio assoziiert, wenn die Hand auf den Fäusten entfernt wird. Bitten Sie den Teilnehmer in der Blinden- und Augenbindegruppe, eine taktile Form zu zeichnen; und in der Vision-Gruppe eine visuelle Form. Bitten Sie den Teilnehmer, "Ja" zu sagen, wenn er die Zeichnung beendet hat.
    5. Entfernen Sie die linke Hand von den Fäusten des Teilnehmers.
    6. Spielen Sie das Audio vom MP3-Player ab.
      HINWEIS: Spielen Sie die akustischen Informationen aus dem MP3-Player nur einmal ab und wiederholen Sie sie nicht mündlich an die Teilnehmer.
    7. Sobald der Teilnehmer "Ja" sagt, entfernen Sie ihre taktile/visuelle Zeichnung von der Gummimatte und beschriften Sie sie in der rechten unteren Ecke mit der richtigen Testnummer. Antworten Sie nicht auf die Antwort/gezeichnete Form des Teilnehmers oder geben Sie keine Kommentare ab.
      HINWEIS: Wiederholen Sie 4.7.2–4.7.7 für alle vier Versuche.
    8. Scannen Sie alle taktilen/visuellen Zeichnungen (1:1 Größe) unmittelbar nach jeder Testsitzung in das jpg-Format.
      HINWEIS: Experiment 3 wird von einer Gruppe von Scorern bewertet, nachdem alle Zeichnungsdaten gesammelt wurden.
    9. Erstellen eines Fragebogens zur Bewertung der Zeichnungsdaten (vgl. Abbildung 2):
      1. Skalieren Sie alle gescannten Zeichnungen auf 12 Bilder pro Seite im A4-Format im Format A4.
      2. Ordnen Sie zufällig Bouba/Kiki-Versuche, Klang-/Wortversuche und Blinden-/Blindbinde-/Vision-Schubladen zu.
      3. Fügen Sie die Testnummer in der oberen linken Ecke jedes Bildes hinzu.
      4. Fügen Sie unter jedem Bild 'bouba' und 'kiki' und 'blind', 'blindfolded' und 'sighted' hinzu.
    10. Rekrutieren Sie einen Gruppen-Scorer, über 18 Jahre alt; mit normalem/korrigiertem normalem Hören und Sehen; ohne kognitive Verzögerung oder Beeinträchtigung oder körperliche Behinderungen; die alle naiv zu dieser Studie sind, und die ein visuelles Form-gedrucktes Wort bouba/kiki-Effekt zeigen.
    11. Bitten Sie die Torschützen, zwei Multiple-Choice-Fragen pro Bild im Fragebogen zu beantworten:
      (1) "Ist die abgebildete Form "bouba" oder "kiki;" und (2) "Ist die abgebildete Form von einer blinden (seit Geburt), verbundenen oder vollständig gesichteten Person gezeichnet?" 17.
    12. Je nach Anzahl der Bilder im Fragebogen, fragen Sie die Hälfte der Gruppe der Scorer, um die Hälfte des Fragebogens zu punkten, und die andere Hälfte, um den Rest zu erzielen.
    13. Zählen Sie für jede Studie "korrespondieren", "nicht korrespondieren" und "nicht schlüssig", d. a.:
      1. "Correspond", wenn (i) 75 % der Torschützen sich darauf verständigten, welche taktile/visuelle Form (Bouba oder Kiki) abgebildet war, und (ii) diese Form dem vorgestellten auditiven Bouba/Kiki in dieser Studie entsprach.
      2. "Nicht korrespondieren", wenn (i) 75 % der Torschützen sich darauf verständigten, welche taktile/visuelle Form (Bouba oder Kiki) abgebildet war, und (ii) diese Form nicht dem in dieser Studie dargestellten auditiven Bouba/Kiki entsprach.
      3. "Nicht schlüssig", wenn <75% der Torschützen sich einig waren, welche taktile/visuelle Form (Bouba oder Kiki) abgebildet war. Entfernen Sie die "unschlüssigen" Bilder/Teilnehmerzeichnungen aus den statistischen Analysen.
    14. Zählen Sie einen Teilnehmer in studienübergreifenden Studien als "korrespondieren", wenn 75 % seiner gezeichneten mentalen Bilder: Das heißt, dass taktile/visuelle Formen den dargestellten auditiven Bouba/Kiki entsprechen.
    15. Zählen Sie für jede Studie "anerkannt", "nicht anerkannt" und "nicht schlüssig", d. a.:
      1. "Recognized", wenn (i) 66,6 % der Torschützen zustimmten, welche experimentelle Gruppe (Blinde, Augenbinde oder Sicht) die abgebildete Form gezeichnet hatte, und (ii) dies in dieser Studie richtig war.
      2. "Nicht erkannt", wenn (i) 66,6 % der Torschützen zustimmten, welche Versuchsgruppe (Blinde, Augenbinde oder Sicht) die abgebildete Form gezeichnet hatte, und (ii) dies in dieser Studie nicht korrekt war.
      3. "Unschlüssig", wenn <66,6% der Torschützen sich einig waren, welche experimentelle Gruppe (Blinde, Augenbinde oder Sicht) die abgebildete Form gezeichnet hatte. Die "unschlüssigen" Teilnehmeranerkennungen aus den statistischen Analysen ausschließen.
    16. In allen Studien (und mit entfernten "unschlüssigen" Teilnehmererkennungen) wird ein Teilnehmer als "anerkannt" gezählt, wenn er in 75 % aller Studien anerkannt wird.

Figure 2
Abbildung 2: Beispiele aus dem Fragebogen zur Bewertung der Zeichnungsdaten Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzuzeigen.

Representative Results

Der Bouba/Kiki-Effekt

Sechs der 12 Teilnehmer, die angeboren blind waren (50 %), neun der 12 Teilnehmer mit verbundenen Augen (75 %) und 10 der 12, die vollständig gesichtet wurden (83 %) zeigte einen sofortigen taktilen/visuell-auditorischen Bouba/Kiki-Effekt: Das heißt, sowohl die Augenbinde als auchdie Sehgruppe lagen deutlich über dem Zufallsniveau (von 50%): N = 12) = 3,00, p = 0,08 und2(1. N = 12) = 5,33, p = 0,02 (Experiment 1, Versuch 1)17. Fishers genauer Test zwischen den drei Versuchsgruppen (Experiment 1, Vortest)17. (Vgl. Tabelle 1.)

Wenn es um den langfristigen taktilen/visuell-auditorischen Bouba/Kiki-Effekt geht: Bei der ersten wiederholten Gruppenmaßnahme zeigten neun der angeborenen Blinden den Bouba/Kiki-Effekt zusammen mit neun voll gesichteten und sieben Personen, die mit verbundenen Augen: Blinde und Sehgruppe deutlich über dem Zufallsniveau (von 50%):2(1. N = 12) = 3,00, p = 0,08 und2(1. N = 12) = 3,00, p = 0,08 (Experiment 1, Versuch 4)17. Bei der zweiten wiederholten Gruppenmessung zeigten 11 Teilnehmer der Blinden- und Sehgruppe den taktil/visuell-auditorischen Bouba/Kiki-Effekt: Beide Versuchsgruppen lagen erneut deutlich über dem Zufallsniveau (von 50%):2(1). N = 12) = 8,33, p = 0,00 und2(1. N = 12) = 8,33, p = 0,00; und sieben in der Augenbindegruppe (Experiment 1, Versuch 5)17. Schließlich waren bei der dritten wiederholten Gruppenmaßnahme und nach dem Test neun der 12 teilnehmer, die angeboren blind waren (75 %), sechs der 12 Teilnehmer mit verbundenen Augen (50 %) und alle 12 Teilnehmer, die vollständig gesichtet wurden (100%) zeigte den taktilen/visuell-auditorischen Bouba/Kiki-Effekt; Sowohl die Blinden als auch die Sehgruppe lagen wieder deutlichüber dem Zufallsniveau (von 50%): N = 12) = 3,00, p = 0,08 und2(1. N = 12) = 12,00, p = 0,00 (Experiment 1, Versuch 8)17. Fishers exakter Test ergab einen signifikanten Unterschied zwischen der Augenbinde und der Sehgruppe [p = 0,01. (Experiment 1, Nachtest)] 17. (Vgl. Tabelle 1.)

Teilnehmergruppe Sofortiger Bouba/Kiki-Effekt Langfristiger Bouba/Kiki-Effekt
Vortest Wiederholte Maßnahme 1 Wiederholte Maßnahme 2 Wiederholte Messung 3/Nachtest
blind 50.0% 75.0% 91.7% 75.0%
augenbinde 75.0% 58.3% 58.3% 50.0%
sehvermögen 83.3% 75.0% 91.7% 100.0%

Tabelle 1: Der sofortige und langfristige Bouba/Kiki-Effekt

Die Erkennung von Bouba- und Kiki-Formen

Elf der 12 Teilnehmer, die angeboren blind waren (92 %), neun der 12 Mitverbundenen (75 %) und alle 12, die vollständig gesichtet wurden (100%) sofort erkannte die kongruöse taktile/visuelle und auditive Bouba/kiki; alle drei Versuchsgruppen lagen deutlich über dem Zufallsniveau (von 50%):2(1. N = 12) = 8,33, p = 0,00,2(1. N = 12) = 3,00, p = 0,08 und2(1. N = 12) = 12,00, p = 0,00 (Experiment 2, Versuch 1)17. (Vgl. Tabelle 2.)

Langfristig erkannten 11 Teilnehmer der Blindengruppe die taktilen Bouba/Kiki-Formen zusammen mit kongruösem Audio und 10 Teilnehmern mit unpassendem Audio: BeideArten von Kongruenz erkannten deutlich über dem Zufallsniveau (von 50%): 1. N = 12) = 8,33, p = 0,00 und2(1. N = 12) = 5,33, p = 0,02 (Experiment 2, Versuch 1-8)17. Neun Teilnehmer der Augenbinde-Gruppe erkannten die taktilen Formen zusammen mit kongruösem Audio und acht Teilnehmer zusammen mit unpassendem Audio; mit anderen Worten, die kongruöse Form und das Audio lagen deutlichüber dem Zufallsniveau (von 50%): N = 12) = 3,00, p = 0,08 (Experiment 2, Versuch 1-8)17. Alle 12 Teilnehmer der Vision-Gruppe erkannten die visuellen Bouba/Kiki-Formen zusammen mit kongruösem Audio und sechs Teilnehmern mit unpassendem Audio: Die kongruöse Form und das Audio erkannten deutlich über dem Zufallsniveau (von 50%):2(1. N = 12) = 12,00, p = 0,00 (Experiment 2, Versuch 1-8)17. (Vgl. Tabelle 2.)

Teilnehmergruppe Sofortige Erkennung von Bouba/Kiki-Form Langfristige Erkennung von Bouba- und Kiki-Formen
Kongruene Form und Audio Kongruene Form und Audio Unpassende Form und Audio
blind 91.7% 91.7% 83.3%
augenbinde 75.0% 75.0% 66.7%
sehvermögen 100.0% 100% 50.0%

Tabelle 2: Die sofortige und langfristige Erkennung von Bouba- und Kiki-Formen

Die mentalen Bilder von Bouba und Kiki

Acht der 12 Teilnehmer, die angeboren blind waren [73% (mit einer 'unschlüssigen' Teilnehmerzeichnung entfernt)], acht der 12 Teilnehmer, die mit verbundenen Augen waren [89% (mit drei 'unschlüssigen' Teilnehmerzeichnungen entfernt)] und acht der 12, die vollständig gesichtet wurden [80% (mit zwei 'unschlüssigen' Teilnehmerzeichnungen entfernt)] zeichnete sofort ein mentales Bild: Eine taktile/visuelle Form, die dem präsentierten auditiven Bouba/Kiki entsprach (Experiment 3, Studie 1)17. Sowohl die Augenbinde als auch die Sehgruppe lagen deutlich über dem Zufallsniveau (von 50%):2(1. N = 9) = 5,44, p = 0,02 und2(1. N = 10) = 3,60, p = 0,06 (Experiment 3, Versuch 1)17. (Vgl. Tabelle 3.)

In Bezug auf die langfristigen mentalen Bilder von Bouba und Kiki: 11 Teilnehmer in der Blindengruppe, acht in der Augenbindegruppe und 12 in der Visionsgruppe zeichneten taktile/visuelle Bouba/Kiki-Formen, die den vorgestellten auditiven Bouba/Kiki entsprachen (Experiment 3, Prüfung 1-4)17. Sowohl die Blinden als auch die Sehgruppe lagen deutlich über dem Zufallsniveau (von 50%):2(1. N = 12) = 8,33, p = 0,00 und2(1. N = 12) = 12,00, p = 0,00 (Experiment 3, Versuch 1-4)17. Fishers exakter Test ergab einen signifikanten Unterschied zwischen der Augenbindegruppe und der Sehgruppe [p = 0,09 (Experiment 3, Versuch 1-4)]17. (Vgl. Tabelle 3.)

Teilnehmergruppe Sofortiges mentales Bild von bouba/kiki Langfristige mentale Bilder von Bouba und Kiki
blind 72.7% 91.7%
augenbinde 88.9% 66.7%
sehvermögen 80.0% 100.0%

Tabelle 3: Die sofortigen und langfristigen mentalen Bilder von Bouba und Kiki

überdies. 83 % aller Teilnehmerzeichnungen enthielten das charakteristischste Formmerkmal der globalen Bouba- und Kiki-Formen: Kurve bzw. Winkel (Experiment 3, Versuch 1-4)17. Die Teilnehmerzeichnungen unterschieden sich in der Anzahl der Kurven/Winkel (z. B. ein und fünf Winkel für das Kiki-Wort: vgl. Abbildung 2, Versuche 1, 6 und 9) und in der Richtung der Kurven/Winkel [z.B. horizontal, vertikal oder diagonal: vgl. Abbildung 2, Die Prüfungen 2, 5 und 8 (Bouba-Sound)], enthielten aber in der Regel nicht die globale Bouba/Kiki-Form [Experiment 3, Versuch 1-4 (vgl. Abbildung 1; Abbildung 2)]17. Schließlich wurde die experimentelle Gruppe in 43 % der Antworten der Partituren anerkannt: Fünf Teilnehmer der Blindengruppe, drei in der Gruppe mit verbundenen Augen und fünf in der Visionsgruppe; keine Versuchsgruppe lag deutlich über dem Zufallsniveau [von 33,3% (Experiment 3, Versuch 1-4)]17.

Die Wirkung von visuellen Bildern und Lernen

Das vorgestellte Protokoll konnte die Rolle visueller Bilder im Bouba/Kiki-Effekt untersuchen, ob das Training zur Erfassung taktiler/visuell-auditorischer Bouba- und Kiki-Regelmäßigkeiten den Bouba/Kiki-Effekt und die Erkennung individueller taktiler /visual bouba und kiki Formen, und schließlich, welche mentalen Bilder diese Form-Audio Regelmäßigkeiten produziert17. Durch die Einbeziehung einer Versuchsgruppe ohne visuelle Erfahrung (d.h. der Blindengruppe) und zwei experimenteller Gruppen mit visueller Erfahrung (d.h. der Augenbinde und der Sehgruppe) war es möglich, die Wirkung visueller Bilder zu testen; und durch Einbeziehung einer Versuchsgruppe ohne visuelle Erfahrung und umfangreicher taktiler Erfahrung (d. h. der Blindengruppe) und einer Versuchsgruppe mit umfangreicher visueller Erfahrung und ohne taktilen Erfahrungen (d. h. der Augenbindegruppe) war es möglich, die Wirkung des Trainings bei der Kenntnis von taktil-auditiven Regelmäßigkeiten. Die Ergebnisse deuten eindeutig darauf hin, dass die Augenbinde-Gruppe auf visuelle Bilder zurückgriff, um neue taktile-auditive Probleme zu lösen, aber nicht langfristig (Experiment 1–3); dass das Training zur Erfassung von Bouba/Kiki-Form-Audio-Regelmäßigkeiten den taktilen/visuell-auditorischen Bouba/Kiki-Effekt (Experiment 1) und die Erkennung einzelner taktiler/visueller Bouba- und Kiki-Formen beeinflusste [d.h. zusammen mit kongruösem Audio (Experiment 2)] , aber unterschiedlich in jeder experimentellen Gruppe (Experiment 1-2), und dass alle experimentellen Gruppen mentale Bilder des charakteristischsten taktilen/visuell-auditorischen Formmerkmals von Bouba (Kurve) und Kiki [(Winkel) Experiment 3 erstellt haben. Vgl. Tabelle 1; Tabelle 2; Tabelle 3]17. Darüber hinaus konnte durch die Einbeziehung wiederholter Gruppenmessungen der sofortigen und langfristigen Wirkung (Experiment 1-3) getestet werden, wann die Wirkung visueller Bilder und der regelmäßigen Regularitäten der Lernform-Audio tatsächlich eingetreten sind; und durch die Einbeziehung von drei verschiedenen Aufgaben (z.B. den taktilen/visuell-auditorischen Bouba/Kiki-Effekt in Experiment 1, das Erkennen einzelner taktiler/visueller Bouba/Kiki-Formen zusammen mit übereinstimmendem und unpassendem Audio in Experiment 2 und das Zeichnen mentaler bouba/kiki audio in Experiment 3), um zu testen, wie robust diese Effekte waren. Die Ergebnisse deuten eindeutig darauf hin, dass die Wirkung visueller Bilder nicht langfristig innerhalb jeder Aufgabe robust war, insbesondere bei der Verwendung haptischer Berührung [vgl. die Augenbindegruppe (Experiment 1-3)]; in der Erwägung, dass der Effekt des Lernens von Form-Audio-Regelmäßigkeiten, aber nicht über Aufgaben hinweg war [vgl. Blinde und Sehgruppe (Experiment 1-3). Vgl. Tabelle 1; Tabelle 2; Tabelle 3.] 17

Discussion

Das vorgestellte Protokoll eignet sich, um die Auswirkungen visueller Bilder und Lernform-Audio-Regelmäßigkeiten zu untersuchen, wann sie auftreten und wie robust sie sind; in bestimmten Personen und Gruppen von Einzelpersonen.

Dieses Protokoll wäre geeignet, nicht nur die Genauigkeit, sondern auch die Explorationszeit zu testen: Ab dem Zeitpunkt, an dem der Experimentator die linke Hand von den Fäusten (in der Blinden- und Augenbindegruppe) / der Kartonplatte oder Schaumplatte (in der Vision-Gruppe), wenn der Teilnehmer "Ja" sagt. In den statistischen Analysen würde die längste Explorationszeit pro Versuch pro Versuchsgruppe in vier unterteilt und die Anzahl der "schnellen", "mittleren" und "langsamen" Teilnehmer in jeder Versuchsgruppe gezählt: "Schnell" mit 25 % dieser Explorationszeit, " Medium" mit 26-75 % und "langsam" mit 75 %. In allen Studien würden die Teilnehmer wie in Experiment 2: Das heißt, als "schnell" gezählt, wenn sie in 66,6 % aller Studien als "schnell" gezählt werden, als "mittel", wenn sie in 66,6 % aller Studien als "mittel" gezählt werden, und so weiter. (Für 'unschlüssig', d.h. der Teilnehmer kann nicht als 'schnell', 'mittel' oder 'langsam' gezählt werden, vgl. Experiment 3.) Je nach Stichprobengröße und/oder Anzahl der richtigen und falschen Antworten wäre es möglich, die Explorationszeit separat auf korrekte und falsche Antworten zu testen. Ob Testgenauigkeit, Explorationszeit oder beides, es müssen kritische Protokollschritte befolgt werden: Die drei Experimente sollten in fester Reihenfolge durchgeführt und ihre Versuche in fester Reihenfolge für alle Teilnehmer durchgeführt werden. Den Teilnehmern sollte nicht bewusst gemacht werden, dass die Testmaterialien in allen drei Experimenten Bouba und Kiki enthalten. Darüber hinaus sollten die akustischen Informationen des MP3-Players nur einmal abgespielt und nicht mündlich an die Teilnehmer wiederholt werden (alle drei Experimente). In Experiment 1 und Experiment 2 sollten die taktilen/visuellen Bouba und Kiki in der gleichen Position und Ausrichtung dargestellt werden. Für die Vision-Gruppe (in allen drei Experimenten) sollten die Prüfmaterialien hinter einer Kartonplatte/Schaumplatte aufgestellt werden. Schließlich sollten die Teilnehmer in der Augenbindegruppe ihre Augenbinde erst entfernen, wenn Experiment 3 abgeschlossen ist. Mit diesen Schritten soll sichergestellt werden, dass die Menge und Art der Informationen über das Taktile/Visuelle und die auditiven Bouba und Kiki über alle experimentellen Gruppen hinweg unter Kontrolle gehalten wird. Darüber hinaus ist es in Experiment 2 entscheidend, die auditive Bouba/Kiki zu präsentieren, sobald der Teilnehmer beginnt, die taktile/visuelle Bouba/Kiki zu erforschen. Dadurch wird sichergestellt, dass multimodale (übereinstimmende oder unpassende) Informationen vorgelegt werden. Darüber hinaus wäre dieses Protokoll auch geeignet, um andere Gruppen von Personen zu testen. Um diese zu integrieren, könnten solche Teilnehmergruppen als separate Versuchsgruppen hinzugefügt werden: z. B. eine Farbwahrnehmungsgruppe und eine Formwahrnehmungsgruppe; 22 eine plötzliche Sehverlustgruppe und eine progressive Sehverlustgruppe; 20 , 21 und/oder bestimmte Gruppen von Personen mit einer Hörbehinderung und/oder einer Autismus-Spektrum-Störung13 könnten hinzugefügt werden.

Mit diesem Protokoll wäre es möglich, eine Gruppennorm (für Genauigkeit und/oder Explorationszeit) für bestimmte Gruppen für jeden sofortigen und langfristigen Effekt festzulegen, einschließlich jeder wiederholten Gruppenmaßnahme und/oder Aufgabe; dann, um Individuen gegen ihre Gruppennorm zu testen: Ob eine bestimmte Person oder die gesamte Gruppe eine Weiterbildung benötigt, um die Form-Audio-Regelmäßigkeiten zu bemerken. Eine Gruppennorm für jeden sofortigen und langfristigen Effekt, einschließlich jeder wiederholten Gruppenmaßnahme, und/oder Aufgabe würde es auch ermöglichen, zu bestimmen, welche Art von Training erforderlich ist, um die Form-Audio-Regelmäßigkeiten zu bemerken: Zum Beispiel mehr Versuche mit dem Taktil/ visuell-auditorischer Bouba/Kiki-Effekt (Experiment 1) und/oder mehr Versuche mit kongruöser und inkongruöstakter/visueller Form und Audio (Experiment 2). In der Tat wäre es möglich, sowohl die Anzahl der Versuche als auch die Anzahl der wiederholten Gruppenmaßnahmen in jeder Aufgabe zu erhöhen und die Zeit zwischen ihnen zu ändern, wodurch eine individuellere Ausbildung und Erprobung ermöglicht würde.

Dieses Protokoll müsste jedoch geändert werden, wenn das Testen, welche Art von Materialien (z. B. Bouba oder Kiki, gefüllte oder umrissene taktile/visuelle Form und/oder akustischer Klang oder Wort) das Erlernen von Form-Audio-Regelmäßigkeiten am besten gewährleistet. Eine möglichkeitsweise, dieses Protokoll zu ändern, könnte die Darstellung der verschiedenen Materialien in Blöcken beinhalten: Zum Beispiel gefüllte taktile/visuelle Formen und auditive Klang- und/oder umrissene taktile/visuelle Formen und akustische Sortierwörter (Experiment 1). Diese Blöcke könnten in zufälliger Reihenfolge allen Teilnehmern in einer experimentellen Gruppe präsentiert werden; oder alternativ jeder der vier Blöcke zu trennen experimentellegruppen (Experiment 1). Dieses Protokoll müsste auch geändert werden, wenn die Robustheit der visuellen Bilder und/oder erlernten Form-Audio-Regelmäßigkeiten innerhalb und über Aufgaben hinweg noch weiter getestet wird. Die Änderung könnte das Hinzufügen wiederholter Gruppenmaßnahmen mit unterschiedlicher taktiler/visueller Form und/oder Audio als die im Training enthaltenen Maßnahmen umfassen; zum Beispiel mit dem akustischen Klang für 'maa-boo-maa' und 'tuh-kee-tee' nach dem Training mit taktilen/visuellen Bouba- und Kiki-Formen und auditiven Wörtern (Experiment 1)1,3,4,10, 11 , 12 , 13 , 14 , 15 , 16. Eine andere Möglichkeit könnte darin bestehen, eine dritte taktile/visuelle Form darzustellen, die nicht hauptsächlich gekrümmt/eckig ist, zusammen mit den taktilen/visuellen Bouba- und Kiki-Formen in Experiment 110,11,12 ,13,14,15,16. Für diese taktile/visuelle Form könnte ein auditives Unsinnswort und ein Ton erstellt werden, um ein drittes Form-Wort-Paar14,15,16 und ein drittes Form-Sound-Paar17 (Experiment 1) zu erzeugen. Das Form-Sound-Paar könnte dann in Experiment 2 als Catch-Trials aufgenommen werden; oder alternativ als regelmäßige kongruente Studien und mit entsprechenden unpassenden Studien. Schließlich konnte der Klang (aus Experiment 2 und Experiment 1) und/oder das Unsinnswort (aus Experiment 1) in Experiment 3 dargestellt werden. Eine dritte Option könnte beinhalten, Experiment 2 und Experiment 3 überhaupt nicht durchzuführen, sondern sie als Aufgaben in die wiederholten Gruppenmessungen in Experiment 1 in zufälliger Reihenfolge einzubeziehen.

Das vorgestellte Protokoll ist insofern einzigartig, als es sowohl die visuellen Bilder als auch die sensorischen Informationen während des Trainings und Testens unter Kontrolle hält. Es ist flexibel: Große und kleine Proben und bestimmte Personen können gegen sich selbst (vgl. die Gruppentests) und/oder andere Gruppen von Individuen getestet werden (vgl. die Zwischengruppentests). Es ist möglich, sowohl die Genauigkeit als auch die Explorationszeit zu testen, die Anzahl der Versuche und wiederholten Messungen innerhalb der Gruppe in jedem Experiment und die Zeit zwischen ihnen zu ändern und die Reihenfolge der Versuche und/oder Experimente zu ändern oder sogar zu reduzieren.

Disclosures

Die Autoren haben nichts zu verraten.

Acknowledgments

Geldgeber:
Diese Arbeit wurde durch das Forschungs- und Innovationsprogramm Horizont 2020 der Europäischen Union im Rahmen der Marie Sklodowska-Curie-Maßnahmen (Zuschussvereinbarung Nr. 657440) und der Norwegischen Vereinigung der Blinden und Sehbehinderten finanziert.

Film Make-up:
Make-up Künstler Rachael Parrey.

Materials

Name Company Catalog Number Comments
Bouba/kiki filled 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki outlined 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki sound (sine wave)
Bouba/kiki word (human voice)
Carton plate/foam board for covering bouba/kiki (white) Ryman 230461860 297 mm horizontal x 210 vertical 0 mm vertical
Copy paper [white (80 g/m2 )] Ryman 250030000 210 mm horizontal x 148 mm vertical
Foam board for bouba/kiki picture cards [white (5 mm thick)] Ryman 230461860 50 mm horizontal x 50 mm vertical
MP3-player (smartphone with the VLC app for iOS installed) Carphone Warehouse
Plastic embossing film RNIB Shop ZM04 210 mm horizontal x 148 mm vertical
Rollerball pen [black (1.0 mm tip)] Ryman 827134001
Rubber mat RNIB Shop LC177 230 mm horizontal x 150 mm vertical
Saddleback style RNIB Shop B511
Swell paper Zychem Ltd Zytex2 paper 50 mm horizontal x 50 mm vertical

DOWNLOAD MATERIALS LIST

References

  1. Ramachandran, V. S., Hubbard, E. M. Synaesthesia - A Window Into Perception, Thought and Language. Journal of Consciousness Studies. 8 (12), 3-34 (2001).
  2. Bremner, A. J., Caparos, S., Davidoff, J., de Fockert, J., Linnell, K. J., Spence, C. Bouba’’and ‘‘Kiki’’ in Namibia? A remote culture make similar sound-shape matches, but different taste-shape matches to Westerners. Cognition. 126 (2), 165-172 (2013).
  3. Davis, R. The fitness of names to drawings. A cross-cultural study in Tanganyika. British Journal of Psychology. 52 (3), 259-268 (1961).
  4. Maurer, D., Pathman, T., Mondloch, C. J. The shape of boubas: sound-shape correspondences in toddlers and adults. Developmental Science. 9 (3), 316-322 (2006).
  5. Ozturk, O., Krehm, M., Vouloumanos, A. Sound-symbolism in infancy: Evidence for sound-Shape cross-modal correspondences in 4-months-olds. Journal of Experimental Child Psychology. 114 (2), 173-186 (2013).
  6. Bar, M., Neta, M. Humans Prefer Curved Visual Objects. Psychological Science. 17 (8), 645-648 (2006).
  7. Bertamini, M., Palumbo, L., Gheorghes, T. N., Galatsidas, M. Do observers like curvature or do they dislike angularity? British Journal of Psychology. 107 (1), 154-178 (2016).
  8. Quinn, P. C., Brown, C. R., Streppa, M. L. Perceptual Organization of Complex Visual Configurations by Young Infants. Infant Behavior and Development. 20 (1), 35-46 (1997).
  9. Silvia, P. J., Barona, C. M. Do people prefer curved objects? Angularity, expertise, and aesthetic preference. Empirical Studies of the Arts. 27 (1), 25-42 (2009).
  10. Nielsen, A., Rendall, D. The Sound of Round: Evaluating the Sound-Symbolic Role of Consonants in the Classic Takete-Maluma Phenomenon. Canadian Journal of Experimental Psychology. 65 (2), 115-124 (2011).
  11. D’Onofrio, A. Phonetic Detail and Dimensionality in Sound-shape Correspondences: Refining the Bouba-Kiki Paradigm. Language and Speech. 57 (3), 367-393 (2014).
  12. Westbury, C., Hollis, G., Sidhu, D. M., Pexman, P. M. Weighing up the evidence for sound symbolism: Distributional properties predict cue strength. Journal of Memory and Language. 99, 122-150 (2018).
  13. Oberman, L. M., Ramachandran, V. S. Preliminary evidence for deficits in multisensory integration in autism spectrum disorders: The mirror neuron hypothesis. Social Neuroscience. 3 (3-4), 348-355 (2008).
  14. Köhler, W. Gestalt psychology. , Liveright. New York, NY. (1929).
  15. Monaghan, P., Mattock, K., Walker, P. The Role of Sound Symbolism in Language Learning. Journal of Experimental Psychology: Learning, Memory, and Cognition. 38 (5), 1152-1164 (2012).
  16. Fort, M., Martin, A., Peperkamp, S. Consonants are More Important than Vowels in the Bouba-kiki Effect. Language and Speech. 58 (2), 247-266 (2015).
  17. Graven, T., Desebrock, C. Bouba or kiki with and without vision: Shape-audio regularities and mental images. Acta Psychologica. 188, 200-212 (2018).
  18. Fryer, L., Freeman, J., Pring, L. Touching words is not enough: How visual experience influences haptic-auditory associations in the “Bouba-Kiki” effect. Cognition. 132 (2), 164-173 (2014).
  19. Fontana, F. Association of Haptic Trajectories to Takete and Maluma. Lecture Notes in Computer Science. 7989, 60-68 (2013).
  20. Graven, T. How blind individuals discriminate braille characters: An identification and comparison of three discrimination strategies. British Journal of Visual Impairment. 33 (2), 80-95 (2015).
  21. Graven, T. How attention is allocated when using haptic touch: Shape feature distinction and discrimination strategy. EuroHaptics 2016, Part 1. Bello, F., Kajimoto, H., Visell, Y. , Springer International Publishing AG. Switzerland, Heidelberg. Part of the Lecture Notes in Computer Science book series (LNCS, volume 9774) 380-393 (2016).
  22. WHO. ICD-10 version: 2016 (International Statistical Classification of Diseases and Related Health Problems 10th revision). Chapter VII Diseases of the eye and adnexa (H00-H59). , Available from: http://apps.who.int/classifications/icd10/browse/2016/en#/H53-H54 (2019).
  23. Heller, M. A., Calcaterra, J. A., Burson, L. L., Tyler, L. A. Tactual picture identification by blind and sighted people: Effects of providing categorical information. Perception & Psychophysics. 58 (2), 310-323 (1996).
  24. Heller, M. A., Gentaz, E. Psychology of Touch and Blindness. , Psychology Press. New York, NY and Hove, East Sussex. (2014).
  25. Pathak, K., Pring, L. Tactual picture recognition in congenitally blind and sighted children. Applied Cognitive Psychology. 3 (4), 337-350 (1989).

Tags

Verhalten Ausgabe 151 Bouba/Kiki-Effekt crossmodal haptische Berührung Hören Lerneffekt mentales Bild multimodale sensorische Regelmäßigkeiten Formerkennung Form-Audio-Regelmäßigkeiten Vision visuelle Bilder
Untersuchung der Auswirkungen visueller Bilder und Lernform-Audio-Regularitäten auf Bouba und Kiki
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Graven, T., Desebrock, C.… More

Graven, T., Desebrock, C. Investigating the Effect of Visual Imagery and Learning Shape-Audio Regularities on Bouba and Kiki. J. Vis. Exp. (151), e59954, doi:10.3791/59954 (2019).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter