Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
JoVE Journal Behavior
Click here for the English version

Behavior

Onderzoek naar het effect van visuele beelden en leervorm-audio Reguliteiten op Bouba en Kiki

Published: September 13, 2019 doi: 10.3791/59954
Automatic Translation
1, 1
1Department of Experimental Psychology, University of Oxford

Summary

Het doel van het gepresenteerde protocol is om de rol van visuele beelden in het Bouba/Kiki-effect te onderzoeken, of het trainen van het opmerken van de Bouba/Kiki shape-audio reguliteiten invloed heeft op het Bouba/Kiki-effect en de herkenning van individuele Bouba-en Kiki-vormen, en tot slot wat mentale beelden die deze regulariteiten produceren.

Abstract

Dit artikel presenteert een protocol voor het onderzoeken van de rol van visuele beelden in het Bouba/Kiki-effect, of het trainen van het opmerken van de Bouba/Kiki vorm-audio regulariteiten invloed heeft op het Bouba/Kiki-effect en de herkenning van individuele Bouba-en Kiki-vormen, en tot slot wat mentale beelden die deze regulariteiten produceren. Om Bouba/Kiki shape-audio reguliteiten te genereren, waren er twee soorten vormen (opgevuld; omlijnd) en twee soorten audio (Word; niet-woord geluid). Drie groepen individuen namen deel aan drie experimenten: blind, blinddoek en Vision. De experimenten werden uitgevoerd in vaste volgorde tussen deelnemers, zonder onderbreking tussen hen. In experiment 1 (pre-test-post-test ontwerp met drie herhaalde binnen-groep maatregelen) werden de deelnemers gevraagd om de vorm te kiezen die ze in verband met de auditieve Bouba/Kiki; in experiment 2 (binnen het onderwerp ontwerp), om een vorm en sommige audio te noemen (soms congruous; soms incongruous) als ' Bouba ' of ' Kiki; ' en in experiment 3 (post-test alleen ontwerp), om de vorm te tekenen die ze geassocieerd met de auditieve Bouba/kiki. De resultaten suggereren dat de blinddoek-groep op visuele beelden tekent om nieuwe problemen op te lossen, maar niet op lange termijn; die training in het merken van Bouba/Kiki shape-audio regulariteiten beïnvloedt het Bouba/Kiki-effect en de herkenning van individuele Bouba-en Kiki-vormen, maar anders in elke experimentele groep; en dat alle experimentele groepen mentale beelden van de meest karakteristieke vorm functie van Bouba (curve) en Kiki (hoek) creëren. Het effect van visuele beelden is in feite robuust voor verschillende taken, maar niet op lange termijn; het effect van het leren van shape-audio reguliteiten is robuust, maar niet voor verschillende taken. Het gepresenteerde protocol is geschikt voor het onderzoeken van het effect van visuele beelden en het leren van vorm-audio reguliteiten, wanneer ze zich voordoen en hoe robuust ze zijn; in specifieke individuen en groepen van individuen. Dit protocol is uniek omdat het zowel de visuele beelden als de zintuiglijke informatie onder controle houdt tijdens het trainen en testen.

Introduction

95% van de wereldbevolking toont een auditief-visueel Bouba/Kiki-effect, waarbij de visueel afgeronde vorm wordt gekoppeld aan het gesproken woord, ' Bouba; ' en de visueel hoekige vorm met het gesproken woord ' Kiki; ' en ze doen dit zelfs als ze geen ervaring hebben gehad met de vorm of het woord1. Het Bouba/Kiki-effect voorafgaat aan het leren van talen; het komt voor in de talen1,2,3,4,5, met zowel Bouba als Kiki (cf. voorkeur van mensen voor visuele curven over visuele hoeken6,7 , 8 , 9), en het hangt af van de combinatie van klinkers en medeklinkers (bijvoorbeeld, het gebeurt niet met ' Bibi ' en ' kuku '.) 1 , 5 , 10 , 11 , 12. deze vorm-woord associatie vindt ook plaats met andere vorm-en woordparen, zolang ze voornamelijk gebogen zijn, als Bouba, en voornamelijk hoekig, als Kiki11,13; en/of ze hebben dezelfde combinatie van klinkers en medeklinkers als ' Bouba ' en ' Kiki ', bijvoorbeeld: "baluma" en "takete", "maluma" en "takete", "uloomo" en "takete", "maa-Boo-maa" en "tuh-Kee-Tee"1,3, 4,10,11,12,14. In feite associëren mensen de afgeronde visuele vormen met de gesproken woorden die continuerende medeklinkers bevatten (zoals/l/en/m/) en open rugklinkers (zoals/ɑ:/, en/ɔ:/), en de visuele hoekige vormen met de gesproken woorden die plosief medeklinkers bevatten (zoals/ k/en/t/) en sluit voor klinkers (zoals (/ε/en/i/)11,12,15,16. Ze worden meer beïnvloed door de medeklinkers dan de klinkers, vooral door de stemloze (bijv./k/en/t/)11,12,15,16. Sterker nog, het lijkt erop dat de kenmerken van de wereldwijde vormen – hun bochten en hoeken17 – en het geluid van de gesproken woorden – hun melodie17 – het meest cruciaal zijn, in tegenstelling tot de wereldwijde vormen en woorden zelf.

Een studie heeft het Bouba/Kiki-effect onderzocht met tactiele Bouba en Kiki in plaats van de visuele Bouba/Kiki-vormen en ontdekte dat deelnemers die visueel gehandicapt waren een significant minder robuust Bouba/Kiki-effect vertoonden (~ 64%) dan de volledig ziende (~ 90%)18. Deze studie voerde aan dat het significant minder robuuste Bouba/Kiki-effect onder de blinde en slechtziende deelnemers werd veroorzaakt door een gebrek aan visuele beelden: de volledig ziende deelnemers hadden in hun omgeving de regulariteiten opgemerkt die niet gemakkelijk toegankelijk wanneer het zicht slecht is18. Uit deze studie blijkt echter niet of visuele beelden nodig zijn voor het Bouba/Kiki-effect: slechts zes van de 42 deelnemers met een visuele handicap waren congenitaal volledig blind18, dus hadden helemaal geen visuele beelden. Bovendien hebben de andere deelnemers, geen van hen geblinddoekt, de lipbewegingen van de experimenteerder kunnen volgen bij het aankondigen van de Bouba/Kiki Word-afgeronde lipbewegingen bij het aankondigen van ' Kiba ' en hoekige lipbewegingen bij het aankondigen van ' Kiki '1 , 18 – het tonen van een tactiel-visueel-auditief Bouba/Kiki-effect in plaats van het tekenen op een visuele afbeelding. Bovendien werd elk effect van het opmerken van tactiele-auditieve regulariteiten niet onderzocht, bijvoorbeeld door het Bouba/Kiki-effect op trial One en trial Four te vergelijken in plaats van het effect voor alle vier proeven te berekenen. Bovendien waren de tactiele Bouba en Kiki nogal verschillend over proeven: in proeven een en twee ze waren 3D en 2D vormen (gebogen v hoekig); in proeven drie en vier, identiek in vorm (cirkel) en onvergelijkbaar in textuur (gladde v ruw; gladde v stekelige)18. In een verwante ader heeft een studie een kinesthetisch-auditief Bouba/Kiki-effect onderzocht in geblinddoekte (volledig ziende) individuen en ontdekte dat, na een twee minuten trainingsperiode van het vasthouden van een robotische Stylus geprogrammeerd om trajecten van de Bouba en Kiki te trekken vormen, toonde 82% het Bouba/Kiki-effect19. Uit deze studie blijkt echter niet of het Bouba/Kiki-effect heeft plaatsgevonden vanwege de opleidingsperiode: het onderzoek bevat geen voor test, noch een controlegroep.

Daarom hebben we de rol van visuele beelden in het Bouba/Kiki-effect onderzocht, of training in het opmerken van tactiele/visuele auditieve Bouba en Kiki reguliteiten het Bouba/Kiki-effect beïnvloede en de herkenning van individuele tactiele/visuele Bouba en Kiki shapes, en tot slot wat mentale beelden deze vorm-audio regulariteiten geproduceerd17. Om Bouba/Kiki vorm-audio reguliteiten te genereren – niet alleen, bijvoorbeeld, Kiki-shape/Kiki-Word bijzonderheden1 – deze studie omvatte twee soorten tactiele/visuele Bouba/Kiki vormen (opgevuld; geschetst) en twee soorten auditieve Bouba/Kiki [Audio ( Word niet-woord geluid)]17. Drie groepen individuen namen deel aan drie experimenten: blind (N = 12), blinddoek (N = 12) en Vision (N = 12). De experimenten werden uitgevoerd in vaste volgorde tussen deelnemers en zonder onderbreking tussen hen, te houden onder controle van de deelnemers ' hoeveelheid en het type van de ervaring met Bouba en Kiki. In experiment 1 (pre-test-post-test ontwerp met drie herhaalde binnen-groep maatregelen) werden de deelnemers gevraagd om de tactiele/visuele vorm te kiezen die ze in verband met de auditieve Bouba/Kiki; in experiment 2 (binnen het onderwerp ontwerp), om de naam van een tactiele/visuele vorm en sommige audio (soms congruous; soms incongruous) als ' Bouba ' of ' Kiki; ' en in experiment 3, (post-test alleen ontwerp) om te tekenen van de tactiele/visuele vorm die ze in verband met de auditieve Bouba/Kiki17. Over het algemeen suggereerde deze studie dat het effect van visuele beelden robuust is voor verschillende taken, maar niet op lange termijn binnen elke taak, terwijl het effect van het leren van vorm-audio reguliteiten robuust is op lange termijn binnen elke taak, maar niet tussen taken17. Dit artikel presenteert het Protocol van deze studie17. Het gepresenteerde protocol is geschikt voor het onderzoeken van het effect van visuele beelden en het leren van vorm-audio reguliteiten, wanneer ze zich voordoen en hoe robuust ze zijn; in specifieke individuen en groepen van individuen. Dit protocol is uniek omdat het zowel de visuele beelden als de zintuiglijke informatie onder controle houdt tijdens het trainen en testen.

Protocol

De Medical Sciences Inter-Divisioneel onderzoek ethisch comité (IDREC) Universiteit van Oxford verleende goedkeuring voor dit Protocol (Ref nr: MS-IDREC-C1-2015-200, R46287/RE002, en R42687/RE004).

1. ontwerp en voorwaarden

  1. Voer drie experimenten uit in de volgende vaste volgorde met alle deelnemers: experiment 1, experiment 2 en experiment 3, zonder onderbreking daartussen. Zorg ervoor dat alle deelnemers aan experiment 2 deelnamen aan experiment 1 en alle deelnemers aan experiment 3, ook in experiment 2 (en experiment 1).
  2. Uitvoeren experiment 1 – een pre-test-post-test ontwerp, met drie experimentele groepen: blind, blinddoek, en visie; en drie herhaalde maatregelen binnen de groep. Presenteer de proeven in vaste volgorde aan alle deelnemers. (Totaal aantal proeven: 8.)
    1. Voer de pre-test uit (Trial 1) om het Instant tactiele/visuele-auditieve Bouba/Kiki-effect te testen.
    2. Voer de eerste herhaalde binnen-groeps maat (Trial 4) uit om het effect van herhaalde tactiele/visuele vorm (ofwel gevuld of geschetst) en gevarieerde audio (woord-en niet-woord geluid) te testen.
    3. Voer de tweede binnen-groeps maat (proef 5) uit om het effect van nieuwe tactiele/visuele vorm (ofwel geschetst of gevuld) en gevarieerde audio (woord-en niet-woord geluid) te testen.
    4. Voer de derde binnen-groeps maat en na de test (trial 8) uit om het effect van gevarieerde tactiele/visuele vorm (opgevuld en geschetst) en gevarieerde audio (woord en niet-woord geluid) te testen.
    5. Willekeurig toe te wijzen welk type tactiele/Visual Bouba/Kiki shapes te presenteren in proeven 1-4 (ofwel gevuld of geschetst). Presenteer het andere type in proeven 4-8. Vervolgens, willekeurig toewijzen welke gehoor woord (Bouba of kiki) te presenteren in proef 1, en welke auditieve Bouba/Kiki (ofwel Bouba of Kiki en ofwel woord of niet-woord geluid) te presenteren in elk van proeven 2-8.
      Let op: Zorg ervoor dat er in totaal vier Bouba en vier Kiki-proeven zijn; vier gevulde en vier omlijnde tactiele/visuele vorm proeven; vier auditief woord en vier auditief niet-woord geluid proeven.
  3. Uitvoeren experiment 2 – een ontwerp binnen het onderwerp, met drie experimentele groepen: blind, blinddoek, en visie; en twee maatregelen binnen de groep. Presenteer de proeven in vaste volgorde aan alle deelnemers. (Totaal aantal proeven: 8)
    1. Test de onmiddellijke herkenning van congruous (Bouba/Kiki + Bouba/kiki) shape-audio (proef 1).
    2. Test de herkenning van (a) congruous (Bouba/Kiki + Bouba/kiki), en (b) ongerijmde (Bouba/Kiki + Kiki/Bouba) shape-Audio [over vier proeven per type congruiteit (Trials 1-8)].
    3. Willekeurig toewijzen welk type tactiele/visuele Bouba/Kiki vorm (ofwel gevuld of geschetst) te presenteren in proeven 1-8. Vervolgens, willekeurig toewijzen welke congruous tactiele/visuele vorm en auditief niet-woord geluid (Bouba + Bouba of Kiki + kiki) te presenteren in proef 1, en ten slotte welke soort congruigheid (ofwel congruous of ongerijmde tactiele/visuele Bouba/Kiki vorm + auditieve Bouba/Kiki non-woord geluid) te presenteren in elk van proeven 2-8.
      Opmerking: Zorg ervoor dat er in totaal vier tactiele/visuele Bouba-en vier tactiele/visuele Kiki-proeven zijn; vier gevulde en vier omlijnde tactiele/visuele proeven; vier congruous en vier incongrueuze (vorm + niet-woord geluid) proeven. (De auditieve Bouba/Kiki Word is niet opgenomen in dit experiment.)
  4. Uitvoeren experiment 3 – een post-test alleen ontwerp, met drie experimentele groepen: blind, blinddoek, en visie. Presenteer de proeven in vaste volgorde aan alle deelnemers (totaal aantal proeven: 4).
    1. Test welke mentale beelden de training in het merken van shape-audio reguliteiten (d.w.z. experiment 1 en experiment 2) hebben geproduceerd, in vier afzonderlijke proeven: Bouba Word, Bouba niet-woord geluid, Kiki Word en Kiki non-woord geluid.
    2. Willekeurig toewijzen welk type auditief Bouba/Kiki (Bouba of Kiki en ofwel woord of niet-woord geluid) te presenteren in elk van de proeven 1-4.
      Opmerking: Zorg ervoor dat er in totaal één auditieve Bouba Word trial, een auditieve Bouba non-woord Sound trial, een auditieve Kiki Word trial en een auditieve Kiki non-Word Sound trial.

2. deelnemers

  1. Rekruteer een groep deelnemers die congenitaal blind zijn; dat is, verblind minder dan vier maanden na de geboorte20,21,22: categorieën 5: totale blindheid; en 4: licht waarneming (waarnemen van een lichtbron) en lichtprojectie (waarneembaar waar een lichtbron zich bevindt)22. Zorg ervoor dat ze allemaal braille lezers zijn.
  2. Rekruteer een groep van volledig ziende deelnemers, op twee keer de grootte van de groep van deelnemers die congenitaal blind zijn. Zorg ervoor dat ze allemaal normaal/gecorrigeerd zijn voor normaal zicht.
    Opmerking: Zorg ervoor dat alle deelnemers tussen de 18 en 70 jaar oud zijn, met normaal/gecorrigeerd voor normaal gehoor, geen cognitieve vertraging of bijzondere waardevermindering, noch een lichamelijke handicap, en dat ze allemaal naïef zijn voor het Bouba/Kiki-effect.
  3. Wijs de helft van de groep van de volledig ziende deelnemers willekeurig toe aan de blinddoek groep en de andere helft aan de Vision-Group.
    Opmerking: deelnemers, type tactiele/visuele Bouba/Kiki vorm (en), type auditieve Bouba/Kiki, en congruiteit zijn allemaal willekeurig toegewezen aan een van de twee categorieën: blinddoek of visie; gevuld of geschetst; woord of niet-woord geluid; Bouba of Kiki; congruous of incongruous. Dus de willekeurige toewijzing kan worden gedaan door een computerprogramma of handmatig (bijvoorbeeld door het gooien van een munt).

3. materialen

  1. Produceer de tactiele/visuele materialen
    1. Breng de Visual Bouba/Kiki shapes (30 x 23 mm) over om papier te laten zwellen door ze af te drukken vanaf een personal computer of door ze te kopiëren vanaf een foto. Zorg ervoor dat u twee soorten visuele Bouba/Kiki-vormen overdraagt: één gevuld en één geschetst [(1,5 pt. Line). Zie Figuur 1].
    2. Geef het deining papier door een warmte fuser. Zorg ervoor dat de tactiele Bouba/Kiki vormen stijgen tot ~ 0,5 mm hoogte. Je ook de tactiele/visuele Bouba/Kiki-vormen van een transcriptieservice bestellen voor mensen met een visuele handicap (met een bijgevoegd PDF-bestand).
    3. Lijm het zwellen papier op het schuim bord [wit (5 mm dik)]. Gebruik Spray lijm.
    4. Snijd de Swell papier en schuim Board in grootte (50 x 50 mm), dat wil doen, om vier afzonderlijke tactiele/visuele beeld kaarten te maken: Bouba gevuld, Bouba geschetst, Kiki gevuld, en Kiki geschetst (cf. Figuur 1). Gebruik een mes voor het snijden van behang.
    5. Snijd een kartonnen plaat/schuim karton voor het bedekken van de tactiele/visuele Bouba/Kiki vormen in grootte (297 x 210 mm). Gebruik een mes voor het snijden van behang. U ook het A4-formaat bestellen.
    6. Cut Copy Paper/plastic Embossing film in grootte (210 x 148 mm). Gebruik een guillotine. U ook het A5-formaat bestellen.
    7. Snijd een rubberen mat in grootte (230 x 150 mm). Gebruik een mes of een schaar. U ook het Maanhand frame bestellen en het uit elkaar halen om de rubberen mat te onthullen.

Figure 1
Figuur 1: twee soorten Bouba/Kiki vormen: opgevuld en geschetst Klik hier om een grotere versie van dit cijfer te bekijken.

  1. Produceer de auditieve materialen
    1. Noteer de gesproken Bouba (cf. Audio 1) en Kiki words. Opslaan in het MP3-formaat: één bestand voor het Bouba-woord en één voor de Kiki Word.
    2. Creëer de Bouba-en Kiki-niet-woord geluiden door de duur en frequentie (d.w.z. melodie) van de gesproken woorden ' Bouba ' en ' Kiki ' te nabootsen. Gebruik een Sound wavegenerator en Pitch Bend. Opslaan in het MP3 formaat: één bestand voor de Bouba Sound (cf. Audio 2) en één voor de Kiki Sound.
    3. Installeer de VLC-app voor iOS op een smartphone. Zet de MP3-bestanden voor Bouba en Kiki over naar de VLC-app. Sla ze op als vier afzonderlijke bestanden: Bouba Sound, Bouba Word, Kiki Sound en Kiki Word.

Audio 1: Bouba woord Klik hier om dit bestand te downloaden.

Audio 2: Bouba geluid Klik hier om dit bestand te downloaden.

4. procedure en scoring

  1. De testsessie instellen
    1. Voer de drie experimenten uit in een rustige kamer die neutraal van kleur is, en met alle deelnemers individueel. Vraag de deelnemers aan de blinddoek om hun blinddoek op te zetten, voordat je de tactiele/visuele auditieve materialen opzet, en zorg ervoor dat ze hun blinddoek op het hele en tussen alle drie experimenten houden.
  2. De tactiele/visuele materialen instellen
    1. Plaats de rubberen mat direct voor de deelnemer. Plaats (experiment 1) de twee tactiele/visuele Bouba-en Kiki-vormen (experiment 2), de enige tactiele/visuele Bouba-of Kiki-vorm en (experiment 3), de kopieerpapier/plastic reliëf folie bovenop de rubberen mat.
      Let op: in experiment 1, zorg ervoor dat u altijd presenteren Bouba aan de linkerkant en Kiki aan de rechterkant; en in zowel experiment 1 als experiment 2, om ze altijd in dezelfde oriëntatie te presenteren (Zie Figuur 1): om het vermogen van de deelnemers om mentale beelden van de Bouba-en Kiki-vormen te vormen zonder interferentie van hun positie en/of oriëntatie op de rubberen mat. Zorg ervoor dat u de deelnemers niet informeert over deze vaste presentatie van de tactiele/visuele Bouba-en Kiki-vormen. In de Vision-Group moet u altijd het testmateriaal achter een kartonnen plaat/schuim karton instellen om te voorkomen dat deze deelnemers een voorproefje maken van wat er in petto is.
  3. De auditieve materialen instellen
    1. Plaats de MP3-speler direct voor de deelnemer (aan de andere kant van de rubberen mat), met de luidspreker die het dichtst bij hen staat.
      Opmerking: herhaal niet verbaal de auditieve informatie van de MP3-speler: om te voorkomen dat de deelnemers aan de Vision-groep de lipbewegingen op de Bouba/Kiki Word-Trials1observeren en dus onder controle houden over alle experimentele groepen de hoeveelheid en het type sensorische informatie.
  4. Experiment 1, experiment 2 en experiment 3 uitvoeren
    1. Nodig de deelnemers uit die de tactiele vormen (d.w.z. blinden en blinddoeken) gaan verkennen en tekenen om de rubberen mat (door aanraking) te verkennen: bijvoorbeeld voor grootte en textuur, zonder tactiele/visuele foto kaarten en/of kopieerpapier of plastic reliëf folie bovenop geplaatst.
  5. Experiment uitvoeren 1
    1. Leg uit dat er twee plaatjes kaarten op de rubberen mat worden weergegeven, elk met een tactiele/visuele vorm. Leg vervolgens uit dat sommige audio wordt afgespeeld vanaf de MP3-speler en dat deze audio zal corresponderen met een van de tactiele/visuele vormen.
      Opmerking: Informeer de deelnemers niet over de twee soorten tactiele/visuele Bouba/Kiki (gevuld en geschetst) en de twee soorten auditieve Bouba/Kiki (geluid en woord).
    2. Plaats de twee tactiele/visuele beeld kaarten op de rubberen mat (cf. Figuur 1).
    3. Vraag de deelnemer in de blinde en Blindfold-groep met beide handen een vuist te maken en hun vuisten bovenop de gepresenteerde tactiele/visuele beeld kaarten te plaatsen en ze zo nodig te begeleiden. Plaats de linkerhand bovenop de vuisten van de deelnemer.
    4. Vraag de deelnemer om de twee tactiele/visuele vormen, de blinde en blindplooi groep door aanraking en de Vision-Group by Vision te verkennen, wanneer de hand bovenop hun vuisten (blind en blinddoek)/de kartonnen plaat of schuim plank (Vision-Group) wordt verwijderd, en om te zeggen ' Ja ' wanneer ze hun verkenning hebben voltooid.
    5. Verwijder de linkerhand van de vuisten van de deelnemer (in de blinde en blinddoek groep)/de kartonnen plaat of schuim bord (in de Vision-groep).
    6. Zodra de deelnemer ' ja ' zegt, Bedek je de tactiele/visuele foto kaarten.
    7. Speel de audio af van de MP3-speler.
      Opmerking: Speel de auditieve informatie van de MP3-speler slechts één keer af en herhaal deze niet mondeling terug aan de deelnemers.
    8. Vraag de deelnemer om aan te geven welke tactiele/visuele vorm ze associëren met de audio, bijvoorbeeld door ' links/rechts ', ' Curvy/hoekig ' of ' bloem/ster ' te zeggen, en noteer de gegeven vorm. Reageer niet op het antwoord van de deelnemer.
    9. Score of het antwoord van de deelnemer juist of onjuist is.
      Opmerking: Herhaal 4.5.2 – 4.5.9 voor alle acht proeven.
  6. Experiment uitvoeren 2
    1. Leg uit dat een Fotokaart, die een tactiele/visuele vorm heeft, op de rubberen mat wordt gepresenteerd en dat sommige audio wordt afgespeeld vanaf de MP3-speler. Leg vervolgens uit dat de audio één keer per fotokaart wordt afgespeeld, zodra de deelnemer de tactiele/visuele vorm begint te verkennen.
      Opmerking: Informeer de deelnemers niet over de twee soorten tactiele/visuele Bouba/Kiki (gevuld en geschetst), het enige type auditieve Bouba/Kiki (geluid) en de twee soorten congrulijkheid (congruous en incongruous).
    2. Plaats de tactiele/visuele beeld kaart op de rubberen mat.
    3. In blinden en blinddoeken, vraag de deelnemer om een vuist te maken met behulp van beide handen en om hun vuisten bovenop de gepresenteerde tactiele/visuele beeld kaart te plaatsen, om ze te begeleiden indien nodig. Plaats de linkerhand bovenop de vuisten van de deelnemer.
    4. Vraag de deelnemer om de tactiele/visuele vorm, de blinde en Blindfold-groep door aanraking en de Vision-Group by Vision te verkennen, wanneer de hand bovenop hun vuisten (blind en blinddoek)/de kartonnen plaat of schuim plank (Vision-Group) wordt verwijderd, en om te luisteren naar de audio. Vraag ze vervolgens de tactiele/visuele vorm en de audio te noemen als ' Bouba ' of ' Kiki ': een naam alleen23,24,25, wanneer ze hun verkenning hebben voltooid.
    5. Verwijder de linkerhand van de vuisten van de deelnemer (in de blinde en blinddoek groep)/de kartonnen plaat of schuim bord (in de Vision-groep) en speel de audio af van de MP3-speler.
      Opmerking: Speel de auditieve informatie van de MP3-speler slechts één keer af en herhaal deze niet mondeling terug aan de deelnemers.
    6. Zodra de deelnemer de tactiele/visuele vorm en de audio noemt, bedek de fotokaart en noteer de gegeven naam. Reageer niet op het antwoord van de deelnemer.
    7. Score of het antwoord van de deelnemer juist of onjuist is.
      Opmerking: Herhaal 4.6.2 – 4.6.7 voor alle acht proeven.
    8. Tel in de congruous en onopvallende beproevingen een deelnemer als ' correct ' wanneer hij ≥ 75% van de tactiele/visuele Bouba-en Kiki-vormen heeft herkend.
  7. Experiment 3 uitvoeren:
    1. Leg uit dat sommige kopie papier/plastic Embossing film bovenop de rubberen mat wordt geplaatst, in plaats van de tactiele/visuele beeld kaart (en), en dat de deelnemer gevraagd wordt erop te tekenen. In de blinde en Blindfold-groep, nodigen de deelnemer uit om de verschillende teken apparatuur uit te proberen en om zelf te beslissen wat ze verkiezen: de kopie papier of plastic Embossing film en Rollerball pen of Saddleback stijl. Leg vervolgens uit dat sommige audio wordt afgespeeld vanaf de MP3-speler en dat de deelnemer de tactiele/visuele vorm zal tekenen die ze associëren met deze audio, één vorm per segment van audio wanneer dit wordt gevraagd.
      Opmerking: Informeer de deelnemers niet over de auditieve informatie (Bouba en Kiki), noch over de twee soorten auditieve Bouba/Kiki (geluid en woord).
    2. Plaats de kopie papier/plastic reliëf folie op de rubberen mat.
    3. In alle drie de experimentele groepen (blind; blinddoek; Vision), vraag de deelnemer een vuist te maken met beide handen, terwijl hij de Rollerball pen/Saddleback stijl vasthoudt en hun vuisten bovenop de kopieerpapier/plastic reliëf film plaatst, zodat ze zo nodig worden begeleid. Plaats de linkerhand bovenop de vuisten van de deelnemer.
    4. Vraag de deelnemer om de vorm te tekenen die ze associëren met de gepresenteerde audio wanneer de hand bovenop hun vuisten wordt verwijderd. Vraag de deelnemer in de blinde en Blindfold-groep een tactiele vorm te tekenen; en in de Vision-Group, een visuele vorm. Vraag de deelnemer om ' ja ' te zeggen wanneer hij zijn tekening heeft voltooid.
    5. Verwijder de linker hand van de vuisten van de deelnemer.
    6. Speel de audio af van de MP3-speler.
      Opmerking: Speel de auditieve informatie van de MP3-speler slechts één keer af en herhaal deze niet mondeling terug aan de deelnemers.
    7. Zodra de deelnemer ' ja ' zegt, verwijder je zijn tactiele/visuele tekening van de rubberen mat en label je deze in de rechterbenedenhoek met het juiste proefnummer. Reageer niet op of geef geen commentaar op de antwoord/getekende vorm van de deelnemer.
      Opmerking: Herhaal 4.7.2 – 4.7.7 voor alle vier de proeven.
    8. Scan alle tactiele/visuele tekeningen (1:1 grootte) onmiddellijk na elke testsessie in de jpg-indeling.
      Opmerking: experiment 3 wordt gescoord door een groep scorers nadat alle tekengegevens zijn verzameld.
    9. Een vragenlijst opstellen voor het scoren van de tekening gegevens (Zie Figuur 2):
      1. Schaal alle gescande tekeningen om 12 Foto's per pagina op te nemen in het landschap A4-formaat.
      2. Wijs willekeurig Bouba/Kiki trials, geluid/woord proeven, en blind/blinddoek/Vision lades toe.
      3. Voeg een proefnummer toe in de linkerbovenhoek van elke afbeelding.
      4. Voeg onder elke foto ' Bouba ' en ' Kiki ' en ' blind ', ' blind folded ' en ' ziende ' toe.
    10. Rekruteer een groep scorer, ouder dan 18 jaar; met normaal/gecorrigeerd naar normaal gehoor en gezichtsvermogen; zonder cognitieve vertraging of bijzondere waardevermindering, noch een lichamelijke handicap; dat zijn allemaal naïef voor deze studie, en dat toont een visuele vorm-gedrukt woord Bouba/Kiki-effect.
    11. Vraag de scorers om twee meerkeuzevragen per afbeelding in de vragenlijst te beantwoorden:
      (1) "is de afgebeelde vorm" Bouba "of" Kiki; "" en (2) "is de afgebeelde vorm getekend door iemand die blind is (sinds zijn geboorte), geblinddoekt of volledig waargenomen?" 17.
    12. Afhankelijk van het aantal Foto's in de vragenlijst, vraagt u de helft van de groep scorers de helft van de vragenlijst te scoren en de andere helft om de rest te scoren.
    13. Bij elke proef wordt het aantal ' corresponderen ', ' komt niet overeen ' en ' onduidelijk ', dat is:
      1. ' Corresponderen ' wanneer (i) ≥ 75% van de scorers overeenkwam welke tactiele/visuele vorm (Bouba of kiki) werd afgebeeld, en (II) deze vorm overeenstemde met de gepresenteerde auditieve Bouba/kiki in dit proces.
      2. ' Komt niet overeen ' wanneer (i) ≥ 75% van de scorers overeenkwam welke tactiele/visuele vorm (Bouba of kiki) werd afgebeeld, en (II) deze vorm niet overeenstemde met de gepresenteerde auditieve Bouba/kiki in dit proces.
      3. ' Onduidelijk ' toen < 75% van de scorers afgesproken welke tactiele/visuele vorm (Bouba of kiki) werd afgebeeld. Verwijder de ' onduidelijk ' afbeeldingen/deelnemers tekeningen uit de statistische analyses.
    14. In verschillende trials, Tel een deelnemer als ' corresponderen ' wanneer ≥ 75% van hun getekende mentale beelden: dat is, dat tactiele/visuele vormen corresponderen met de gepresenteerde auditieve Bouba/kiki.
    15. Tel voor elk proefabonnement ' herkend ', ' niet herkend ' en ' onduidelijk ', dat is:
      1. "Erkend" wanneer (i) ≥ 66,6% van de scorers die waren overeengekomen op welke experimentele groep (blind, blinddoek of Vision) de afgebeelde vorm had getekend, en (II) dit in dit proces juist was.
      2. ' Niet herkend ' wanneer (i) ≥ 66,6% van de scorers die waren overeengekomen op welke experimentele groep (blind, blinddoek of Vision) de afgebeelde vorm had getekend, en (II) dit niet correct was in dit proces.
      3. ' Onduidelijk ' toen < 66.6% van de scorers het eens was over welke experimentele groep (blind, blinddoek of Vision) de afgebeelde vorm had getekend. Uitsluiten van de "onduidelijk" deelnemer erkenningen van de statistische analyses.
    16. In verschillende Trials (en met ' onduidelijk ' deelnemer erkenningen verwijderd), tellen een deelnemer als ' erkend ' wanneer herkend in ≥ 75% van alle proeven.

Figure 2
Figuur 2: voorbeelden uit de vragenlijst voor het scoren van de tekening gegevens Klik hier om een grotere versie van dit cijfer te bekijken.

Representative Results

Het Bouba/Kiki-effect

Zes van de 12 deelnemers die congenitaal blind waren (50%), negen van de 12 die geblinddoekt waren (75%), en 10 van de 12 die volledig waren waargenomen (~ 83%) toonde een instant tactiele/visuele-auditieve Bouba/Kiki-effect: dat is, zowel de blinddoek en Vision-groep waren aanzienlijk boven het niveau van de kans (van 50%): χ2(1. N = 12) = 3,00, p = 0,08 en χ2(1. N = 12) = 5,33, p = 0,02 (experiment 1, proef 1)17. Er werd geen significant verschil gevonden door de precieze test van Fisher tussen de drie experimentele groepen (experiment 1, pre-test)17. (Cf. tabel 1.)

Als het gaat om de lange termijn tactiele/visuele-auditieve Bouba/Kiki-effect: op de eerste herhaalde binnen-groeps maat, toonden negen van de deelnemers die congenitaal blind waren het Bouba/Kiki-effect samen met negen die volziend waren en zeven die geblinddoekte: de blind en Vision-groep aanzienlijk boven het kans niveau (van 50%): χ2(1. N = 12) = 3,00, p = 0,08 en χ2(1. N = 12) = 3,00, p = 0,08 (experiment 1, proef 4)17. Op de tweede herhaalde binnen-groeps maat toonde 11 deelnemers aan de blind en Vision-groep het tactiele/visuele auditieve Bouba/Kiki-effect: beide experimentele groepen waren weer aanzienlijk boven het kans niveau (van 50%): χ2(1. N = 12) = 8,33, p = 0,00 en χ2(1. N = 12) = 8,33, p = 0,00; en zeven in de Blindfold-groep (experiment 1, trial 5)17. Ten slotte, op de derde herhaalde binnen-groeps maatregel en na de test, negen van de 12 deelnemers die congenitaal blind waren (75%), zes van de 12 die geblinddoekt waren (50%), en alle 12 deelnemers die volledig waren waargenomen (100%) toonde het tactiele/visuele-auditieve Bouba/Kiki-effect; zowel de blinde als de Vision-groep waren weer aanzienlijk boven het kans niveau (van 50%): χ2(1. N = 12) = 3,00, p = 0,08 en χ2(1. N = 12) = 12,00, p = 0,00 (experiment 1, proef 8)17. De precieze test van Fisher vond een significant verschil tussen de blinddoek en de Vision-Group [p = 0,01. (Experiment 1, na de test)] 17. (cf. tabel 1.)

Deelnemers groep Instant Bouba/Kiki-effect Lange termijn Bouba/Kiki-effect
Pre-test Herhaalde maatregel 1 Herhaalde maatregel 2 Herhaalde maatregel 3/post-test
Blind 50,0% 75,0% 91,7% 75,0%
Blinddoek 75,0% 58,3% 58,3% 50,0%
Visie 83,3% 75,0% 91,7% 100,0%

Tabel 1: het onmiddellijke en lange termijn Bouba/Kiki-effect

De herkenning van Bouba en Kiki shapes

Elf van de twaalf deelnemers die congenitaal blind waren (~ 92%), negen van de 12 die geblinddoekt waren (75%), en alle 12 die volledig waren waargenomen (100%) herkent direct de congruous tactiele/visuele en auditieve Bouba/Kiki; alle drie de experimentele groepen waren significant boven het kansniveau (van 50%): χ2(1. N = 12) = 8,33, p = 0,00, χ2(1. N = 12) = 3,00, p = 0,08, en χ2(1. N = 12) = 12,00, p = 0,00 (experiment 2, proef 1)17. (Zie tabel 2.)

Lange termijn, 11 deelnemers in de blinde groep herkende de tactiele Bouba/Kiki vormen samen met congruous audio en 10 deelnemers met ongerijmde audio: beide soorten congrulijkheid erkend aanzienlijk boven het niveau van de kans (van 50%): χ2( 1. N = 12) = 8,33, p = 0,00 en χ2(1. N = 12) = 5,33, p = 0,02 (experiment 2, proef 1-8)17. Negen deelnemers aan de Blindfold-groep herkende de tactiele vormen samen met congruous audio en acht deelnemers samen met incongrueuze audio; met andere woorden, de congrueuze vorm en de audio waren aanzienlijk boven het kans niveau (van 50%): χ2(1. N = 12) = 3,00, p = 0,08 (experiment 2, proef 1-8)17. Alle 12 deelnemers aan de Vision-groep herkende de Visual Bouba/Kiki shapes samen met congruous audio en zes deelnemers met onopvallende audio: de congruous vorm en audio herkend aanzienlijk boven het kans niveau (van 50%): χ2(1. N = 12) = 12,00, p = 0,00 (experiment 2, proef 1-8)17. (Zie tabel 2.)

Deelnemers groep Onmiddellijke herkenning van Bouba/Kiki shape Lange termijn herkenning van Bouba en Kiki shapes
Congruous vorm en audio Congruous vorm en audio Incongrueuze vorm en audio
Blind 91,7% 91,7% 83,3%
Blinddoek 75,0% 75,0% 66,7%
Visie 100,0% 100% 50,0%

Tabel 2: de onmiddellijke en lange termijn herkenning van Bouba en Kiki shapes

De mentale beelden van Bouba en Kiki

Acht van de twaalf deelnemers die congenitaal blind waren [~ 73% (met een ' onduidelijk ' deelnemer tekening verwijderd)], acht van de 12 die geblinddoekt waren [~ 89% (met drie ' onduidelijk ' deelnemer tekeningen verwijderd)], en acht van de 12 die volledig waren waargenomen [80% (met twee ' onduidelijk ' deelnemer tekeningen verwijderd)] trok onmiddellijk een mentaal beeld: een tactiele/visuele vorm die overeenstemde met de gepresenteerde auditieve Bouba/Kiki (experiment 3, Trial 1)17. Zowel de blinddoek als de Vision-groep waren significant boven het kans niveau (van 50%): χ2(1. N = 9) = 5,44, p = 0,02 en χ2(1. N = 10) = 3,60, p = 0,06 (experiment 3, proef 1)17. (Cf. tabel 3.)

Met betrekking tot de lange termijn mentale beelden van Bouba en Kiki: 11 deelnemers aan de blinde-groep, acht in de blinddoek-groep, en 12 in de Vision-groep trok tactiele/visuele Bouba/Kiki vormen die overeenkwamen met de gepresenteerde auditieve Bouba/Kiki (experiment 3, Proef 1-4)17. Zowel de blinde als de Vision-groep waren aanzienlijk boven het kans niveau (van 50%): χ2(1. N = 12) = 8,33, p = 0,00 en χ2(1. N = 12) = 12,00, p = 0,00 (experiment 3, proef 1-4)17. De precieze test van Fisher vond een significant verschil tussen de blinddoek-groep en de Vision-Group [p = 0,09 (experiment 3, proef 1-4)]17. (Cf. tabel 3.)

Deelnemers groep Instant mentale beeld van Bouba/Kiki Lange termijn mentale beelden van Bouba en Kiki
Blind 72,7% 91,7%
Blinddoek 88,9% 66,7%
Visie 80,0% 100,0%

Tabel 3: de Instant en lange termijn mentale beelden van Bouba en Kiki

Bovendien. ~ 83% van alle deelnemers tekeningen omvatte de meest karakteristieke vorm kenmerk van de Global Bouba en Kiki shapes: curve en hoek, respectievelijk (experiment 3, Trial 1-4)17. De deelnemer tekeningen verscheeld in de hoeveelheid curven/hoeken (bijv. een en vijfhoeken voor het Kiki woord: cf. Figuur 2, proeven 1, 6 en 9), en in de richting van de bochten/hoeken [d.w.z. horizontaal, verticaal of diagonaal: cf. Figuur 2, Trials 2, 5 en 8 (Bouba sound)], maar omvatten meestal niet de Global Bouba/Kiki shape [experiment 3, proef 1-4 (cf. Figuur 1; Figuur 2)]17. Tot slot werd de experimentele groep erkend in ~ 43% van de antwoorden van de scores: vijf deelnemers aan de blinde groep, drie in de Blindfold-groep, en vijf in de Vision-groep; geen enkele experimentele groep was significant boven het niveau van de kans [van 33,3% (experiment 3, proef 1-4)]17.

Het effect van visuele beelden en leren

Het gepresenteerde protocol slaagde erin om de rol van visuele beelden in het Bouba/Kiki-effect te onderzoeken, of het trainen in het opmerken van tactiele/visuele auditieve Bouba en Kiki reguliteiten het Bouba/Kiki-effect beïnvloede en de herkenning van individuele tactiele /Visual Bouba en Kiki shapes, en tot slot wat mentale beelden deze vorm-audio regulariteiten geproduceerd17. Door het opnemen van één experimentele groep zonder visuele ervaring (d.w.z. de blinde groep) en twee experimentele groepen met visuele ervaring (d.w.z. de blind-en Vision-groep), was het mogelijk om het effect van visuele beelden te testen; en door het opnemen van een experimentele groep zonder visuele ervaring en een uitgebreide tactiele ervaring (d.w.z. de blinde groep) en een experimentele groep met een uitgebreide visuele ervaring en geen tactiele ervaring (d.w.z. de blinddoek-groep), was het mogelijk om te testen het effect van de training in het opmerken van tactiele-auditieve regulariteiten. De resultaten suggereren duidelijk dat de Blindfold-groep op visuele beelden heeft getekend om nieuwe tactiele problemen op te lossen, maar niet op lange termijn (experiment 1 – 3); die training in het opmerken van Bouba/Kiki shape-audio regulariteiten beïnvloede het tactiele/visuele auditieve Bouba/Kiki-effect (experiment 1) en de herkenning van individuele tactiele/visuele Bouba-en Kiki-vormen [d.w.z. samen met congruous audio (experiment 2)] , maar verschillend in elke experimentele groep (experiment 1-2), en dat alle experimentele groepen gemaakt mentale beelden van de meest karakteristieke tactiele/visuele auditieve vorm kenmerk van Bouba (curve) en Kiki [(hoek) experiment 3. Zie tabel 1; Tabel 2; Tabel 3]17. Bovendien was het mogelijk om, door herhaalde binnen-groeps maatregelen van het onmiddellijke en lange termijn effect (experiment 1-3) op te nemen, te testen wanneer het effect van visuele beelden en het leren van vorm-audio regulariteiten daadwerkelijk plaatsvonden; en door het opnemen van drie verschillende taken (d.w.z. het tactiele/visuele-auditieve Bouba/Kiki-effect in experiment 1, het herkennen van individuele tactiele/visuele Bouba/Kiki-vormen samen met congruous en incongrueuze audio in experiment 2, en het tekenen van mentale beelden van de Bouba/Kiki audio in experiment 3), om te testen hoe robuust deze effecten waren. De resultaten suggereren duidelijk dat het effect van visuele beelden was niet robuust lange termijn binnen elke taak, vooral bij het gebruik van haptische Touch [CF. de blinddoek-groep (experiment 1-3)]; Overwegende dat het effect van het leren van vorm-audio regulariteiten was, maar niet tussen de taken [CF. de blinde en de visie-groep (experiment 1-3). Zie tabel 1; Tabel 2; Tabel 3.] 17

Discussion

Het gepresenteerde protocol is geschikt voor het onderzoeken van het effect van visuele beelden en het leren van vorm-audio reguliteiten, wanneer ze zich voordoen en hoe robuust ze zijn; in specifieke individuen en groepen van individuen.

Dit protocol zou geschikt zijn voor het testen van niet alleen de nauwkeurigheid, maar ook de exploratie tijd: vanaf het moment dat de experimenteerder zijn linkerhand verwijdert van de vuisten van de deelnemer (in de blinde en blinddoek groep)/de kartonnen of schuim plaat (in de Vision-Group) wanneer de deelnemer zegt ' ja '. In de statistische analyses zou de langste exploratie tijd per proef groep worden onderverdeeld in vier en het aantal ' snelle ', ' medium ' en ' langzame ' deelnemers in elke experimentele groep geteld: ' Fast ' met ≤ 25% van deze exploratie tijd, ' gemiddeld ' met 26-75% en ' traag ' met ≥ 75%. In verschillende Trials worden de deelnemers geteld als in experiment 2: dat is, als ' snel ' als geteld als ' snel ' in ≥ 66,6% van alle proeven, als ' medium ' als ' medium ' in ≥ 66,6% van alle proeven, enzovoort. (Voor ' onduidelijk ', d.w.z. de deelnemer kan niet worden geteld als ' snel ', ' medium ' of ' traag ', CF. experiment 3.) Het is mogelijk om de verkennings tijd voor correcte en onjuiste antwoorden afzonderlijk te testen, afhankelijk van de steekproefgrootte en/of het aantal juiste en onjuiste antwoorden. Of het nu gaat om het testen van de nauwkeurigheid, de exploratie tijd of beide, er zijn kritieke protocol stappen die moeten worden gevolgd: de drie experimenten moeten worden uitgevoerd in vaste volgorde, en hun proeven gepresenteerd in vaste volgorde, voor alle deelnemers. De deelnemers moeten niet worden bewust gemaakt dat de testmaterialen in alle drie experimenten omvatten Bouba en Kiki. Verder moet de auditieve informatie van de MP3-speler slechts één keer worden afgespeeld en niet mondeling worden herhaald aan de deelnemers (alle drie experimenten). In experiment 1 en experiment 2 moeten de tactiele/visuele Bouba en Kiki in dezelfde positie en oriëntatie worden gepresenteerd. Voor de Vision-Group (in alle drie de experimenten), moeten de testmaterialen worden opgezet achter een kartonnen plaat/schuim karton. Tot slot moeten de deelnemers in de blinddoek-groep hun blinddoek niet verwijderen totdat experiment 3 is voltooid. Deze stappen zijn om ervoor te zorgen dat de hoeveelheid en het type informatie over de tactiele/visuele en de auditieve Bouba en Kiki wordt gehouden onder controle over alle experimentele groepen. Daarnaast is het cruciaal in experiment 2 om de auditieve Bouba/Kiki te presenteren zodra de deelnemer begint met het verkennen van de tactiele/visuele Bouba/kiki. Dit zal ervoor zorgen dat multimodale (congruous of onopvallende) informatie wordt gepresenteerd. Bovendien zou dit protocol ook geschikt zijn om andere groepen van personen te testen. Om deze te integreren, kunnen dergelijke deelnemers groepen worden toegevoegd als afzonderlijke experimentele groepen: bijvoorbeeld een kleurperceptie-groep en een vorm perceptie-groep; 22 een plotselinge visie verlies-groep en een progressieve visie verlies-groep; 20 , 21 en/of specifieke groepen van personen met een gehoorstoornis en/of een Autisme spectrum stoornis13 kunnen worden toegevoegd.

Met dit protocol zou het mogelijk zijn om een groeps norm (voor nauwkeurigheid en/of exploratie tijd) vast te stellen voor specifieke groepen op elk moment en op lange termijn, met inbegrip van elke herhaalde binnen-groeps maat en/of taak; vervolgens om individuen te testen tegen hun groeps norm: of een bepaald individu of de hele groep behoefte heeft aan verdere training bij het opmerken van de vorm-audio regulariteiten. Een groeps norm voor elk effect op de onmiddellijke en lange termijn, inclusief elke herhaalde binnen-groeps maat, en/of taak zou het ook mogelijk maken om te bepalen wat voor soort training nodig is om de vorm-audio reguliteiten te merken: bijvoorbeeld, meer proeven met de tactiele/ Visual-auditieve Bouba/Kiki-effect (experiment 1) en/of meer proeven met congruous en onopvallende tactiele/visuele vorm en audio (experiment 2). Het zou immers mogelijk zijn om zowel het aantal proeven als het aantal herhaalde maatregelen binnen de groep in elke taak te verhogen en de tijd daartussen te veranderen, waardoor meer geïndividualiseerde opleidingen en tests kunnen worden uitgevoerd.

Dit protocol zou echter moeten worden gewijzigd als het testen van wat voor soort materialen (bijv. Bouba of Kiki, gevulde of omlijnde tactiele/visuele vorm, en/of auditief geluid of woord) het beste zorgt voor het leren van vorm-audio reguliteiten. Een mogelijke manier om dit protocol te wijzigen kan inhouden dat de verschillende materialen in blokken worden gepresenteerd: bijvoorbeeld gevulde tactiele/visuele vormen en auditief geluid en/of omlijnde tactiele/visuele vormen en auditief woord (experiment 1). Deze blokken kunnen in willekeurige volgorde worden gepresenteerd aan alle deelnemers in een experimentele groep; of als alternatief, elk van de vier blokken om experimentele groepen te scheiden (experiment 1). Dit protocol zou ook moeten worden gewijzigd als het testen van de robuustheid van de visuele beelden en/of het geleerde vorm-audio-reguliteiten binnen en tussen taken nog verder moet worden getest. De modificatie kan gepaard gaan met het toevoegen van herhaalde maatregelen binnen de groep met verschillende tactiele/visuele vorm en/of audio dan die welke in de training zijn opgenomen; bijvoorbeeld, met de auditieve klank voor ' Maa-Boo-maa ' en ' tuh-Kee-Tee ' na het trainen met tactiele/visuele Bouba en Kiki vormen en auditieve woorden (experiment 1)1,3,4,10, 11 , 12 , 13 , 14 , 15 , 16. een andere optie kan gepaard gaan met het presenteren van een derde tactiele/visuele vorm die niet hoofdzakelijk gebogen/hoekig is, samen met de tactiele/visuele Bouba en Kiki shapes in experiment 110,11,12 ,13,14,15,16. Een auditief nonsens woord en een geluid kunnen worden gemaakt voor deze tactiele/visuele vorm om een derde vorm-woord paar14,15,16 en een derde vorm-Sound pair17 (experiment 1) te produceren. Het vorm-klank paar kan dan worden opgenomen in experiment 2 als Vang proeven; of als alternatief als regelmatige congruous proeven en met bijbehorende ongerijde proeven. Tot slot kan het geluid (van experiment 2 en experiment 1) en/of het nonsens woord (uit experiment 1) worden gepresenteerd in experiment 3. Een derde optie zou kunnen inhouden dat experiment 2 en experiment 3 niet worden uitgevoerd, maar dat deze in willekeurige volgorde worden uitgevoerd als taken in de herhaalde binnen-groeps maatregelen in experiment 1.

Het gepresenteerde protocol is uniek omdat het zowel de visuele beelden als de zintuiglijke informatie onder controle houdt tijdens het trainen en testen. Het is flexibel: grote en kleine monsters en specifieke individuen kunnen worden getest tegen zichzelf (cf. de binnen-groep testen) en/of andere groepen van individuen (cf. de tussen-groep testen). Het is mogelijk om zowel de nauwkeurigheid als de exploratie tijd te testen, het aantal proeven te wijzigen en binnen de groep herhaalde maatregelen te nemen in elk experiment en de tijd ertussen, en de volgorde van proeven en/of experimenten te wijzigen of zelfs samen te vouwen.

Disclosures

De auteurs hebben niets te onthullen.

Acknowledgments

Financiers:
Dit werk werd gefinancierd door het Horizon 2020 onderzoeks-en innovatieprogramma van de Europese Unie in het kader van de Marie Sklodowska-Curie-acties (subsidieovereenkomst nummer 657440) en de Noorse Vereniging van blinden en slechtzienden.

Film make-up:
Make-up artiest Rachael Parrey.

Materials

Name Company Catalog Number Comments
Bouba/kiki filled 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki outlined 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki sound (sine wave)
Bouba/kiki word (human voice)
Carton plate/foam board for covering bouba/kiki (white) Ryman 230461860 297 mm horizontal x 210 vertical 0 mm vertical
Copy paper [white (80 g/m2 )] Ryman 250030000 210 mm horizontal x 148 mm vertical
Foam board for bouba/kiki picture cards [white (5 mm thick)] Ryman 230461860 50 mm horizontal x 50 mm vertical
MP3-player (smartphone with the VLC app for iOS installed) Carphone Warehouse
Plastic embossing film RNIB Shop ZM04 210 mm horizontal x 148 mm vertical
Rollerball pen [black (1.0 mm tip)] Ryman 827134001
Rubber mat RNIB Shop LC177 230 mm horizontal x 150 mm vertical
Saddleback style RNIB Shop B511
Swell paper Zychem Ltd Zytex2 paper 50 mm horizontal x 50 mm vertical

DOWNLOAD MATERIALS LIST

References

  1. Ramachandran, V. S., Hubbard, E. M. Synaesthesia - A Window Into Perception, Thought and Language. Journal of Consciousness Studies. 8 (12), 3-34 (2001).
  2. Bremner, A. J., Caparos, S., Davidoff, J., de Fockert, J., Linnell, K. J., Spence, C. Bouba’’and ‘‘Kiki’’ in Namibia? A remote culture make similar sound-shape matches, but different taste-shape matches to Westerners. Cognition. 126 (2), 165-172 (2013).
  3. Davis, R. The fitness of names to drawings. A cross-cultural study in Tanganyika. British Journal of Psychology. 52 (3), 259-268 (1961).
  4. Maurer, D., Pathman, T., Mondloch, C. J. The shape of boubas: sound-shape correspondences in toddlers and adults. Developmental Science. 9 (3), 316-322 (2006).
  5. Ozturk, O., Krehm, M., Vouloumanos, A. Sound-symbolism in infancy: Evidence for sound-Shape cross-modal correspondences in 4-months-olds. Journal of Experimental Child Psychology. 114 (2), 173-186 (2013).
  6. Bar, M., Neta, M. Humans Prefer Curved Visual Objects. Psychological Science. 17 (8), 645-648 (2006).
  7. Bertamini, M., Palumbo, L., Gheorghes, T. N., Galatsidas, M. Do observers like curvature or do they dislike angularity? British Journal of Psychology. 107 (1), 154-178 (2016).
  8. Quinn, P. C., Brown, C. R., Streppa, M. L. Perceptual Organization of Complex Visual Configurations by Young Infants. Infant Behavior and Development. 20 (1), 35-46 (1997).
  9. Silvia, P. J., Barona, C. M. Do people prefer curved objects? Angularity, expertise, and aesthetic preference. Empirical Studies of the Arts. 27 (1), 25-42 (2009).
  10. Nielsen, A., Rendall, D. The Sound of Round: Evaluating the Sound-Symbolic Role of Consonants in the Classic Takete-Maluma Phenomenon. Canadian Journal of Experimental Psychology. 65 (2), 115-124 (2011).
  11. D’Onofrio, A. Phonetic Detail and Dimensionality in Sound-shape Correspondences: Refining the Bouba-Kiki Paradigm. Language and Speech. 57 (3), 367-393 (2014).
  12. Westbury, C., Hollis, G., Sidhu, D. M., Pexman, P. M. Weighing up the evidence for sound symbolism: Distributional properties predict cue strength. Journal of Memory and Language. 99, 122-150 (2018).
  13. Oberman, L. M., Ramachandran, V. S. Preliminary evidence for deficits in multisensory integration in autism spectrum disorders: The mirror neuron hypothesis. Social Neuroscience. 3 (3-4), 348-355 (2008).
  14. Köhler, W. Gestalt psychology. , Liveright. New York, NY. (1929).
  15. Monaghan, P., Mattock, K., Walker, P. The Role of Sound Symbolism in Language Learning. Journal of Experimental Psychology: Learning, Memory, and Cognition. 38 (5), 1152-1164 (2012).
  16. Fort, M., Martin, A., Peperkamp, S. Consonants are More Important than Vowels in the Bouba-kiki Effect. Language and Speech. 58 (2), 247-266 (2015).
  17. Graven, T., Desebrock, C. Bouba or kiki with and without vision: Shape-audio regularities and mental images. Acta Psychologica. 188, 200-212 (2018).
  18. Fryer, L., Freeman, J., Pring, L. Touching words is not enough: How visual experience influences haptic-auditory associations in the “Bouba-Kiki” effect. Cognition. 132 (2), 164-173 (2014).
  19. Fontana, F. Association of Haptic Trajectories to Takete and Maluma. Lecture Notes in Computer Science. 7989, 60-68 (2013).
  20. Graven, T. How blind individuals discriminate braille characters: An identification and comparison of three discrimination strategies. British Journal of Visual Impairment. 33 (2), 80-95 (2015).
  21. Graven, T. How attention is allocated when using haptic touch: Shape feature distinction and discrimination strategy. EuroHaptics 2016, Part 1. Bello, F., Kajimoto, H., Visell, Y. , Springer International Publishing AG. Switzerland, Heidelberg. Part of the Lecture Notes in Computer Science book series (LNCS, volume 9774) 380-393 (2016).
  22. WHO. ICD-10 version: 2016 (International Statistical Classification of Diseases and Related Health Problems 10th revision). Chapter VII Diseases of the eye and adnexa (H00-H59). , Available from: http://apps.who.int/classifications/icd10/browse/2016/en#/H53-H54 (2019).
  23. Heller, M. A., Calcaterra, J. A., Burson, L. L., Tyler, L. A. Tactual picture identification by blind and sighted people: Effects of providing categorical information. Perception & Psychophysics. 58 (2), 310-323 (1996).
  24. Heller, M. A., Gentaz, E. Psychology of Touch and Blindness. , Psychology Press. New York, NY and Hove, East Sussex. (2014).
  25. Pathak, K., Pring, L. Tactual picture recognition in congenitally blind and sighted children. Applied Cognitive Psychology. 3 (4), 337-350 (1989).

Tags

Gedrag probleem 151 Bouba/Kiki-effect crossmodal haptische aanraking gehoor leer effect mentale beeld multimodale zintuiglijke regulariteiten Vormherkenning vorm-audio reguliteiten visie visuele beelden
Onderzoek naar het effect van visuele beelden en leervorm-audio Reguliteiten op Bouba en Kiki
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Graven, T., Desebrock, C.… More

Graven, T., Desebrock, C. Investigating the Effect of Visual Imagery and Learning Shape-Audio Regularities on Bouba and Kiki. J. Vis. Exp. (151), e59954, doi:10.3791/59954 (2019).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter