Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
JoVE Journal Behavior
Click here for the English version

Behavior

Gransker effekten av visuelle bilder og læring Shape-Audio regelmessigheter på Bouba og Kiki

Published: September 13, 2019 doi: 10.3791/59954
Automatic Translation
1, 1
1Department of Experimental Psychology, University of Oxford

Summary

Målet med den presenterte protokollen er å undersøke rollen til visuelle bilder i Bouba/Kiki-effekt, enten trening i å legge merke til Bouba/Kiki form-lyd regelmessigheter påvirker Bouba/Kiki-effekt og anerkjennelse av individuelle Bouba og Kiki former, og til slutt hva mentale bilder disse regelmessigheter produsere.

Abstract

Denne artikkelen presenterer en protokoll for å undersøke rollen til visuelle bilder i Bouba/Kiki-effekt, enten trening i å legge merke til Bouba/Kiki form-lyd regelmessigheter påvirker Bouba/Kiki-effekt og anerkjennelse av individuelle Bouba og Kiki former, og til slutt hva mentale bilder disse regelmessigheter produsere. For å generere Bouba/Kiki form-Audio regelmessigheter, var det to typer figurer (fylt; skissert) og to typer lyd (ord; ikke-ordlyd). Tre grupper av individer deltatt i tre eksperimenter: blind, bind for øynene, og visjon. Forsøkene ble gjennomført i fast rekkefølge på tvers av deltakerne, uten pause mellom dem. I eksperiment 1 (pre-test-post-test design med tre gjentatte innen-gruppe tiltak) deltakerne ble bedt om å plukke ut den formen de knyttet til hørbar Bouba/Kiki; i eksperiment 2 (i faget design), for å navngi en form og noen lyd (noen ganger congruous; noen ganger urimelig) som ' Bouba ' eller ' Kiki, og i eksperiment 3 (post-test bare design), å tegne formen de knyttet til hørbar Bouba/Kiki. Resultatene tyder på at blindfold gruppen trekker på visuelle bilder for å løse nye problemer, men ikke på lang sikt; at trening i merke Bouba/Kiki form-Audio regelmessigheter påvirker Bouba/Kiki-effekt og anerkjennelse av individuelle Bouba og Kiki former, men ulikt i hver eksperimentell gruppe; og at alle eksperimentelle grupper lage mentale bilder av de mest karakteristiske formen funksjon av Bouba (kurve) og Kiki (vinkel). Faktisk er effekten av visuelle bilder robust på tvers av aktiviteter, men ikke på lang sikt; effekten av læring form-Audio regelmessigheter er robust lang sikt, men ikke på tvers av oppgaver. Den presenterte protokollen er hensiktsmessig for å undersøke effekten av visuelle bilder og læring form-lyd regelmessigheter, når de oppstår og hvor robuste de er; i bestemte individer og grupper av individer. Denne protokollen er unik ved at den holder under kontroll både visuelle bilder og sensorisk informasjon under trening og testing.

Introduction

95% av verdens befolkning viser en hørbar-visuell Bouba/Kiki-effekt, knytte visuelt avrundet form med talte ord, ' Bouba; ' og visuelt kantete form med det muntlige ordet ' Kiki, og de gjør dette selv når de ikke har hatt noen erfaring med enten figuren eller ordet1. Den Bouba/Kiki-effekt forut språklæring; det skjer på tvers av språk1,2,3,4,5, med både Bouba og Kiki (jf folks preferanse for visuelle kurver over visuelle vinkler6,7 , 8 på alle , 9), og det avhenger av kombinasjonen av vokaler og konsonanter (f. eks, det skjer ikke med ' Bibi ' og ' Kuku '.) 1 den andre , 5 andre priser , 10 andre , 11 flere , 12. denne formen-ordet foreningen oppstår med andre form og ord parene også, så lenge de er hovedsakelig buet, som Bouba, og hovedsakelig kantete, som Kiki11,13; og/eller de har samme kombinasjon av vokaler og konsonanter som ' Bouba ' og ' Kiki, ' for eksempel: ' Baluma ' og ' takete, ' ' maluma ' og ' takete, ' ' uloomo ' og ' takete, ' ' MAA-Boo-MAA ' og ' tuh-Kee-tee '1,3, 4,10,11,12,14. Faktisk folk forbinder avrundede visuelle figurer med talte ord som inneholder continuant konsonanter (for eksempel/l/og/m/) og åpne tilbake vokaler (for eksempel/ɑ:/, og/overførende:/), og den visuelle kantete figurer med talte ord som inneholder plosiv konsonanter (for eksempel/ k/og/t/) og foran vokaler (for eksempel (/ε/og/I/)11,12,15,16. De påvirkes mer av konsonanter enn vokaler, spesielt av de ustemt (f.eks./k/og/t/)11,12,15,16. Faktisk synes det funksjonene i den globale former-deres kurver og vinkler17 -og lyden av de talte ord-deres melodi17 -er de mest avgjørende, i motsetning til den globale former og ord selv.

En studie har undersøkt Bouba/Kiki-effekt med taktile Bouba og Kiki i stedet for den visuelle Bouba/Kiki figurer og fant at deltakerne som var svaksynte viste en betydelig mindre robust Bouba/Kiki-effekt (~ 64%) enn det fullt ut seende (~ 90%)18. Denne studien hevdet at betydelig mindre robust Bouba/Kiki-effekt blant deltakerne som var blinde og delvis seende var forårsaket av mangel på visuelle bilder: de fullt seende deltakerne hadde lagt merke til regelmessigheter i sitt miljø som ikke er lett tilgjengelig når synet er svekket18. Det er ikke klart fra denne studien, men om visuelle bilder er nødvendig for Bouba/Kiki-effekt å forekomme: bare seks av de 42 deltakerne med nedsatt synshemming var congenitally helt blind18, og hadde dermed ingen visuelle bilder i det hele tatt. Videre, de andre deltakerne, ingen av dem bind for øynene, kan ha observert eksperimentator ' s leppe bevegelser når annonsere Bouba/Kiki ord-avrundet leppe bevegelser når annonsere ' Bouba ' og kantete leppe bevegelser når kunngjøring ' Kiki '1 , 18 -viser en taktil-visuell-hørbar Bouba/Kiki-effekt i stedet for å tegne på noen visuelle bilder. I tillegg, noen effekt av å merke taktile-hørbar regelmessigheter ble ikke undersøkt, for eksempel ved å sammenligne Bouba/Kiki-effekt på rettssaken en og rettssaken fire i stedet for å beregne effekten på tvers av alle fire forsøk. Videre var den taktile Bouba og Kiki ganske annerledes på tvers av prøvelser: i forsøk en og to var de 3D og 2D figurer (buet v kantete); i prøvelser tre og fire, identiske i form (sirkel) og ulik i tekstur (glatt v grov, glatt v piggete)18. I en relatert blodåre, har en studie undersøkt en kinestetiske-hørbar Bouba/Kiki-effekt i bind for øynene (fullt seende) individer og funnet ut at etter en to minutters trening periode med å holde en robot pennen programmert til å tegne baner av Bouba og Kiki figurer, 82% viste Bouba/Kiki-effekt19. Det er ikke klart fra denne studien, men om Bouba/Kiki-effekten oppstod på grunn av opplæringen periode: studien inkluderte ikke en pre-test, eller en kontrollgruppe.

For dette formål har vi undersøkt rollen som visuelle bilder i Bouba/Kiki-effekt, enten trening i å legge merke til taktile/visuell-hørbar Bouba og Kiki regelmessigheter påvirket Bouba/Kiki-effekt og anerkjennelse av individuelle taktile/visuelle Bouba og Kiki former, og til slutt hva mentale bilder disse form-Audio regelmessigheter produsert17. For å generere Bouba/Kiki form-lyd regelmessigheter-ikke bare, for eksempel, Kiki-form/Kiki-ordet særtrekk1 -denne studien inkluderte to typer taktile/visuelle Bouba/Kiki former (fylt; skissert) og to typer av hørbar Bouba/Kiki [lyd ( Word ikke-ordlyd)]17. Tre grupper av individer deltatt i tre eksperimenter: blind (N = 12), bind for øynene (N = 12), og visjon (N = 12). Forsøkene ble gjennomført i fast rekkefølge på tvers av deltakerne og uten pause mellom dem, for å holde under kontroll deltakernes mengde og type erfaring med Bouba og Kiki. I eksperiment 1 (pre-test-post-test design med tre gjentatte innen-gruppe tiltak) deltakerne ble bedt om å plukke ut den taktile/visuell form de knyttet til hørbar Bouba/Kiki; i eksperiment 2 (i faget design), for å nevne en taktil/visuell form og noen lyd (noen ganger congruous; noen ganger urimelig) som ' Bouba ' eller ' Kiki, ' og i eksperiment 3, (post-test bare design) å tegne den taktile/visuell form de knyttet til hørbar Bouba/Kiki17. Samlet sett er denne studien antydet at effekten av visuelle bilder er robust på tvers av aktiviteter, men ikke langsiktig i hver oppgave, mens effekten av læring form-lyd regelmessigheter er robust lang sikt i hver oppgave, men ikke på tvers av aktiviteter17. Denne artikkelen presenterer protokollen fra denne studien17. Den presenterte protokollen er hensiktsmessig for å undersøke effekten av visuelle bilder og læring form-lyd regelmessigheter, når de oppstår og hvor robuste de er; i bestemte individer og grupper av individer. Denne protokollen er unik ved at den holder under kontroll både visuelle bilder og sensorisk informasjon under trening og testing.

Protocol

The Medical Sciences Inter-avdelings forskning etikk Committee (IDREC) Universitetet i Oxford gitt godkjenning for denne protokollen (Ref nei: MS-IDREC-C1-2015-200, R46287/RE002, og R42687/RE004).

1. design og betingelser

  1. Gjennomfør tre eksperimenter i følgende faste rekkefølge med alle deltakerne: eksperiment 1, eksperiment 2 og eksperiment 3, uten pause mellom dem. Sørg for at alle deltakerne i eksperiment 2 deltok i eksperiment 1 og alle deltakerne i eksperiment 3 også i eksperiment 2 (og eksperiment 1).
  2. Gjennomføre eksperiment 1 – en pre-test-post-test design, med tre eksperimentelle grupper: blind, bind for øynene, og visjon; og tre gjentatte innen-gruppe tiltak. Presenter forsøkene i fast rekkefølge for alle deltakere. (Totalt antall forsøk: 8.)
    1. Gjennomføre pre-test (Trial 1) for å teste Instant taktile/visuell-hørbar Bouba/Kiki-effekt.
    2. Gjennomføre den første gjentatt innen-gruppe mål (Trial 4) for å teste effekten av gjentatte taktile/visuell form (enten fylt eller skissert) og variert lyd (ord og ikke-ordlyd).
    3. Gjennomføre andre innen-gruppen tiltaket (Trial 5) for å teste effekten av nye taktile/visuell form (enten skissert eller fylt) og variert lyd (ord og ikke-ordlyd).
    4. Gjennomføre den tredje i gruppen måle og post-test (Trial 8) for å teste effekten av variert taktil/visuell form (fylt og skissert) og variert lyd (ord og ikke-ordlyd).
    5. Tilordne vilkårlig hvilken type taktile/visuell Bouba/Kiki-figurer som skal presenteres i prøveversjoner 1-4 (enten fylt eller uthevet). Presenter den andre typen i forsøk 4-8. Så, tilfeldig tildele hvilke hørbar ord (enten Bouba eller Kiki) til stede i Trial 1, og som hørbar Bouba/Kiki (enten Bouba eller Kiki og enten ord eller ikke-ordlyd) til stede i hver enkelt av Trials 2-8.
      Merk: Sørg for at totalt er det fire Bouba og fire Kiki prøvelser; fire fylte og fire skissert taktile/visuell form prøvelser; fire hørbare ord og fire hørbare ikke-ordlyd forsøk.
  3. Gjennomfør eksperiment 2 – en innenfor design, med tre eksperimentelle grupper: blinde, bind for øynene og visjoner; og to innenfor-gruppe tiltak. Presenter forsøkene i fast rekkefølge for alle deltakere. (Totalt antall forsøk: 8)
    1. Test Instant anerkjennelse av congruous (Bouba/Kiki + Bouba/Kiki) form-lyd (Trial 1).
    2. Test anerkjennelse av (a) congruous (Bouba/Kiki + Bouba/Kiki), og (b) urimelig (Bouba/Kiki + Kiki/Bouba) form-lyd [over fire forsøk per type congruousness (Trials 1-8)].
    3. Tilordne tilfeldig hvilken type taktil/visuell Bouba/Kiki form (enten fylt eller skissert) å presentere i forsøk 1-8. Deretter tilfeldig tildele som congruous taktile/visuell form og hørbar ikke-ordlyd (enten Bouba + Bouba eller Kiki + Kiki) å presentere i Trial 1, og til slutt hvilken type congruousness (enten congruous eller urimelig taktile/visuell Bouba/Kiki form + hørbar Bouba/Kiki ikke-ordlyd) til stede i hver enkelt av Trials 2-8.
      Merk: Sørg for at det i alt er fire taktile/visuelle Bouba og fire taktile/visuelle Kiki prøvelser; fire fylte og fire skisserte taktile/visuelle prøvelser; fire congruous og fire urimelig (form + ikke-ordlyd) prøvelser. (Hørsels Bouba/Kiki-ordet er ikke inkludert i dette eksperimentet.)
  4. Gjennomfør eksperiment 3 – en design som bare er etter testing, med tre eksperimentelle grupper: blinde, bind for øynene og visjoner. Presenter forsøkene i fast rekkefølge for alle deltakere (totalt antall forsøk: 4).
    1. Test hva mentale bilder treningen i å legge merke form-Audio regelmessigheter (dvs. eksperiment 1 og eksperiment 2) har produsert, i fire separate forsøk: Bouba ord, Bouba ikke-ordet lyd, Kiki ord, og Kiki ikke-ordet lyd.
    2. Tilordne tilfeldig hvilken type hørbar Bouba/Kiki (enten Bouba eller Kiki og enten ord eller ikke-ordlyd) til stede i hver enkelt av Trials 1-4.
      Merk: Sørg for at totalt er det en hørbar Bouba ord rettssak, en hørbar Bouba ikke-ordlyd rettssaken, en hørbar Kiki ord prøve, og en hørbar Kiki ikke-ordlyd rettssaken.

2. deltakere

  1. Rekruttere en gruppe deltakere som er congenitally blind; Det er, blindet mindre enn fire måneder etter fødselen20,21,22: kategorier 5: Total blindhet; og 4: lys persepsjon (oppfatte en lyskilde) og lysprojeksjon (oppfatte hvor en lyskilde ligger)22. Sørg for at de er alle blindeskrift lesere.
  2. Rekruttere en gruppe av fullt seende deltakere, på dobbelt så stor som gruppen av deltakere som er congenitally blind. Sørg for at de alle har normal/korrigert til normal visjon.
    Merk: Sørg for at alle deltakerne er mellom 18 og 70 år, med normal/korrigert til normal hørsel, ingen kognitiv forsinkelse eller svekkelse, eller noen fysiske funksjonshemminger, og at de er alle naiv til Bouba/Kiki-effekt.
  3. Tilordne tilfeldig halve gruppen av de fullt seende deltakerne til bind for øynene-gruppen og den andre halvparten til visjonen-gruppen.
    Merk: deltakere, type taktile/visuell Bouba/Kiki form (er), type hørbar Bouba/Kiki, og congruousness er alle tilfeldig tildelt til en av to kategorier: bind for øynene eller visjon; fylt eller skissert; ord eller ikke-ordlyd; Bouba eller Kiki; congruous eller urimelig. Dermed tilfeldig oppdraget kan gjøres enten ved et dataprogram eller manuelt (f. eks, ved å kaste en mynt).

3. materialer

  1. Produser de taktile/visuelle materialene
    1. Overfør de visuelle Bouba/Kiki-figurene (30 x 23 mm) til å hovne opp papir, enten ved å skrive dem ut fra en personlig datamaskin eller ved fotokopiering og deretter fra et bilde. Sørg for å overføre to typer visuelle Bouba/Kiki figurer: ett fylt og ett skissert [(1,5 pkt. linje). CF. figur 1].
    2. Pass svelle papiret gjennom en varme fikseringsenhet. Pass på at de taktile Bouba/Kiki figurene stiger til ~ 0,5 mm høyde. Alternativt kan du bestille den taktile/visuelle Bouba/Kiki figurer fra en transkripsjon tjeneste for personer som er svaksynte (med en PDF-fil vedlagt).
    3. Lim den svelle papiret på skum bord [hvit (5 mm tykk)]. Bruk spray lim.
    4. Skjær svelle papir og skum bord i størrelse (50 x 50 mm), det vil si å lage fire separate taktile/visuelle bilde kort: Bouba fylt, Bouba skissert, Kiki fylt, og Kiki skissert (jf figur 1). Bruk en kniv til å kutte tapet.
    5. Skjær en kartong plate/skum brett for å dekke de taktile/visuelle Bouba/Kiki figurer i størrelse (297 x 210 mm). Bruk en kniv til å kutte tapet. Alternativt kan du bestille A4-format.
    6. Klipp kopipapir/plast preging filmen i størrelse (210 x 148 mm). Bruk en giljotinen. Du kan også bestille a5-formatet.
    7. Skjær en gummimatte i størrelse (230 x 150 mm). Bruk en kniv eller en saks. Alternativt kan du bestille Moon hånd ramme og ta den fra hverandre for å avdekke gummimatten.

Figure 1
Figur 1: to typer Bouba/Kiki-figurer: fylt og uthevet Vennligst klikk her for å se en større versjon av dette tallet.

  1. Produser hørsels materialene
    1. Ta opp de talte Bouba (jf. Audio 1) og Kiki ord. Lagre i MP3-format: en fil for Bouba ord og en for Kiki ordet.
    2. Lag Bouba og Kiki ikke-ordet lyder, ved å etterligne varighet og frekvens (dvs. melodi) av talte ordene "Bouba" og "Kiki". Bruk en lydbølge generator og pitch bøy. Lagre i MP3-format: en fil for Bouba lyd (CF. Audio 2) og en for Kiki lyden.
    3. Installer VLC-appen for iOS på en smarttelefon. Overfør MP3-filer for Bouba og Kiki til VLC app. lagre dem som fire separate filer: Bouba lyd, Bouba ord, Kiki lyd, og Kiki ord.

Lyd 1: Bouba ord Vennligst klikk her for å laste ned denne filen.

Lyd 2: Bouba lyd Vennligst klikk her for å laste ned denne filen.

4. prosedyre og scoring

  1. Definere test økten
    1. Gjennomføre de tre eksperimentene i et stille rom som er nøytral i farge, og med alle deltakerne individuelt. Be deltakerne i bind for øynene om å ta på seg bind for øynene, før de setter opp det taktile/visuelle-hørbar materiale, og sørg for at de holder bind for øynene på hele og mellom alle de tre eksperimentene.
  2. Sett opp taktile/visuelle materialer
    1. Plasser gummimatten rett foran deltakeren. Deretter plasserer (eksperiment 1) de to taktile/visuell Bouba og Kiki figurer (eksperiment 2), den taktile/visuelle Bouba eller Kiki form og (eksperiment 3), kopien papir/plast preging film på toppen av gummimatten.
      Merk: i eksperiment 1, sørg for å alltid presentere Bouba til venstre og Kiki til høyre; og i både eksperiment 1 og eksperiment 2, for alltid å presentere dem i samme retning (jf. figur 1): å forsterke deltakernes evne til å danne mentale bilder av Bouba og Kiki former uten innblanding fra deres posisjon og/eller orientering på gummimatten. Pass på at du ikke informerer deltakerne om denne faste presentasjonen av de taktile/visuelle Bouba-og Kiki-formene. I Vision-gruppen, må du alltid sette opp test materialet bak en kartong plate/skum brett, for å hindre at disse deltakerne tar en sniktitt på hva som er i butikken.
  3. Sett opp hørsels materialene
    1. Plasser MP3-spilleren rett foran deltakeren (på den andre siden av gummimatten), med høyttaleren nærmest dem.
      Merk: ikke gjenta hørsels informasjonen fra MP3-spilleren til verbalt: for å hindre deltakerne i visjonen-gruppen fra å observere leppe bevegelser på Bouba/Kiki ord-forsøk1, og dermed holde under kontroll på tvers av alle eksperimentelle grupper mengden og typen av sensorisk informasjon.
  4. Gjennomfør eksperiment 1, eksperiment 2 og eksperiment 3
    1. Inviter deltakerne som skal utforske og tegne de taktile figurene (dvs. blinde og bind for øynene) for å utforske gummimatten (ved berøring): for eksempel, for størrelse og tekstur, uten noen av de taktile/visuelle bilde kortene og/eller Kopier papir eller plast preging film plassert på toppen.
  5. Utføre eksperiment 1
    1. Forklar at to billedkort vil bli presentert på gummimatten, og hver av dem picturing en taktil/visuell form. Deretter, Forklar at noen lyd vil bli spilt fra MP3-spilleren, og at denne lyden vil tilsvare en av de taktile/visuelle former.
      Merk: ikke Informer deltakerne om de to typer taktile/visuell Bouba/Kiki (fylt og skissert) og de to typer hørbar Bouba/Kiki (lyd og ord).
    2. Plasser de to taktile/visuelle billed kortene på gummimatten (jf. figur 1).
    3. I blinde og bind for øynene-gruppen, be deltakeren til å gjøre en knyttneve med begge hender og å plassere nevene på toppen av presentert taktile/visuelle bilde kort, guiding dem hvis nødvendig. Plasser venstre hånd på toppen av deltakerens nevene.
    4. Be deltakeren om å utforske de to taktile/visuelle formene, blinde og bind for øynene med berøring og visjonen-gruppen av visjonen, når hånden på toppen av nevene (blinde og bind for øynene)/kartongen plate eller skum bord (Vision-gruppen) er fjernet, og å si ' Ja, når de er ferdig med å utforske.
    5. Fjern venstre hånd fra deltakerens nevene (i blind og bind for øynene)/kartong platen eller skum bord (i visjonen-gruppen).
    6. Så snart deltakeren sier ja, dekker de taktile/visuelle bilde kortene.
    7. Spill av lyden fra MP3-spilleren.
      Merk: spill av hørsels informasjonen fra MP3-spilleren bare én gang, og ikke gjenta den tilbake muntlig til deltakerne.
    8. Be deltakeren om å signalisere hvilken taktil/visuell form de forbinder med lyden, for eksempel ved å si "venstre/høyre", "svingete/kantete" eller "blomst/stjerne", og Legg merke til formen gitt. Ikke svar på deltakerens svar.
    9. Score om deltakerens svar er riktig eller feil.
      Merk: Gjenta 4.5.2 – 4.5.9 for alle de åtte forsøkene.
  6. Gjennomføre eksperiment 2
    1. Forklar at ett bilde kort, picturing en taktil/visuell form, vil bli presentert på gummimatten, og at noen lyd vil bli spilt fra MP3-spilleren. Deretter, Forklar at lyden vil bli spilt en gang per bilde kort, så snart deltakeren begynner å utforske den taktile/visuell form.
      Merk: ikke Informer deltakerne om de to typer taktile/visuell Bouba/Kiki (fylt og skissert), den ene typen hørbar Bouba/Kiki (lyd), og de to typer congruousness (congruous og urimelig).
    2. Plasser det taktile/visuelle bilde kortet på gummimatten.
    3. I blinde og bind for øynene-gruppen, be deltakeren til å gjøre en knyttneve med begge hender og å plassere nevene på toppen av presentert taktile/visuelt bilde kortet, guiding dem hvis nødvendig. Plasser venstre hånd på toppen av deltakerens nevene.
    4. Spør deltakeren til å utforske den taktile/visuell form, den blinde og bind for øynene-gruppe ved berøring og visjonen-gruppen av visjonen, når hånden på toppen av nevene (blind og bind for øynene-gruppe)/kartongen plate eller skum bord (Vision-gruppen) er fjernet, og å lytte til lyden. Be dem deretter om å navngi den taktile/visuelle formen og lyden som enten "Bouba" eller "Kiki": ett navn bare23,24,25, når de er ferdig med å utforske.
    5. Fjern venstre hånd fra deltakerens nevene (i blinde og bind for øynene)/kartong plate eller skum bord (i visjonen-gruppen) og spille av lyd fra MP3-spilleren.
      Merk: spill av hørsels informasjonen fra MP3-spilleren bare én gang, og ikke gjenta den tilbake muntlig til deltakerne.
    6. Så snart deltakeren navngir den taktile/visuelle formen og lyden, dekker du bilde kortet og noterer navnet. Ikke svar på deltakerens svar.
    7. Score om deltakerens svar er riktig eller feil.
      Merk: Gjenta 4.6.2 – 4.6.7 for alle de åtte forsøkene.
    8. På tvers av congruous og urimelig prøvelser, telle en deltaker som "riktig" når de har gjenkjent ≥ 75% av taktile/visuell Bouba og Kiki figurer.
  7. Gjennomføre eksperiment 3:
    1. Forklar at noen kopipapir/plast preging filmen vil bli plassert på toppen av gummimatten, i stedet for den taktile/visuelle bilde kort (r), og at deltakeren vil bli bedt om å trekke på den. I blinde og bind for øynene-gruppen, invitere deltakeren til å prøve ut de forskjellige tegne utstyr og å bestemme selv som de foretrekker: kopien papir eller plast preging film og Rollerball penn eller Saddleback stil. Deretter forklarer at noen lyd vil bli spilt fra MP3-spilleren, og at deltakeren skal tegne den taktile/visuell form de forbinder med denne lyden, en form per segment av lyd når de blir spurt.
      Merk: ikke Informer deltakerne om hørsels informasjonen (Bouba og Kiki), og heller ikke de to typene hørsels Bouba/Kiki (lyd og ord).
    2. Plasser kopien papir/plast preging film på gummimatten.
    3. I alle tre eksperimentelle grupper (blind; bind for øynene, visjon), spør deltakeren til å lage en knyttneve med begge hender mens du holder Rollerball pennen/Saddleback stil og å plassere nevene på toppen av kopipapir/plast preging film, guiding dem hvis nødvendig. Plasser venstre hånd på toppen av deltakerens nevene.
    4. Be deltakeren tegne formen de forbinder med den presenterte lyden når hånden på toppen av nevene er fjernet. I blind-og bind for øynene-gruppen ber du deltakeren om å tegne en taktil form; og i visjonen-gruppen, en visuell form. Be deltakeren si "ja" når de har fullført tegningen.
    5. Fjern venstre hånd fra deltakerens nevene.
    6. Spill av lyden fra MP3-spilleren.
      Merk: spill av hørsels informasjonen fra MP3-spilleren bare én gang, og ikke gjenta den tilbake muntlig til deltakerne.
    7. Så snart deltakeren sier "ja", Fjern deres taktile/visuell tegning fra gummimatten og Merk den i nederste høyre hjørne med riktig prøve nummer. Ikke svar på eller gi noen kommentarer på deltakerens svar/tegnet form.
      Merk: Gjenta 4.7.2 – 4.7.7 for alle fire forsøkene.
    8. Skann alle taktile/visuelle tegninger (1:1 størrelse) i jpg-format umiddelbart etter hver test økt.
      Merk: eksperiment 3 scores av en gruppe med skårer etter at alle tegnings data er samlet inn.
    9. Produser et spørreskjema for scoring av tegnings data (jf. figur 2):
      1. Skaler ned alle skannede tegninger for å inkludere 12 bilder per side i det liggende a4-formatet.
      2. Tilfeldig tildele Bouba/Kiki prøvelser, lyd/ord prøvelser, og blind/bind for øynene/Vision skuffer.
      3. Legg til prøve nummer i øvre venstre hjørne av hvert bilde.
      4. Legg til ' Bouba ' og ' Kiki, ' og ' blind, ' ' bind for øynene ' og ' seende ' under hvert bilde.
    10. Rekruttere en gruppe scorer, over 18 år; med normal/korrigert til normal hørsel og visjon; uten kognitiv forsinkelse eller svekkelse, eller noen fysiske funksjonshemminger; Det er alle naiv til denne studien, og som viser en visuell form-trykt ord Bouba/Kiki-effekt.
    11. Be de skårer svare på to flervalgspørsmål per bilde i spørreskjemaet:
      (1) ' er avbildet form "Bouba" eller "Kiki;" ' og (2) ' er bildet tegnet av noen som er blind (siden fødselen), bind for øynene eller fullt seende? ' 17av dem.
    12. Avhengig av antall bilder i spørreskjemaet, ber du halvparten av gruppen med skårer om å score halve spørreskjemaet, og den andre halvparten scorer resten.
    13. For hver prøveversjon, teller «samsvarer», «samsvarer ikke» og «ikke svar», som er:
      1. "Korresponderer" når (i) ≥ 75% av de skårer som ble enige om hvilken taktil/visuell form (Bouba eller Kiki) som ble avbildet, og (II) denne formen tilsvarte den viste hørsels Bouba/Kiki i denne prøvelsen.
      2. "Ikke samsvarer" når (i) ≥ 75% av de skårer som ble enige om hvilken taktil/visuell form (Bouba eller Kiki) som ble avbildet, og (II) denne formen ikke samsvarer med den viste hørsels Bouba/Kiki i denne rettssaken.
      3. "Ufullstendig" når < 75% av de skårer som ble enige om hvilken taktil/visuell form (Bouba eller Kiki) som ble avbildet. Fjern de "mangelfulle" bildene/deltaker tegningene fra de statistiske analysene.
    14. På tvers av prøveversjoner teller du en deltaker som "korresponderer" når ≥ 75% av de tegnede mentale bildene: det vil si at taktile/visuelle former tilsvarer den presenterte hørsels Bouba/Kiki.
    15. For hver prøveversjon kan du telle "gjenkjent", "ikke gjenkjent" og "mangelfulle", som er:
      1. "Gjenkjent" når (i) ≥ 66,6% av de skårer som ble enige om hvilken eksperimentell gruppe (blind, bind for øynene eller synet) som hadde tegnet bildet, og (II) dette var riktig i denne prøvelsen.
      2. "Ikke gjenkjent" når (i) ≥ 66,6% av de skårer som ble enige om hvilken eksperimentell gruppe (blind, bind for øynene eller synet) som hadde tegnet bildet, og (II) dette ikke var riktig i denne prøvelsen.
      3. "Ufullstendig" når < 66.6% av de skårer som ble enige om hvilken eksperimentell gruppe (blind, bind for øynene eller synet) hadde tegnet bildet. Ekskluder de "mangelfulle" deltaker anerkjennelser fra de statistiske analysene.
    16. På tvers av prøveversjoner (og med "mangelfulle" deltaker anerkjennelser fjernet), teller du en deltaker som "gjenkjent" når den gjenkjennes i ≥ 75% av alle forsøkene.

Figure 2
Figur 2: eksempler fra spørreskjemaet for scoring av tegnings data Vennligst klikk her for å se en større versjon av dette tallet.

Representative Results

Den Bouba/Kiki-effekt

Seks av de 12 deltakerne som var congenitally blinde (50%), ni av de 12 som var bind for øynene (75%), og 10 av de 12 som var fullt ut seende (~ 83%) viste en umiddelbar taktil/visuell-hørbar Bouba/Kiki-effekt: det vil si, både bind for øynene og visjonen-gruppen var betydelig over sjansen nivå (av 50%): x2(1. N = 12) = 3,00, p = 0,08 og x2(1. N = 12) = 5,33, p = 0,02 (eksperiment 1, prøve 1)17. Ingen signifikant forskjell ble funnet av Fisher ' s eksakt test mellom de tre eksperimentelle grupper (eksperiment 1, pre-test)17. (Jf. tabell 1.)

Når det gjelder den langsiktige taktile/visuell-hørbar Bouba/Kiki-effekt: på den første gjentatte innen-gruppen tiltaket, ni av deltakerne som var congenitally blinde viste Bouba/Kiki-effekt sammen med ni som var fullt seende og syv som var bind for øynene: den blinde og visjonen-gruppen betydelig over sjansen nivå (av 50%): x2(1. N = 12) = 3,00, p = 0,08 og x2(1. N = 12) = 3,00, p = 0,08 (eksperiment 1, prøve 4)17. På den andre gjentatte innenfor-gruppe tiltaket, 11 deltakere i blinde og visjon-gruppen viste taktile/visuell-hørbar Bouba/Kiki-effekt: begge eksperimentelle grupper ble igjen betydelig over sjansen nivå (av 50%): x2(1. N = 12) = 8,33, p = 0,00 og x2(1. N = 12) = 8,33, p = 0,00; og syv i bind for øynene-gruppen (eksperiment 1, Trial 5)17. Til slutt, på den tredje gjentatte innen-gruppe måle og post-test, ni av de 12 deltakerne som var congenitally blind (75%), seks av de 12 som var bind for øynene (50%), og alle de 12 deltakerne som var fullt seende (100%) viste den taktile/visuell-hørbar Bouba/Kiki-effekt; både blinde og Vision-gruppen var igjen betydelig over sjansen nivå (av 50%): x2(1. N = 12) = 3,00, p = 0,08 og x2(1. N = 12) = 12,00, p = 0,00 (eksperiment 1, prøve 8)17. Fisher ' s eksakte test fant en betydelig forskjell mellom bind for øynene og visjonen-gruppen [p = 0,01. (Eksperiment 1, etter test)] 17. (jf. tabell 1.)

Gruppe for involverte Instant Bouba/Kiki-effekt Langsiktig Bouba/Kiki-effekt
Forhåndstest Gjentatt måling 1 Gjentatt måling 2 Gjentatt måling 3/post-test
Blind 50,0 prosent 75,0 prosent 91,7 prosent 75,0 prosent
Bind for øynene 75,0 prosent 58,3 prosent 58,3 prosent 50,0 prosent
Visjon 83,3 prosent 75,0 prosent 91,7 prosent 100,0 prosent

Tabell 1: Den øyeblikkelige og langsiktige Bouba/Kiki-effekten

Erkjennelsen av Bouba og Kiki former

Elleve av de 12 deltakerne som var congenitally blind (~ 92%), ni av de 12 som var bind for øynene (75%), og alle de 12 som var fullt seende (100%) umiddelbart anerkjente congruous taktile/visuelle og hørbar Bouba/Kiki; alle tre eksperimentelle grupper var signifikant over sjansen nivå (av 50%): x2(1. N = 12) = 8,33, p = 0,00, x2(1. N = 12) = 3,00, p = 0,08 og x2(1. N = 12) = 12,00, p = 0,00 (eksperiment 2, prøve 1)17. (Jf. tabell 2.)

Lang sikt, 11 deltakere i blinde-gruppen anerkjente taktile Bouba/Kiki figurer sammen med congruous lyd og 10 deltakere med urimelig lyd: begge typer congruousness anerkjent betydelig over sjansen nivå (av 50%): x2( 1. N = 12) = 8,33, p = 0,00 og x2(1. N = 12) = 5,33, p = 0,02 (eksperiment 2, prøve 1-8)17. Ni deltakere i bind for øynene har gjenkjent de taktile formene sammen med congruous lyd og åtte deltakere sammen med urimelig lyd. med andre ord, congruous form og lyd var betydelig over sjansen nivå (av 50%): x2(1. N = 12) = 3,00, p = 0,08 (eksperiment 2, prøve 1-8)17. Alle 12 deltakere i visjonen-gruppen anerkjente visuelle Bouba/Kiki figurer sammen med congruous lyd og seks deltakere med urimelig lyd: den congruous form og lyd gjenkjennes betydelig over sjansen nivå (av 50%): x2(1. N = 12) = 12,00, p = 0,00 (eksperiment 2, prøve 1-8)17. (Jf. tabell 2.)

Gruppe for involverte Instant anerkjennelse av Bouba/Kiki form Langsiktig anerkjennelse av Bouba og Kiki figurer
Congruous form og lyd Congruous form og lyd Urimelig form og lyd
Blind 91,7 prosent 91,7 prosent 83,3 prosent
Bind for øynene 75,0 prosent 75,0 prosent 66,7 prosent
Visjon 100,0 prosent 100 prosent 50,0 prosent

Tabell 2: umiddelbar og langsiktig anerkjennelse av Bouba-og Kiki-figurer

Den mentale bilder av Bouba og Kiki

Åtte av de 12 deltakerne som var congenitally blind [~ 73% (med en "ufullstendig" deltaker tegning fjernet)], åtte av de 12 som var bind for øynene [~ 89% (med tre "mangelfulle" deltaker tegninger fjernet)], og åtte av de 12 som var fullt seende [80% (med to ' mangelfulle ' deltaker tegninger fjernet)] kjapt trakk et mentalt bilde: en taktil/visuell form som tilsvarte den presenterte hørsels Bouba/Kiki (eksperiment 3, Trial 1)17. Både bind for øynene og visjonen var signifikant over sjanse nivået (av 50%): x2(1. N = 9) = 5,44, p = 0,02 og x2(1. N = 10) = 3,60, p = 0,06 (eksperiment 3, prøve 1)17. (Jf. tabell 3.)

Når det gjelder langsiktige mentale bilder av Bouba og Kiki: 11 deltakere i blinde-gruppen, åtte i bind for øynene-gruppen, og 12 i Vision-gruppen trakk taktile/visuelle Bouba/Kiki figurer som tilsvarte de presenterte hørbar Bouba/Kiki (eksperiment 3, Trial 1-4)17. Både blinde og Vision-gruppen var betydelig over sjansen nivå (av 50%): x2(1. N = 12) = 8,33, p = 0,00 og x2(1. N = 12) = 12,00, p = 0,00 (eksperiment 3, prøve 1-4)17. Fisher ' s eksakte test fant en betydelig forskjell mellom bind for øynene og visjonen-gruppen [p = 0,09 (eksperiment 3, Trial 1-4)]17. (Jf. tabell 3.)

Gruppe for involverte Instant mentale bilde av Bouba/Kiki Langsiktig mentale bilder av Bouba og Kiki
Blind 72,7 prosent 91,7 prosent
Bind for øynene 88,9 prosent 66,7 prosent
Visjon 80,0 prosent 100,0 prosent

Tabell 3: Den øyeblikkelige og langsiktige mentale bilder av Bouba og Kiki

Videre. ~ 83% av alle deltakere tegninger inkluderte den mest karakteristiske formen funksjonen av den globale Bouba og Kiki figurer: kurve og vinkel, henholdsvis (eksperiment 3, Trial 1-4)17. Deltakeren tegningene forskjellig i mengden av kurver/vinkler (f. eks en og fem vinkler for Kiki ordet: CF figur 2, Trials 1, 6 og 9), og i retning av kurvene/vinkler [dvs. horisontal, vertikal eller diagonal: CF figur 2, Trials 2, 5 og 8 (Bouba lyd)], men inkluderte vanligvis ikke den globale Bouba/Kiki-formen [eksperiment 3, prøve 1-4 (jf. figur 1; Figur 2)]17. Til slutt ble den eksperimentelle gruppen anerkjent i ~ 43% av poengene svar: fem deltakere i blind-gruppen, tre i bind for øynene-gruppen, og fem i visjonen-gruppen; ingen eksperimentell gruppe var betydelig over sjansen nivå [av 33,3% (eksperiment 3, Trial 1-4)]17.

Effekten av visuelle bilder og læring

Den presenterte protokollen lyktes i å undersøke rollen til visuelle bilder i Bouba/Kiki-effekt, enten trening i å legge merke til taktile/visuell-hørbar Bouba og Kiki regelmessigheter påvirket Bouba/Kiki-effekt og anerkjennelse av individuelle taktile /Visual Bouba og Kiki former, og til slutt hva mentale bilder disse form-Audio regelmessigheter produsert17. Ved å inkludere en eksperimentell gruppe uten visuell erfaring (dvs. blind gruppe) og to eksperimentelle grupper med visuell erfaring (dvs. bind for øynene og visjonen-gruppen), var det mulig å teste effekten av visuelle bilder; og ved å inkludere en eksperimentell gruppe med ingen visuell erfaring og omfattende taktil erfaring (dvs. blind-gruppen) og en eksperimentell gruppe med omfattende visuell erfaring og ingen taktil opplevelse (dvs. bind for øynene-gruppen), var det mulig å teste effekten av treningen i å legge merke til taktile-hørbar regelmessigheter. Resultatene tyder tydelig på at bind for øynene er tegnet på visuelle bilder for å løse nye problemer med taktile, men ikke på lang sikt (eksperiment 1 – 3); at opplæring i merke Bouba/Kiki form-lyd regelmessigheter påvirket taktile/visuell-hørbar Bouba/Kiki-effekt (eksperiment 1) og anerkjennelse av individuelle taktile/visuell Bouba og Kiki figurer [dvs. sammen med congruous lyd (eksperiment 2)] , men forskjellig i hver eksperimentell gruppe (Experiment 1-2), og at alle eksperimentelle grupper skapte mentale bilder av de mest karakteristiske taktile/visuell-hørbar form funksjon av Bouba (kurve) og Kiki [(vinkel) eksperiment 3. CF. tabell 1; Tabell 2; Tabell 3]17. Videre, ved å inkludere gjentatte innen-gruppe tiltak for umiddelbar og langsiktig effekt (Experiment 1-3), var det mulig å teste når effekten av visuelle bilder og læring form-lyd regelmessigheter faktisk skjedde; og ved å inkludere tre forskjellige oppgaver (dvs. den taktile/visuell-hørbar Bouba/Kiki-effekt i eksperiment 1, gjenkjenne individuelle taktile/visuelle Bouba/Kiki figurer sammen med congruous og urimelig lyd i eksperiment 2, og tegning mentale bilder av Bouba/Kiki lyd i eksperiment 3), for å teste hvor robust disse effektene var. Resultatene tyder tydelig på at effekten av visuelle bilder ikke var robust lang sikt i hver oppgave, spesielt ved bruk av Haptic berøring [jf bind for øynene (eksperiment 1-3)]; mens effekten av læring form-lyd regelmessigheter var, men ikke på tvers av oppgaver [jf den blinde og visjon-gruppen (Experiment 1-3). CF. tabell 1; Tabell 2; Tabell 3.] 17 i

Discussion

Den presenterte protokollen er hensiktsmessig for å undersøke effekten av visuelle bilder og læring form-lyd regelmessigheter, når de oppstår og hvor robuste de er; i bestemte individer og grupper av individer.

Denne protokollen vil være hensiktsmessig for testing ikke bare nøyaktigheten, men også leting tid: fra når eksperimentator fjerner sin venstre hånd fra deltakerens nevene (i blinde og bind for øynene)/kartong plate eller skum bord (i visjon-gruppe) til når deltakeren sier "ja". I statistiske analyser vil den lengste lete tiden per forsøksgruppe deles inn i fire, og antallet "raske", "middels" og "langsomme" deltakere i hver eksperiment gruppe telles: ' fast ' ved å bruke ≤ 25% av denne lete tiden, ' medium ' med 26-75% og ' langsom ' med ≥ 75%. På tvers av forsøkene telles deltakerne som i eksperiment 2: det vil si som "raskt" Hvis det telles som "raskt" i ≥ 66,6% av alle forsøk, som "medium" Hvis det regnes som "medium" i ≥ 66,6% av alle forsøk, og så videre. (For "ikke-entydige", det vil si at deltakeren ikke kan telles som "rask", "middels" eller "langsom", jf. eksperiment 3.) Det ville være mulig å teste lete tiden for korrekte og uriktige svar separat, avhengig av utvalgsstørrelse og/eller antall korrekte og gale svar. Enten testing nøyaktighet, leting tid eller begge, er det kritiske protokollen trinn som må følges: de tre forsøkene bør gjennomføres i fast rekkefølge, og deres prøvelser presentert i fast rekkefølge, for alle deltakere. Deltakerne bør ikke gjøres oppmerksomme på at test materialene i alle tre eksperimentene inkluderer Bouba og Kiki. Videre bør hørsels informasjon fra MP3-spilleren spilles bare én gang og ikke gjentas tilbake muntlig til deltakerne (alle tre eksperimenter). I eksperiment 1 og eksperiment 2 skal den taktile/visuelle Bouba og Kiki presenteres i samme posisjon og orientering. For Vision-gruppen (i alle tre eksperimenter), bør test materialene settes opp bak en kartong plate/skum bord. Til slutt, i bind for øynene, bør deltakerne ikke fjerne bind for øynene før eksperiment 3 er fullført. Disse trinnene er å sikre at mengden og typen informasjon om den taktile/visuelle og hørsels Bouba og Kiki holdes under kontroll på tvers av alle eksperimentelle grupper. I tillegg er det avgjørende i eksperiment 2 å presentere hørsels Bouba/Kiki så snart deltakeren begynner å utforske den taktile/visuelle Bouba/Kiki. Dette vil sikre at multimodal (congruous eller urimelig) informasjon blir presentert. Videre vil denne protokollen også være hensiktsmessig for å teste andre grupper av individer. For å integrere disse kan slike deltakergrupper legges til som separate eksperimentelle grupper: for eksempel, en farge persepsjon-gruppe og en form persepsjon-gruppe; 22 en plutselig visjonstap-gruppe og en progressiv visjon tap-gruppe; 20 priser og , 21 og/eller bestemte grupper av individer med nedsatt hørsel og/eller en Autism Spectrum Disorder13 kan legges til.

Med denne protokollen, vil det være mulig å etablere en gruppe norm (for nøyaktighet og/eller leting tid) for bestemte grupper på hver Instant og lang sikt effekt, inkludert hver gjentatt innenfor-gruppe mål, og/eller oppgave; deretter å teste individer mot deres gruppe norm: om noen bestemt individ eller hele gruppen har behov for ytterligere opplæring i å legge merke til form-Audio regelmessigheter. En gruppe norm for hver øyeblikkelige og langsiktige effekt, inkludert hver gjentatt innenfor-gruppe mål, og/eller oppgave vil også gjøre det mulig å avgjøre hva slags trening er nødvendig å legge merke til form-lyd regelmessigheter: for eksempel, flere forsøk med den taktile/ visuell-hørbar Bouba/Kiki-effekt (eksperiment 1) og/eller flere forsøk med congruous og urimelig taktil/visuell form og lyd (eksperiment 2). Faktisk vil det være mulig å øke både antall forsøk og antall gjentatte innen-gruppe tiltak i hver oppgave, samt endre tiden mellom dem, og dermed gir mer individualisert opplæring og testing.

Imidlertid ville denne protokollen må endre hvis testing hva slags materialer (f. eks Bouba eller Kiki, fylt eller skissert taktile/visuell form, og/eller hørbar lyd eller ord) best sikrer læring av form-lyd regelmessigheter. En mulig måte å endre denne protokollen kan innebære å presentere de ulike materialene i blokker: for eksempel, fylte taktile/visuelle former og hørbar lyd og/eller skissert taktile/visuelle former og hørbar ord (eksperiment 1). Disse blokkene kan bli presentert i tilfeldig rekkefølge til alle deltakerne i en eksperimentell gruppe; eller alternativt, hver og en av de fire blokkene for å skille eksperimentelle grupper (eksperiment 1). Denne protokollen må også endres hvis testing enda mer robusthet av visuelle bilder og/eller lært form-Audio regelmessigheter innenfor og på tvers av oppgaver. Endringen kan innebære å legge gjentatte innenfor-gruppe tiltak med ulik taktil/visuell form og/eller lyd enn de som er inkludert i opplæringen; for eksempel med hørbar lyd for ' MAA-Boo-MAA ' og ' tuh-Kee-tee ' etter trening med taktile/visuell Bouba og Kiki figurer og hørbar ord (eksperiment 1)1,3,4,10, 11 flere , 12 flere , 13 på alle , 14 priser og priser , 15 priser og , 16. et annet alternativ kan innebære å presentere en tredje taktil/visuell form som ikke er hovedsakelig buet/kantete sammen med den taktile/visuelle Bouba og Kiki figurer i eksperiment 110,11,12 ,13,14,15,16. En hørbar tull ord og en lyd kan være skapt for denne taktile/visuell form til å produsere en tredje figur-Word pair14,15,16 og en tredje form-lyd pair17 (eksperiment 1). Form-lyd paret kan da bli inkludert i eksperiment 2 som fangst-forsøk; eller alternativt som vanlig congruous prøvelser og med tilsvarende urimelig prøvelser. Til slutt kan lyden (fra eksperiment 2 og eksperiment 1) og/eller det tullet ordet (fra eksperiment 1) bli presentert i eksperiment 3. Et tredje alternativ kan innebære ikke gjennomføre eksperiment 2 og eksperiment 3 i det hele tatt, men heller inkludert dem som oppgaver i den gjentatte innenfor-gruppen tiltak i eksperiment 1, i tilfeldig rekkefølge.

Den presenterte protokollen er unik ved at den holder under kontroll både visuelle bilder og sensorisk informasjon under trening og testing. Det er fleksibelt: store og små prøver og bestemte individer kan testes mot seg selv (jf. innenfor gruppe testingen) og/eller andre grupper av individer (jf. mellom-gruppe-testing). Det er mulig å teste både nøyaktighet og leting tid, endre antall forsøk og gjentatt innenfor-gruppen tiltak i hvert eksperiment og tiden mellom dem, og endre eller til og med kollapse rekkefølgen av prøvelser og/eller eksperimenter.

Disclosures

Forfatterne har ingenting å avsløre.

Acknowledgments

Organer:
Dette arbeidet ble finansiert av EUs Horizon 2020 forsknings-og innovasjonsprogram under Marie Sklodowska-Curie Actions (gi avtalenummer 657440) og den norske og svaksynte foreningen.

Film makeup:
Makeup artist Rachael Parrey.

Materials

Name Company Catalog Number Comments
Bouba/kiki filled 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki outlined 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki sound (sine wave)
Bouba/kiki word (human voice)
Carton plate/foam board for covering bouba/kiki (white) Ryman 230461860 297 mm horizontal x 210 vertical 0 mm vertical
Copy paper [white (80 g/m2 )] Ryman 250030000 210 mm horizontal x 148 mm vertical
Foam board for bouba/kiki picture cards [white (5 mm thick)] Ryman 230461860 50 mm horizontal x 50 mm vertical
MP3-player (smartphone with the VLC app for iOS installed) Carphone Warehouse
Plastic embossing film RNIB Shop ZM04 210 mm horizontal x 148 mm vertical
Rollerball pen [black (1.0 mm tip)] Ryman 827134001
Rubber mat RNIB Shop LC177 230 mm horizontal x 150 mm vertical
Saddleback style RNIB Shop B511
Swell paper Zychem Ltd Zytex2 paper 50 mm horizontal x 50 mm vertical

DOWNLOAD MATERIALS LIST

References

  1. Ramachandran, V. S., Hubbard, E. M. Synaesthesia - A Window Into Perception, Thought and Language. Journal of Consciousness Studies. 8 (12), 3-34 (2001).
  2. Bremner, A. J., Caparos, S., Davidoff, J., de Fockert, J., Linnell, K. J., Spence, C. Bouba’’and ‘‘Kiki’’ in Namibia? A remote culture make similar sound-shape matches, but different taste-shape matches to Westerners. Cognition. 126 (2), 165-172 (2013).
  3. Davis, R. The fitness of names to drawings. A cross-cultural study in Tanganyika. British Journal of Psychology. 52 (3), 259-268 (1961).
  4. Maurer, D., Pathman, T., Mondloch, C. J. The shape of boubas: sound-shape correspondences in toddlers and adults. Developmental Science. 9 (3), 316-322 (2006).
  5. Ozturk, O., Krehm, M., Vouloumanos, A. Sound-symbolism in infancy: Evidence for sound-Shape cross-modal correspondences in 4-months-olds. Journal of Experimental Child Psychology. 114 (2), 173-186 (2013).
  6. Bar, M., Neta, M. Humans Prefer Curved Visual Objects. Psychological Science. 17 (8), 645-648 (2006).
  7. Bertamini, M., Palumbo, L., Gheorghes, T. N., Galatsidas, M. Do observers like curvature or do they dislike angularity? British Journal of Psychology. 107 (1), 154-178 (2016).
  8. Quinn, P. C., Brown, C. R., Streppa, M. L. Perceptual Organization of Complex Visual Configurations by Young Infants. Infant Behavior and Development. 20 (1), 35-46 (1997).
  9. Silvia, P. J., Barona, C. M. Do people prefer curved objects? Angularity, expertise, and aesthetic preference. Empirical Studies of the Arts. 27 (1), 25-42 (2009).
  10. Nielsen, A., Rendall, D. The Sound of Round: Evaluating the Sound-Symbolic Role of Consonants in the Classic Takete-Maluma Phenomenon. Canadian Journal of Experimental Psychology. 65 (2), 115-124 (2011).
  11. D’Onofrio, A. Phonetic Detail and Dimensionality in Sound-shape Correspondences: Refining the Bouba-Kiki Paradigm. Language and Speech. 57 (3), 367-393 (2014).
  12. Westbury, C., Hollis, G., Sidhu, D. M., Pexman, P. M. Weighing up the evidence for sound symbolism: Distributional properties predict cue strength. Journal of Memory and Language. 99, 122-150 (2018).
  13. Oberman, L. M., Ramachandran, V. S. Preliminary evidence for deficits in multisensory integration in autism spectrum disorders: The mirror neuron hypothesis. Social Neuroscience. 3 (3-4), 348-355 (2008).
  14. Köhler, W. Gestalt psychology. , Liveright. New York, NY. (1929).
  15. Monaghan, P., Mattock, K., Walker, P. The Role of Sound Symbolism in Language Learning. Journal of Experimental Psychology: Learning, Memory, and Cognition. 38 (5), 1152-1164 (2012).
  16. Fort, M., Martin, A., Peperkamp, S. Consonants are More Important than Vowels in the Bouba-kiki Effect. Language and Speech. 58 (2), 247-266 (2015).
  17. Graven, T., Desebrock, C. Bouba or kiki with and without vision: Shape-audio regularities and mental images. Acta Psychologica. 188, 200-212 (2018).
  18. Fryer, L., Freeman, J., Pring, L. Touching words is not enough: How visual experience influences haptic-auditory associations in the “Bouba-Kiki” effect. Cognition. 132 (2), 164-173 (2014).
  19. Fontana, F. Association of Haptic Trajectories to Takete and Maluma. Lecture Notes in Computer Science. 7989, 60-68 (2013).
  20. Graven, T. How blind individuals discriminate braille characters: An identification and comparison of three discrimination strategies. British Journal of Visual Impairment. 33 (2), 80-95 (2015).
  21. Graven, T. How attention is allocated when using haptic touch: Shape feature distinction and discrimination strategy. EuroHaptics 2016, Part 1. Bello, F., Kajimoto, H., Visell, Y. , Springer International Publishing AG. Switzerland, Heidelberg. Part of the Lecture Notes in Computer Science book series (LNCS, volume 9774) 380-393 (2016).
  22. WHO. ICD-10 version: 2016 (International Statistical Classification of Diseases and Related Health Problems 10th revision). Chapter VII Diseases of the eye and adnexa (H00-H59). , Available from: http://apps.who.int/classifications/icd10/browse/2016/en#/H53-H54 (2019).
  23. Heller, M. A., Calcaterra, J. A., Burson, L. L., Tyler, L. A. Tactual picture identification by blind and sighted people: Effects of providing categorical information. Perception & Psychophysics. 58 (2), 310-323 (1996).
  24. Heller, M. A., Gentaz, E. Psychology of Touch and Blindness. , Psychology Press. New York, NY and Hove, East Sussex. (2014).
  25. Pathak, K., Pring, L. Tactual picture recognition in congenitally blind and sighted children. Applied Cognitive Psychology. 3 (4), 337-350 (1989).

Tags

Atferd Bouba/Kiki-effekt crossmodal Haptic touch hørsel læringseffekt mental bilde multimodal sensoriske regelmessigheter form anerkjennelse form-lyd regelmessigheter visjon visuelle bilder
Gransker effekten av visuelle bilder og læring Shape-Audio regelmessigheter på Bouba og Kiki
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Graven, T., Desebrock, C.… More

Graven, T., Desebrock, C. Investigating the Effect of Visual Imagery and Learning Shape-Audio Regularities on Bouba and Kiki. J. Vis. Exp. (151), e59954, doi:10.3791/59954 (2019).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter