Name: Badanie wpływu obrazów wizualnych i uczenia się prawidłowości dźwiękowych kształtów na boubę i kiki (Wideo) | JoVE Journal
Uploaded: 2019-09-13T14:30:00.000+00:00
Duration: 7 min 31 s
Description: Poznaj wpływ obrazów wizualnych na efekt bouba/kiki w badaniach neurokognitywnych. Protokół ocenia rozpoznawanie kształtów dźwiękowych u osób z różnym doświadczeniem zmysłowym.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

Fundatorzy: 
Prace zostały sfinansowane przez program Unii Europejskiej w zakresie badań naukowych i innowacji Horyzont 2020 w ramach działań "Maria Skłodowska-Curie" (umowa o grant nr 657440) oraz Norweskie Stowarzyszenie Niewidomych i Słabowidzących. 
 
Makijaż filmowy: 
Wizażystka Rachael Parrey.

<ol><li>Ramachandran, V. S., Hubbard, E. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Synaesthesia+-+A+Window+Into+Perception%2C+Thought+and+Language%5BTitle%5D)+AND+%22Journal+of+Consciousness+Studies%22%5BJournal%5D)">Synaesthesia - A Window Into Perception, Thought and Language.</a> Journal of Consciousness Studies. 8 (12), 3-34 (2001).</li>
<li>Bremner, A. J., Caparos, S., Davidoff, J., de Fockert, J., Linnell, K. J., Spence, C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Bouba%E2%80%99%E2%80%99and+%E2%80%98%E2%80%98Kiki%E2%80%99%E2%80%99+in+Namibia%3F+A+remote+culture+make+similar+sound-shape+matches%2C+but+different+taste-shape+matches+to+Westerners%5BTitle%5D)+AND+%22Cognition%22%5BJournal%5D)">Bouba’’and ‘‘Kiki’’ in Namibia? A remote culture make similar sound-shape matches, but different taste-shape matches to Westerners.</a> Cognition. 126 (2), 165-172 (2013).</li>
<li>Davis, R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+fitness+of+names+to+drawings.+A+cross-cultural+study+in+Tanganyika%5BTitle%5D)+AND+%22British+Journal+of+Psychology%22%5BJournal%5D)">The fitness of names to drawings. A cross-cultural study in Tanganyika.</a> British Journal of Psychology. 52 (3), 259-268 (1961).</li>
<li>Maurer, D., Pathman, T., Mondloch, C. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+shape+of+boubas%3A+sound-shape+correspondences+in+toddlers+and+adults%5BTitle%5D)+AND+%22Developmental+Science%22%5BJournal%5D)">The shape of boubas: sound-shape correspondences in toddlers and adults.</a> Developmental Science. 9 (3), 316-322 (2006).</li>
<li>Ozturk, O., Krehm, M., Vouloumanos, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Sound-symbolism+in+infancy%3A+Evidence+for+sound-Shape+cross-modal+correspondences+in+4-months-olds%5BTitle%5D)+AND+%22Journal+of+Experimental+Child+Psychology%22%5BJournal%5D)">Sound-symbolism in infancy: Evidence for sound-Shape cross-modal correspondences in 4-months-olds.</a> Journal of Experimental Child Psychology. 114 (2), 173-186 (2013).</li>
<li>Bar, M., Neta, M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Humans+Prefer+Curved+Visual+Objects%5BTitle%5D)+AND+%22Psychological+Science%22%5BJournal%5D)">Humans Prefer Curved Visual Objects.</a> Psychological Science. 17 (8), 645-648 (2006).</li>
<li>Bertamini, M., Palumbo, L., Gheorghes, T. N., Galatsidas, M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Do+observers+like+curvature+or+do+they+dislike+angularity%3F%5BTitle%5D)+AND+%22British+Journal+of+Psychology%22%5BJournal%5D)">Do observers like curvature or do they dislike angularity?</a> British Journal of Psychology. 107 (1), 154-178 (2016).</li>
<li>Quinn, P. C., Brown, C. R., Streppa, M. L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Perceptual+Organization+of+Complex+Visual+Configurations+by+Young+Infants%5BTitle%5D)+AND+%22Infant+Behavior+and+Development%22%5BJournal%5D)">Perceptual Organization of Complex Visual Configurations by Young Infants.</a> Infant Behavior and Development. 20 (1), 35-46 (1997).</li>
<li>Silvia, P. J., Barona, C. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Do+people+prefer+curved+objects%3F+Angularity%2C+expertise%2C+and+aesthetic+preference%5BTitle%5D)+AND+%22Empirical+Studies+of+the+Arts%22%5BJournal%5D)">Do people prefer curved objects? Angularity, expertise, and aesthetic preference.</a> Empirical Studies of the Arts. 27 (1), 25-42 (2009).</li>
<li>Nielsen, A., Rendall, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+Sound+of+Round%3A+Evaluating+the+Sound-Symbolic+Role+of+Consonants+in+the+Classic+Takete-Maluma+Phenomenon%5BTitle%5D)+AND+%22Canadian+Journal+of+Experimental+Psychology%22%5BJournal%5D)">The Sound of Round: Evaluating the Sound-Symbolic Role of Consonants in the Classic Takete-Maluma Phenomenon.</a> Canadian Journal of Experimental Psychology. 65 (2), 115-124 (2011).</li>
<li>D’Onofrio, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Phonetic+Detail+and+Dimensionality+in+Sound-shape+Correspondences%3A+Refining+the+Bouba-Kiki+Paradigm%5BTitle%5D)+AND+%22Language+and+Speech%22%5BJournal%5D)">Phonetic Detail and Dimensionality in Sound-shape Correspondences: Refining the Bouba-Kiki Paradigm.</a> Language and Speech. 57 (3), 367-393 (2014).</li>
<li>Westbury, C., Hollis, G., Sidhu, D. M., Pexman, P. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Weighing+up+the+evidence+for+sound+symbolism%3A+Distributional+properties+predict+cue+strength%5BTitle%5D)+AND+%22Journal+of+Memory+and+Language%22%5BJournal%5D)">Weighing up the evidence for sound symbolism: Distributional properties predict cue strength.</a> Journal of Memory and Language. 99, 122-150 (2018).</li>
<li>Oberman, L. M., Ramachandran, V. S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Preliminary+evidence+for+deficits+in+multisensory+integration+in+autism+spectrum+disorders%3A+The+mirror+neuron+hypothesis%5BTitle%5D)+AND+%22Social+Neuroscience%22%5BJournal%5D)">Preliminary evidence for deficits in multisensory integration in autism spectrum disorders: The mirror neuron hypothesis.</a> Social Neuroscience. 3 (3-4), 348-355 (2008).</li>
<li>Köhler, W. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aK%C3%B6hler%2C+W+%22Gestalt+psychology%22">Gestalt psychology</a>. , Liveright. New York, NY. (1929).</li>
<li>Monaghan, P., Mattock, K., Walker, P. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+Role+of+Sound+Symbolism+in+Language+Learning%5BTitle%5D)+AND+%22Journal+of+Experimental+Psychology%3A+Learning%2C+Memory%2C+and+Cognition%22%5BJournal%5D)">The Role of Sound Symbolism in Language Learning.</a> Journal of Experimental Psychology: Learning, Memory, and Cognition. 38 (5), 1152-1164 (2012).</li>
<li>Fort, M., Martin, A., Peperkamp, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Consonants+are+More+Important+than+Vowels+in+the+Bouba-kiki+Effect%5BTitle%5D)+AND+%22Language+and+Speech%22%5BJournal%5D)">Consonants are More Important than Vowels in the Bouba-kiki Effect.</a> Language and Speech. 58 (2), 247-266 (2015).</li>
<li>Graven, T., Desebrock, C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Bouba+or+kiki+with+and+without+vision%3A+Shape-audio+regularities+and+mental+images%5BTitle%5D)+AND+%22Acta+Psychologica%22%5BJournal%5D)">Bouba or kiki with and without vision: Shape-audio regularities and mental images.</a> Acta Psychologica. 188, 200-212 (2018).</li>
<li>Fryer, L., Freeman, J., Pring, L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Touching+words+is+not+enough%3A+How+visual+experience+influences+haptic-auditory+associations+in+the+%E2%80%9CBouba-Kiki%E2%80%9D+effect%5BTitle%5D)+AND+%22Cognition%22%5BJournal%5D)">Touching words is not enough: How visual experience influences haptic-auditory associations in the “Bouba-Kiki” effect.</a> Cognition. 132 (2), 164-173 (2014).</li>
<li>Fontana, F. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Association+of+Haptic+Trajectories+to+Takete+and+Maluma%5BTitle%5D)+AND+%22Lecture+Notes+in+Computer+Science%22%5BJournal%5D)">Association of Haptic Trajectories to Takete and Maluma.</a> Lecture Notes in Computer Science. 7989, 60-68 (2013).</li>
<li>Graven, T. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((How+blind+individuals+discriminate+braille+characters%3A+An+identification+and+comparison+of+three+discrimination+strategies%5BTitle%5D)+AND+%22British+Journal+of+Visual+Impairment%22%5BJournal%5D)">How blind individuals discriminate braille characters: An identification and comparison of three discrimination strategies.</a> British Journal of Visual Impairment. 33 (2), 80-95 (2015).</li>
<li>Graven, T. How attention is allocated when using haptic touch: Shape feature distinction and discrimination strategy. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aGraven%2C+T+%22EuroHaptics+2016%2C+Part+1%22">EuroHaptics 2016, Part 1</a>. Bello, F., Kajimoto, H., Visell, Y. , Springer International Publishing AG. Switzerland, Heidelberg. Part of the Lecture Notes in Computer Science book series (LNCS, volume 9774) 380-393 (2016).</li>
<li>WHO. ICD-10 version: 2016 (International Statistical Classification of Diseases and Related Health Problems 10th revision). Chapter VII Diseases of the eye and adnexa (H00-H59). , Available from:
 <a target="_blank" href="http://apps.who.int/classifications/icd10/browse/2016/en#/H53-H54">http://apps.who.int/classifications/icd10/browse/2016/en#/H53-H54</a> (2019).</li>
<li>Heller, M. A., Calcaterra, J. A., Burson, L. L., Tyler, L. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Tactual+picture+identification+by+blind+and+sighted+people%3A+Effects+of+providing+categorical+information%5BTitle%5D)+AND+%22Perception+%26+Psychophysics%22%5BJournal%5D)">Tactual picture identification by blind and sighted people: Effects of providing categorical information.</a> Perception & Psychophysics. 58 (2), 310-323 (1996).</li>
<li>Heller, M. A., Gentaz, E. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aHeller%2C+MA+%22Psychology+of+Touch+and+Blindness%22">Psychology of Touch and Blindness</a>. , Psychology Press. New York, NY and Hove, East Sussex. (2014).</li>
<li>Pathak, K., Pring, L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Tactual+picture+recognition+in+congenitally+blind+and+sighted+children%5BTitle%5D)+AND+%22Applied+Cognitive+Psychology%22%5BJournal%5D)">Tactual picture recognition in congenitally blind and sighted children.</a> Applied Cognitive Psychology. 3 (4), 337-350 (1989).</li>
</ol>

Autorzy nie mają nic do ujawnienia.

Przedstawiony protokół jest odpowiedni do badania wpływu obrazowania wizualnego i uczenia się prawidłowości kształtowo-dźwiękowych, kiedy występują i jak bardzo są wytrzymałe; u konkretnych osób i grup osób.
Protokół ten byłby odpowiedni do testowania nie tylko dokładności, ale także czasu eksploracji: od momentu, gdy eksperymentator zdejmie lewą rękę z pięści uczestnika (w grupie ślepej i z zawiązanymi oczami) / kartonowej płyty lub piankowej tablicy (w grupie wizyjnej) do momentu, gdy uczestnik powie "tak". W analizach statystycznych najdłuższy czas eksploracji na próbę na grupę eksperymentalną zostanie podzielony na cztery, a liczba "szybkich", "średnich" i "wolnych" uczestników w każdej grupie eksperymentalnej zostanie policzona: "Szybko" przy użyciu ≤25% tego czasu eksploracji, "Średni" przy użyciu 26-75% i "Wolny" przy użyciu ≥75%. We wszystkich badaniach uczestnicy byliby liczeni jak w eksperymencie 2: to znaczy jako "szybcy", jeśli byliby liczeni jako "szybcy" w ≥66,6% wszystkich prób, jako "średni", jeśli byliby liczeni jako "średni" w ≥66,6% wszystkich prób i tak dalej. (Dla "niejednoznacznego", tj. uczestnika nie można zaliczyć do "szybkiego", "średniego" lub "wolnego", por. Eksperyment 3.) Możliwe byłoby badanie czasu eksploracji dla poprawnych i nieprawidłowych odpowiedzi oddzielnie, w zależności od wielkości próby i/lub liczby poprawnych i nieprawidłowych odpowiedzi. Niezależnie od tego, czy chodzi o dokładność testów, czas eksploracji, czy jedno i drugie, istnieją krytyczne kroki protokołu, których należy przestrzegać: Trzy eksperymenty powinny być przeprowadzone w ustalonej kolejności, a ich próby powinny być przedstawione w ustalonej kolejności dla wszystkich uczestników. Uczestnicy nie powinni być świadomi, że materiały testowe we wszystkich trzech eksperymentach obejmują bouba i kiki. Co więcej, informacje słuchowe z odtwarzacza MP3 powinny być odtwarzane tylko raz i nie powinny być powtarzane ustnie uczestnikom (wszystkie trzy eksperymenty). W Eksperymencie 1 i Eksperymencie 2 dotykowo-wzrokowe bouba i kiki powinny być przedstawione w tej samej pozycji i orientacji. W przypadku grupy wizyjnej (we wszystkich trzech eksperymentach) materiały testowe powinny być umieszczone za płytą kartonową/tekturą piankową. Wreszcie, w grupie z opaską na oczy, uczestnicy nie powinni zdejmować opaski z oczu, dopóki Eksperyment 3 nie zostanie zakończony. Kroki te mają na celu zapewnienie, że ilość i rodzaj informacji o dotykowo-wzrokowych i słuchowych bouba i kiki jest utrzymywana pod kontrolą we wszystkich grupach eksperymentalnych. Ponadto w eksperymencie 2 kluczowe jest zaprezentowanie słuchowej bouby/kiki, gdy tylko uczestnik zacznie eksplorować dotykowo-wzrokową boubę/kiki. Zapewni to prezentację informacji multimodalnych (zgodnych lub niezgodnych). Co więcej, protokół ten byłby również odpowiedni do testowania innych grup osób. Aby je zintegrować, takie grupy uczestników można dodać jako oddzielne grupy eksperymentalne: na przykład grupa percepcji kolorów i grupa percepcji kształtów; 22 grupa nagłej utraty wzroku i grupa postępującej utraty wzroku; Można dodać 20,21 i/lub określone grupy osób z upośledzeniem słuchu i/lub zaburzeniami ze spektrum autyzmu13.
Dzięki temu protokołowi możliwe byłoby ustalenie normy grupowej (dla dokładności i/lub czasu eksploracji) dla określonych grup w odniesieniu do każdego natychmiastowego i długoterminowego efektu, w tym każdego powtórzonego pomiaru wewnątrzgrupowego i/lub zadania; Następnie, aby przetestować jednostki w stosunku do ich normy grupowej: Czy jakaś poszczególna osoba lub cała grupa potrzebuje dalszego treningu w dostrzeganiu prawidłowości dźwiękowych kształtów. Norma grupowa dla każdego natychmiastowego i długoterminowego efektu, obejmująca każdy powtórzony pomiar wewnątrzgrupowy i/lub zadanie, umożliwiłaby również określenie, jakiego rodzaju trening jest potrzebny, aby zauważyć prawidłowości kształtu dźwięku: Na przykład więcej prób z dotykowym/wzrokowo-słuchowym efektem bouba/kiki (Eksperyment 1) i/lub więcej prób z przystającym i nieprzystającym dotykowym/wizualnym kształtem i dźwiękiem (Eksperyment 2). Rzeczywiście, możliwe byłoby zwiększenie zarówno liczby prób, jak i liczby powtórzonych pomiarów wewnątrzgrupowych w każdym zadaniu, a także zmiana czasu między nimi, co pozwoliłoby na bardziej zindywidualizowane szkolenie i testowanie.
Protokół ten wymagałby jednak modyfikacji, jeśli testowanie, jaki rodzaj materiałów (np. bouba lub kiki, wypełniony lub zarysowany kształt dotykowy/wizualny i/lub dźwiękowy dźwięk lub słowo) najlepiej zapewnia naukę prawidłowości dźwięku kształtu. Możliwym sposobem modyfikacji tego protokołu może być przedstawienie różnych materiałów w blokach: na przykład wypełnione kształty dotykowe/wizualne i dźwięki słuchowe i/lub zarysowane kształty dotykowe/wizualne i słowo słuchowe (Eksperyment 1). Bloki te można było prezentować w losowej kolejności wszystkim uczestnikom w jednej grupie eksperymentalnej; lub alternatywnie, każdy z czterech bloków, aby oddzielić grupy eksperymentalne (Eksperyment 1). Protokół ten wymagałby również modyfikacji, gdyby testowano jeszcze bardziej solidność obrazów wizualnych i/lub wyuczonych prawidłowości kształtu dźwięku w ramach zadań i między nimi. Modyfikacja może polegać na dodaniu powtarzających się działań w obrębie grupy o innym kształcie dotykowym/wizualnym i/lub dźwiękowym niż te uwzględnione w szkoleniu; na przykład z dźwiękiem słuchowym dla "maa-boo-maa" i "tuh-kee-tee" po treningu z dotykowymi/wizualnymi kształtami bouba i kiki oraz słowami słuchowymi (Eksperyment 1)1,3,4,10,11,12,13,14,15,16 . Inną opcją może być przedstawienie trzeciego kształtu dotykowego/wizualnego, który nie jest głównie zakrzywiony/kanciasty, wraz z dotykowymi/wizualnymi kształtami bouba i kiki w eksperymencie 1 10,11,12,13,14,15,16. Słuchowe słowo i dźwięk mogą zostać stworzone dla tego dotykowo-wizualnego kształtu, aby wytworzyć trzecią parę kształt-słowo14,15,16 i trzecią parę kształt-dźwięk17 (Eksperyment 1). Para kształt-dźwięk może być następnie włączona do Eksperymentu 2 jako próby złapania; lub alternatywnie jako regularne próby zgodne i z odpowiadającymi im próbami nieprzystającymi. Wreszcie, dźwięk (z Eksperymentu 2 i Eksperymentu 1) i/lub słowo nonsensowne (z Eksperymentu 1) mogą być prezentowane w Eksperymencie 3. Trzecia opcja mogłaby polegać na tym, że Eksperyment 2 i Eksperyment 3 nie zostałyby w ogóle przeprowadzone, ale raczej włączono je jako zadania do powtarzanych pomiarów wewnątrzgrupowych w Eksperymencie 1, w kolejności losowej.
Wyjątkowość przedstawionego protokołu polega na tym, że utrzymuje on pod kontrolą zarówno obrazy wizualne, jak i informacje sensoryczne podczas treningu i testów. Jest elastyczny: duże i małe próbki oraz konkretne osoby mogą być testowane przeciwko sobie (por. testy wewnątrzgrupowe) i/lub innym grupom osób (por. testy międzygrupowe). Możliwe jest testowanie zarówno dokładności, jak i czasu eksploracji, zmiana liczby prób i powtórzonych pomiarów wewnątrzgrupowych w każdym eksperymencie oraz czasu między nimi, a także zmiana lub nawet załamanie kolejności prób i/lub eksperymentów.

95% światowej populacji wykazuje słuchowo-wzrokowy efekt bouba/kiki, kojarząc wizualnie zaokrąglony kształt z wypowiadanym słowem 'bouba; ' oraz wizualnie kanciasty kształt z wypowiadanym słowem "kiki"; ' i robią to nawet wtedy, gdy nie mieli żadnego doświadczenia ani z kształtem, ani ze słowem1. Efekt bouba/kiki poprzedza naukę języka; Występuje we wszystkich językach1,2,3,4,5, zarówno z bouba, jak i kiki (por. preferencja ludzi dla krzywych wizualnych zamiast kątów widzenia6,7,8,9) i zależy to od kombinacji samogłosek i spółgłosek (np. nie występuje z 'bibi' i 'kuku').1,5,10,11,12. To skojarzenie kształt-słowo występuje również z innymi parami kształtów i słów, o ile są one głównie zakrzywione, jak bouba, i głównie kanciaste, jako kiki11,13; i/lub mają taką samą kombinację samogłosek i spółgłosek jak 'bouba' i 'kiki', na przykład: 'Baluma' i 'takete', 'maluma' i 'takete', 'uloomo' i 'takete', 'maa-boo-maa' i 'tuh-kee-tee'1,3,4,10,11,12,14. W rzeczywistości ludzie kojarzą zaokrąglone kształty wizualne z wypowiadanymi słowami zawierającymi ciągłe spółgłoski (takie jak /l/ i /m/) i otwarte samogłoski tylne (takie jak /ɑ:/ i /ɔ:/), a wizualne kształty kątowe z wypowiadanymi słowami zawierającymi spółgłoski spółgłoskowe (takie jak /k/ i /t/) oraz samogłoski bliskie z przodu (takie jak (/ε/ i /I/)11, 12,15,16. Większy wpływ mają na nie spółgłoski niż samogłoski, zwłaszcza te bezdźwięczne (np. /k/ i /t/)11,12,15,16. Rzeczywiście, wydaje się, że cechy globalnych kształtów – ich krzywe i kąty17 – oraz dźwięk wypowiadanych słów – ich melody17 – są najważniejsze, w przeciwieństwie do samych globalnych kształtów i słów.
Jedno z badań badało efekt bouba/kiki z dotykowymi kształtami bouba i kiki zamiast wizualnych kształtów bouba/kiki i stwierdziło, że uczestnicy, którzy byli niedowidzący, wykazywali znacznie mniej silny efekt bouba/kiki (~64%) niż osoby w pełni widzące (~90%)<klasa sup="xref">18. W badaniu tym stwierdzono, że znacznie mniej silny efekt bouba/kiki wśród uczestników, którzy byli niewidomi i niedowidzący, był spowodowany brakiem obrazów wizualnych: w pełni widzący uczestnicy zauważyli prawidłowości w swoim otoczeniu, które nie są łatwo dostępne, gdy wzrok jest upośledzony18. Z tego badania nie wynika jednak jasno, czy obrazowanie wizualne jest konieczne, aby wystąpił efekt bouba/kiki: tylko sześciu z 42 uczestników z wadą wzroku było od urodzenia całkowicie niewidomych18, a zatem w ogóle nie miało obrazów wizualnych. Co więcej, pozostali uczestnicy, żaden z nich nie miał zawiązanych oczu, mogli zaobserwować ruchy warg eksperymentatora podczas ogłaszania słowa bouba/kiki – zaokrąglone ruchy warg podczas ogłaszania "bouba" i kątowe ruchy warg podczas ogłaszania "kiki"1,18 – pokazujące dotykowo-wzrokowo-słuchowy efekt bouba/kiki, zamiast czerpać z jakichkolwiek wizualnych obrazów. Ponadto nie badano żadnego wpływu zauważania prawidłowości dotykowo-słuchowych, na przykład poprzez porównanie efektu bouba/kiki w badaniu pierwszym i czwartym, zamiast obliczenia efektu we wszystkich czterech badaniach. Co więcej, dotykowe bouba i kiki różniły się raczej w różnych próbach: w próbach pierwszej i drugiej były to kształty 3D i 2D (zakrzywione v kanciaste); W próbach trzeciej i czwartej, identyczne pod względem kształtu (okrąg) i różniące się teksturą (gładkie v szorstkie; gładkie v kolczaste)18. W podobnym duchu, w jednym z badań zbadano kinestetyczno-słuchowy efekt bouba/kiki u osób z zawiązanymi oczami (w pełni widzącymi) i stwierdzono, że po dwuminutowym okresie treningu trzymania robotycznego rysika zaprogramowanego do rysowania trajektorii kształtów bouba i kiki, 82% wykazało efekt bouba/kiki<klasa sup = "xref">19. Z tego badania nie wynika jednak jasno, czy efekt bouba/kiki wystąpił z powodu okresu treningowego: badanie nie obejmowało testu wstępnego ani grupy kontrolnej. 
W tym celu zbadaliśmy rolę obrazów wizualnych w efekcie bouba/kiki, czy trening w dostrzeganiu dotykowych/wzrokowo-słuchowych prawidłowości bouba i kiki wpłynął na efekt bouba/kiki i rozpoznawanie indywidualnych dotykowych/wizualnych kształtów bouba i kiki, i wreszcie, jakie obrazy mentalne wytworzyły te prawidłowości dźwiękowe kształtu17. Aby wygenerować prawidłowości dźwiękowe kształtu bouba/kiki – nie tylko, na przykład, specyfiki kiki-kształtu/kiki-słowa1 – badanie to obejmowało dwa rodzaje dotykowych/wizualnych kształtów bouba/kiki (wypełnione; zarysowane) oraz dwa rodzaje dźwiękowych bouba/kiki [audio (słowo; dźwięk niebędący słowem)]17. Trzy grupy osób wzięły udział w trzech eksperymentach: ślepym (N = 12), z opaską na oczy (N = 12) i ze wzrokiem (N = 12). Eksperymenty zostały przeprowadzone w ustalonej kolejności u wszystkich uczestników i bez przerw między nimi, aby utrzymać pod kontrolą ilość i rodzaj doświadczeń uczestników z bouba i kiki. W eksperymencie 1 (projekt pre-test-post-test z trzema powtórzonymi pomiarami w grupie) uczestnicy zostali poproszeni o wybranie dotykowego/wizualnego kształtu, który kojarzyli ze słuchowym bouba/kiki; w eksperymencie 2 (projektowanie wewnątrzobiektowe), aby wymienić jeden kształt dotykowy/wizualny i niektóre dźwięki (czasami zgodne, czasami nieprzystające) jako "bouba" lub "kiki"; ' i w eksperymencie 3 (projekt tylko po teście), aby narysować dotykowy/wizualny kształt, który skojarzyli ze słuchowym bouba/kiki17. Ogólnie rzecz biorąc, badanie to sugeruje, że efekt obrazów wizualnych jest solidny w różnych zadaniach, ale nie długoterminowo w każdym zadaniu, podczas gdy efekt uczenia się regularności dźwiękowych kształtów jest solidny długoterminowo w każdym zadaniu, ale nie między zadaniami17. W tym artykule przedstawiono protokół z tego badania17. Przedstawiony protokół jest odpowiedni do badania wpływu obrazowania wizualnego i uczenia się prawidłowości kształtowo-dźwiękowych, kiedy występują i jak bardzo są wytrzymałe; u konkretnych osób i grup osób. Wyjątkowość tego protokołu polega na tym, że utrzymuje pod kontrolą zarówno obrazy wizualne, jak i informacje sensoryczne podczas treningu i testów.

<table><tbody><tr>Wypełnione <td></td><td></td><td>boubą/kiki</td><td>30 mm w poziomie, 23 mm w pionie i 0,5 mm grubości m w pionie, 0,5 mm wysokości linii i 0,5 mm wytłoczonej wysokości</td></tr><tr><td>Bouba/kiki obrysowane</td><td></td><td></td><td>30 mm w poziomie, 23 mm w pionie i 0,5 mm grubości m w pionie, 0,5 mm wysokości linii i 0,5 mm wytłoczonej wysokości</td></tr><tr><td>Dźwięk Bouba/kiki (fala sinusoidalna)</td><td></td><td></td><td></td></tr><tr><td>Słowo Bouba/kiki (ludzki głos)</td><td></td><td></td><td></td></tr><tr><td>Płyta kartonowa/tektura piankowa do oklejania bouba/kiki (biała)</td><td>Ryman</td><td>230461860</td><td>297 mm poziomo x 210 pionowo 0 mm pionowo</td></tr><tr><td>Papier do kopiowania [biały (80 g/m2 )]Ryman</td><td></td> <td>250030000</td><td>210 mm poziomy x 148 mm pionowy</td></tr><tr><td>Płyta piankowa do kart obrazkowych bouba/kiki [biała (grubość 5 mm)]</td><td>Ryman</td><td>230461860</td><td>50 mm pozioma x 50 mm pionowa</td></tr><tr><td>Odtwarzacz MP3 (smartfon z zainstalowaną aplikacją VLC na iOS)</td><td>Magazyn</td><td></td><td></td>samochodowy</tr><tr><td>Folia do tłoczenia z tworzywa sztucznego</td><td>RNIB Sklep</td><td>ZM04</td><td>210 mm poziomo x 148 mm</td></tr><tr><td>pionowo Pióro kulkowe [czarne (końcówka 1,0 mm)]</td><td>Ryman</td><td>827134001</td><td></td></tr><tr><td>Mata gumowa</td><td>RNIB Shop</td><td>LC177</td><td>230 mm poziomo x 150 mm pionowo</td></tr><tr><td>Styl siodła</td><td>RNIB Sklep</td><td>B511</td><td></td></tr><tr><td>Papier pęczniejący</td><td>Zychem Sp. z o.o</td>. <td>Zytex2 papier</td><td>50 mm poziomy x 50 mm pionowy</td></tr></tbody></table>

badanie wpływu obrazów wizualnych i uczenia się prawidłowości dźwiękowych kształtów na boubę i kiki

Investigating the Effect of Visual Imagery and Learning Shape-Audio Regularities on Bouba and Kiki

Ten artykuł przedstawia protokół do badania roli obrazów wizualnych w efekcie bouba/kiki, czy trening w dostrzeganiu prawidłowości dźwiękowych kształtu bouba/kiki wpływa na efekt bouba/kiki i rozpoznawanie indywidualnych kształtów bouba i kiki, i w końcu, jakie obrazy mentalne wytwarzają te prawidłowości. Aby wygenerować prawidłowości dźwiękowe kształtu bouba/kiki, istniały dwa rodzaje kształtów (wypełnione; zarysowane) i dwa rodzaje dźwięku (słowo; dźwięk nie-słowny). Trzy grupy osób wzięły udział w trzech eksperymentach: ślepym, z opaską na oczy i z widzeniem. Eksperymenty zostały przeprowadzone w ustalonej kolejności u wszystkich uczestników, bez przerw między nimi. W eksperymencie 1 (projekt przed testem i po teście z trzema powtórzonymi pomiarami w grupie) uczestnicy zostali poproszeni o wybranie kształtu, który kojarzą im się ze słuchową boubą / kiki; w Eksperymencie 2 (projektowanie wewnątrzobiektowe), aby wymienić jeden kształt i niektóre dźwięki (czasami zgodne, czasami niestosowne) jako "bouba" lub "kiki"; ' i w eksperymencie 3 (projekt tylko po teście), aby narysować kształt, który kojarzyli ze słuchowym bouba/kiki. Wyniki sugerują, że grupa z opaską na oczach korzysta z obrazów wizualnych, aby rozwiązywać nowe problemy, ale nie w dłuższej perspektywie; że trening w dostrzeganiu prawidłowości dźwiękowych kształtów bouba/kiki wpływa na efekt bouba/kiki i rozpoznawanie indywidualnych kształtów bouba i kiki, ale inaczej w każdej grupie eksperymentalnej; i że wszystkie grupy eksperymentalne tworzą mentalne obrazy najbardziej charakterystycznej cechy kształtu bouba (krzywa) i kiki (kąt). W rzeczywistości efekt obrazów wizualnych jest solidny we wszystkich zadaniach, ale nie w dłuższej perspektywie; Efekt uczenia się prawidłowości dźwięku kształtu jest solidny w dłuższej perspektywie, ale nie między zadaniami. Przedstawiony protokół jest odpowiedni do badania wpływu obrazowania wizualnego i uczenia się prawidłowości kształtowo-dźwiękowych, kiedy występują i jak bardzo są wytrzymałe; u konkretnych osób i grup osób. Wyjątkowość tego protokołu polega na tym, że utrzymuje pod kontrolą zarówno obrazy wizualne, jak i informacje sensoryczne podczas treningu i testów.

Efekt bouba/kiki
Sześciu z 12 uczestników, którzy byli wrodzeni ślepi (50%), dziewięciu z 12 osób miało zawiązane oczy (75%) i 10 z 12, którzy byli w pełni widzący (~83%) wykazało natychmiastowy dotykowy/wzrokowo-słuchowy efekt bouba/kiki: Oznacza to, że zarówno grupa z opaską na oczy, jak i grupa wizyjna były znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 3,00, p = 0,08 i χ2(1. N = 12) = 5,33, p = 0,02 (Eksperyment 1, Próba 1)17. W dokładnym teście Fishera nie stwierdzono żadnej znaczącej różnicy między trzema grupami eksperymentalnymi (Eksperyment 1, test wstępny)17. (Por. Tabela 1.)
Jeśli chodzi o długoterminowy efekt dotykowy/wzrokowo-słuchowy bouba/kiki: W pierwszym powtórzonym pomiarze wewnątrz grupy, dziewięciu uczestników, którzy byli wrodzenie ślepi, wykazało efekt bouba/kiki, wraz z dziewięcioma w pełni widzącymi i siedmioma z zawiązanymi oczami: Grupa niewidomych i widzących znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 3,00, p = 0,08 i χ2(1. N = 12) = 3,00, p = 0,08 (Eksperyment 1, Próba 4)17. W drugim powtórzonym pomiarze wewnątrzgrupowym, 11 uczestników w grupie niewidomych i widzących wykazało dotykowy/wzrokowo-słuchowy efekt bouba/kiki: Obie grupy eksperymentalne były ponownie znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 8,33, p = 0,00 i χ2(1. N = 12) = 8,33, p = 0,00; i siedmiu w grupie z opaską na oczy (Eksperyment 1, Próba 5)17. Wreszcie, w trzecim powtórzonym pomiarze w grupie i po teście, dziewięciu z 12 uczestników, którzy byli wrodzeni ślepi (75%), sześciu z 12 uczestników, którzy mieli zawiązane oczy (50%) i wszyscy z 12 uczestników, którzy byli w pełni widzący (100%) wykazywali dotykowy/wzrokowo-słuchowy efekt bouba/kiki; Zarówno grupa niewidoma, jak i grupa widząca ponownie znacznie przekroczyła poziom szansy (50%): χ2(1. N = 12) = 3,00, p = 0,08 i χ2(1. N = 12) = 12,00, p = 0,00 (Eksperyment 1, Próba 8)17. Dokładny test Fishera wykazał istotną różnicę między grupą z opaską na oczy a grupą wizyjną [p = 0,01. (Eksperyment 1, po teście)]17. (Por. Tabela 1.)
<table border="1" fo:keep-together.within-page="1" fo:keep-with-next.within-page="always">
	<tbody>
		<tr>
			<td rowspan="2">Grupa uczestników</td>
			<td>Natychmiastowy efekt bouba/kiki</td>
			<td colspan="3">Długoterminowy efekt bouba/kiki</td>
		</tr>
		<tr>
			<td>Test wstępny</td>
			<td>Powtórzony zabieg 1</td>
			<td>Powtórzony środek 2</td>
			<td>Powtórzony pomiar 3/test końcowy</td>
		</tr>
		<tr>
			<td>ślepy</td>
			<td>50,0%</td>
			<td>75,0%</td>
			<td>91,7%</td>
			<td>75,0%</td>
		</tr>
		<tr>
			<td>Blindfold</td>
			<td>75,0%</td>
			<td>58,3%</td>
			<td>58,3%</td>
			<td>50,0%</td>
		</tr>
		<tr>
			<td>widzenie</td>
			<td>83,3%</td>
			<td>75,0%</td>
			<td>91,7%</td>
			<td>100,0%</td>
		</tr>
	</tbody>
</table>
Tabela 1: Natychmiastowy i długoterminowy efekt bouba/kiki
Rozpoznawanie kształtów bouba i kiki
Jedenaście z 12 uczestników, którzy byli wrodzenie ślepi (~92%), dziewięciu z 12, którzy mieli zawiązane oczy (75%) i wszyscy z 12, którzy byli w pełni widzący (100%) natychmiast rozpoznali zgodne dotykowo-wzrokowe i słuchowe bouba/kiki; wszystkie trzy grupy eksperymentalne były znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 8,33, p = 0,00, χ2(1. N = 12) = 3,00, p = 0,08 i χ2(1. N = 12) = 12,00, p = 0,00 (Eksperyment 2, Próba 1)17. (Por. Tabela 2.)
Długoterminowo, 11 uczestników w grupie niewidomych rozpoznało dotykowe kształty bouba/kiki razem z dźwiękiem konkurującym, a 10 uczestników z dźwiękiem niezgodnym: Oba typy zgodności rozpoznane znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 8,33, p = 0,00 i χ2(1. N = 12) = 5,33, p = 0,02 (Eksperyment 2, Próba 1-8)17. Dziewięcioro uczestników w grupie z opaską na oczach rozpoznało kształty dotykowe wraz z pasującym dźwiękiem, a ośmiu uczestników razem z niepasującym dźwiękiem; Innymi słowy, zgodny kształt i dźwięk były znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 3,00, p = 0,08 (Eksperyment 2, Próba 1-8)17. Wszystkich 12 uczestników w grupie wizyjnej rozpoznało wizualne kształty bouba/kiki wraz z konkurencyjnym dźwiękiem, a sześciu uczestników z niezgodnym dźwiękiem: Zgodny kształt i dźwięk rozpoznany znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 12,00, p = 0,00 (Eksperyment 2, Próba 1-8)17. (Por. Tabela 2.)
<table border="1" fo:keep-together.within-page="1" fo:keep-with-next.within-page="always">
	<tbody>
		<tr>
			<td rowspan="2">Grupa uczestników</td>
			<td>Natychmiastowe rozpoznawanie kształtu bouba/kiki</td>
			<td colspan="2">Długoterminowe rozpoznawanie kształtów bouba i kiki</td>
		</tr>
		<tr>
			<td>Spójny kształt i dźwięk</td>
			<td>Spójny kształt i dźwięk</td>
			<td>Niepasujący kształt i dźwięk</td>
		</tr>
		<tr>
			<td>ślepy</td>
			<td>91,7%</td>
			<td>91,7%</td>
			<td>83,3%</td>
		</tr>
		<tr>
			<td>Blindfold</td>
			<td>75,0%</td>
			<td>75,0%</td>
			<td>66,7%</td>
		</tr>
		<tr>
			<td>widzenie</td>
			<td>100,0%</td>
			<td>W 100%</td>
			<td>50,0%</td>
		</tr>
	</tbody>
</table>
Tabela 2: Natychmiastowe i długoterminowe rozpoznawanie kształtów bouba i kiki
Mentalne obrazy bouba i kiki
Ośmiu z 12 uczestników, którzy byli wrodzenie ślepi [~73% (z usuniętym jednym 'niejednoznacznym' rysunkiem uczestnika)], ośmiu z 12, którzy mieli zawiązane oczy [~89% (z usuniętymi trzema 'niejednoznacznymi' rysunkami uczestników)], i ośmiu z 12, którzy byli w pełni widzący [80% (z usuniętymi dwoma 'niejednoznacznymi' rysunkami uczestników)] natychmiast narysowało mentalny obraz: Kształt dotykowo-wizualny, który odpowiadał prezentowanemu dźwiękowemu bouba/kiki (Eksperyment 3, Próba 1)17. Zarówno grupa z opaską na oczy, jak i grupa wizyjna były znacznie powyżej poziomu szansy (50%): χ2(1. N = 9) = 5,44, p = 0,02 i χ2(1. N = 10) = 3,60, p = 0,06 (Eksperyment 3, Próba 1)17. (Por. tabela 3.)
Jeśli chodzi o długoterminowe obrazy mentalne bouba i kiki: 11 uczestników w grupie niewidomych, ośmiu w grupie z opaską na oczach i 12 w grupie wizyjnej narysowało dotykowe/wizualne kształty bouba/kiki, które odpowiadały prezentowanym dźwiękowym bouba/kiki (Eksperyment 3, Próba 1-4)17. Zarówno grupa niewidoma, jak i niedowidząca były znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 8,33, p = 0,00 i χ2(1. N = 12) = 12,00, p = 0,00 (Eksperyment 3, Próba 1-4)17. Dokładny test Fishera wykazał istotną różnicę między grupą z opaską na oczach a grupą z wizją [p = 0,09 (Eksperyment 3, Próba 1-4)]17. (Por. tabela 3.)
<table border="1" fo:keep-together.within-page="1" fo:keep-with-next.within-page="always">
	<tbody>
		<tr>
			<td>Grupa uczestników</td>
			<td>Natychmiastowy obraz mentalny bouba/kiki</td>
			<td>Długoterminowe obrazy mentalne bouba i kiki</td>
		</tr>
		<tr>
			<td>ślepy</td>
			<td>72,7 proc</td>.
			<td>91,7%</td>
		</tr>
		<tr>
			<td>Blindfold</td>
			<td>88,9%</td>
			<td>66,7%</td>
		</tr>
		<tr>
			<td>widzenie</td>
			<td>80,0 %</td>
			<td>100,0%</td>
		</tr>
	</tbody>
</table>
Tabela 3: Natychmiastowe i długoterminowe obrazy bouba i kiki w pamięci
Ponadto. ~83% wszystkich rysunków uczestników zawierało najbardziej charakterystyczną cechę kształtu globalnych kształtów bouba i kiki: odpowiednio krzywą i kątem (Eksperyment 3, Próba 1-4)17. Rysunki uczestników różniły się ilością krzywych/kątów (np. jeden i pięć kątów dla słowa kiki: por. Rysunek 2, Próby 1, 6 i 9) oraz kierunkiem krzywych/kątów [tj. poziomy, pionowy lub ukośny: por. Rysunek 2, Próby 2, 5 i 8 (dźwięk bouba)], ale zazwyczaj nie zawierały globalnego kształtu bouba/kiki [Eksperyment 3, Próba 1-4 (por. rysunek 1; Rysunek 2)]17. Wreszcie, grupa eksperymentalna została rozpoznana w ~ 43% odpowiedzi wyników: pięciu uczestników w grupie niewidomej, trzech w grupie z opaską na oczy i pięciu w grupie ze wzrokiem; żadna grupa eksperymentalna nie była istotnie powyżej poziomu szansy [33,3% (Eksperyment 3, Próba 1-4)]17.
Efekt wizualnych obrazów i uczenia się
Prezentowany protokół z powodzeniem zbadał rolę obrazów wizualnych w efekcie bouba/kiki, czy trening w zauważaniu dotykowych/wzrokowo-słuchowych prawidłowości bouba i kiki wpłynął na efekt bouba/kiki i rozpoznawanie indywidualnych dotykowych/wizualnych kształtów bouba i kiki, i w końcu, jakie obrazy mentalne wytworzyły te prawidłowości dźwiękowe kształtu17. Włączając jedną grupę eksperymentalną bez doświadczenia wzrokowego (tj. grupę niewidomych) i dwie grupy eksperymentalne z doświadczeniem wzrokowym (tj. grupę z opaską na oczy i grupę wizyjną), możliwe było przetestowanie efektu obrazowania wzrokowego; Włączając jedną grupę eksperymentalną bez doświadczenia wzrokowego i z rozległym doświadczeniem dotykowym (tj. grupę niewidomych) oraz jedną grupę eksperymentalną z dużym doświadczeniem wzrokowym i bez doświadczenia dotykowego (tj. grupę z zawiązanymi oczami), możliwe było przetestowanie efektu treningu w zauważaniu prawidłowości dotykowo-słuchowych. Wyniki wyraźnie sugerują, że grupa z opaską na oczy korzystała z obrazów wizualnych, aby rozwiązać nowe problemy dotykowo-słuchowe, ale nie na dłuższą metę (Eksperyment 1-3); że trening w dostrzeganiu prawidłowości dźwiękowych kształtu bouba/kiki wpłynął na dotykowy/wzrokowo-słuchowy efekt bouba/kiki (Eksperyment 1) i rozpoznawanie indywidualnych dotykowo-wizualnych kształtów bouba i kiki [tj. razem z przystającym dźwiękiem (Eksperyment 2)], ale inaczej w każdej grupie eksperymentalnej (Eksperyment 1-2), oraz że wszystkie grupy eksperymentalne tworzyły mentalne obrazy najbardziej charakterystycznej cechy dotykowego/wzrokowo-słuchowego kształtu bouba (krzywa) i kiki [(kąt) Eksperyment 3. Por. Tabela 1; Tabela 2; Tabela 3]17. Ponadto, włączając powtarzające się wewnątrzgrupowe pomiary natychmiastowego i długoterminowego efektu (Eksperyment 1-3), możliwe było sprawdzenie, kiedy faktycznie wystąpił efekt zobrazowań wizualnych i uczenia się prawidłowości dźwiękowych; oraz poprzez włączenie trzech różnych zadań (tj. dotykowy/wzrokowo-słuchowy efekt bouba/kiki w eksperymencie 1, rozpoznawanie indywidualnych dotykowych/wizualnych kształtów bouba/kiki wraz z przystającym i nieprzystającym dźwiękiem w eksperymencie 2 oraz rysowanie mentalnych obrazów dźwięku bouba/kiki w eksperymencie 3), aby sprawdzić, jak silne były te efekty. Wyniki wyraźnie sugerują, że efekt obrazów wizualnych nie był solidny w długim okresie w każdym zadaniu, zwłaszcza w przypadku korzystania z dotyku dotykowego [por. grupa z opaską na oczy (Eksperyment 1-3)]; mając na uwadze, że efekt uczenia się prawidłowości dźwiękowych był taki, ale nie między zadaniami [por. grupa niewidomych i widzących (Eksperyment 1-3). Por. Tabela 1; Tabela 2; Tabela 3.]17

Celem prezentowanego protokołu jest zbadanie roli obrazów wizualnych w efekcie bouba/kiki, czy trening w dostrzeganiu prawidłowości dźwiękowych kształtu bouba/kiki wpływa na efekt bouba/kiki i rozpoznawanie indywidualnych kształtów bouba i kiki, i w końcu, jakie obrazy mentalne wytwarzają te prawidłowości.

Badanie wpływu obrazów wizualnych i uczenia się prawidłowości dźwiękowych kształtów na boubę i kiki

This article presents a protocol for investigating the role of visual imagery in the bouba/kiki-effect, whether training in noticing the bouba/kiki ...

Protokół ten bada rolę obrazów wizualnych w efekcie bouba/kiki. Wraz z treningiem i zauważaniem, prawidłowości dźwiękowe kształtu bouba/kiki wpływają na efekt bouba/kiki i rozpoznawanie indywidualnych kształtów bouba i kiki. I wreszcie, jakie obrazy mentalne wytwarzają.Wyjątkowość tego protokołu polega na tym, że utrzymuje pod kontrolą obrazy wizualne i informacje sensoryczne podczas treningu i testów. Przeprowadź trzy eksperymenty w cichym pomieszczeniu o neutralnym kolorze i indywidualnie ze wszystkimi uczestnikami. Poproś uczestników w grupie z opaską na oczy, aby założyli opaskę na oczy przed ustawieniem dotykowych materiałów testowych i upewnili się, że mają opaskę na oczach przez cały czas trwania wszystkich trzech eksperymentów.Umieść gumową matę bezpośrednio przed uczestnikiem. Poproś uczestnika o zapoznanie się z gumową matą przed umieszczeniem na niej jakichkolwiek materiałów do testów dotykowych. Następnie umieść odtwarzacz MP3 bezpośrednio przed uczestnikiem, tak aby głośnik znajdował się najbliżej niego.Wyjaśnij, że na gumowej macie zostaną przedstawione dwie karty obrazkowe. Każdy z nich przedstawia wyczuwalny w dotyku kształt. Następnie wyjaśnij, że z odtwarzacza MP3 będzie odtwarzany jakiś dźwięk i że będzie on odpowiadał jednemu z kształtów dotykowych.Następnie połóż dwie karty obrazkowe na gumowej macie. Poproś uczestnika, aby ułożył pięść obiema rękami i położył pięści na prezentowanych kartach obrazkowych, prowadząc je w razie potrzeby. Połóż lewą rękę na pięściach uczestnika.Poproś uczestnika, aby przyjrzał się dwóm kształtom dotykowym, gdy ręka na szczycie jego pięści zostanie usunięta. I powiedzieć "tak", kiedy skończą swoją eksplorację. Gdy będziesz gotowy do rozpoczęcia, zdejmij lewą rękę z pięści uczestnika. Tak.Gdy tylko uczestnik powie "tak", zakryj karty obrazkowe i odtwórz dźwięk z odtwarzacza MP3. bouba Następnie poproś uczestnika, aby zasygnalizował, jaki kształt dotykowy kojarzy się z dźwiękiem. I ten.I zwrócić uwagę na podany kształt, upewniając się, że nie odpowiadasz na odpowiedź. Wyjaśnij, że na gumowej macie zostanie umieszczona jedna karta obrazkowa przedstawiająca namacalny kształt, a z odtwarzacza MP3 zostanie odtworzony jakiś dźwięk. Następnie wyjaśnij, że uczestnik zostanie poproszony o nazwanie zarówno kształtu dotykowego, jak i dźwięku jako bouba lub kiki.Połóż kartę z obrazkiem na gumowej macie. Poproś uczestnika, aby zacisnął pięść obiema rękami. I położyć pięść na prezentowanej karcie obrazkowej, prowadząc ich w razie potrzeby.Połóż lewą rękę na pięściach uczestnika. Gdy będziesz gotowy do rozpoczęcia, zdejmij lewą rękę z pięści uczestnika i odtwórz dźwięk z odtwarzacza MP3, dając uczestnikowi czas na nazwanie dotykowego kształtu i dźwięku. Upewnij się, że uczestnik podał tylko jedno imię i nazwisko.Gdy tylko uczestnicy wymienią kształt dotykowy i dźwięk. kiki Zakryj kartę obrazkową i zanotuj podane imię, upewniając się, że nie odpowiadasz na odpowiedź. Wyjaśnij, że na gumowej macie zostanie umieszczona papier do kopiowania lub plastikowa folia do wytłaczania, a uczestnik zostanie poproszony o rysowanie na niej.Poproś uczestnika, aby wypróbował różne urządzenia do rysowania i sam zdecydował, który woli. Papier do kopiowania lub plastikowa folia do wytłaczania i pióro kulkowe lub styl siodełka? Następnie wyjaśnij, że część dźwięku zostanie odtworzona z odtwarzacza MP3 i że uczestnik będzie rysował kształt dotykowy, który kojarzy mu się z tym dźwiękiem, mówiąc "tak" po zakończeniu rysowania.Następnie umieść papier do kopiowania lub plastikową folię do wytłaczania na gumowej macie. Poproś uczestnika, aby zacisnął pięść obiema rękami, trzymając pióro kulkowe lub siodełko. I położyć pięść na papierze do kopiowania lub plastikowej folii do wytłaczania, prowadząc ich w razie potrzeby.Połóż lewą rękę na pięściach uczestnika. Gdy będziesz gotowy do rozpoczęcia, zdejmij lewą rękę z pięści uczestnika i odtwórz dźwięk z odtwarzacza MP3. dając uczestnikowi czas na narysowanie dotykowego kształtu.Gdy tylko uczestnik powie tak. Tak. Usuń ich rysunek z gumowej maty i oznacz go w prawym dolnym rogu prawidłowym numerem próby, upewniając się, że nie odpowiadasz na rysunek. Na koniec poproś grupę oceniających o udzielenie odpowiedzi na dwa pytania wielokrotnego wyboru na każde zdjęcie w kwestionariuszu, zgodnie z opisem w protokole tekstowym.W tym badaniu 50% uczestników, którzy są od urodzenia niewidomi, 75% miało zawiązane oczy, a około 83% było w pełni widzących, wykazało natychmiastowy efekt bouba/kiki. Długoterminowo i konsekwentnie we wszystkich trzech powtórzonych pomiarach grupowych, grupa niewidomych i widzących wykazała, że efekt bouba/kiki był taki, jak w grupie z opaską na oczy. Na przykład w trzecim i ostatnim pomiarze grupowym 75% uczestników, którzy byli od urodzenia niewidomi, 50% z zawiązanymi oczami i 100% było w pełni widzących, wykazało efekt bouba/kiki.Około 92% uczestników, którzy byli od urodzenia niewidomi, 75% miało zawiązane oczy, a 100% było w pełni widzących, natychmiast rozpoznało pasujący kształt bouba/kiki i dźwięk. Na dłuższą metę grupa niewidomych rozpoznawała kształty bouba/kiki, niezależnie od tego, czy były one prezentowane razem z dźwiękiem zgodnym, czy nie. A grupa z opaską na oczy i wizją tylko wtedy, gdy jest prezentowana razem z odpowiednim dźwiękiem.Około 73% uczestników, którzy byli wrodzeni niewidomi, około 89% miało zawiązane oczy, a 80% było w pełni widzących, natychmiast narysowało obraz mentalny. Kształt, który odpowiadał prezentowanemu słuchowemu bouba/kiki. Na dłuższą metę grupa niewidomych i widzących rysowała dotykowe kształty wizualne, które odpowiadały dźwiękowi, podczas gdy grupa z opaską na oczy tego nie robiła.Ten protokół jest elastyczny. Duże i małe próby, a także konkretne osoby mogą być testowane przeciwko sobie w różnych pomiarach grupowych i/lub przeciwko innym grupom osób pomiędzy pomiarami grupowymi pod względem dokładności i/lub czasu eksploracji.

investigating-effect-visual-imagery-learning-shape-audio-regularities

Research

JoVE Journal

Behavior

Zachowanie

Opisujemy, jak wdrożyć zestaw zadań behawioralnych, aby zbadać przetwarzanie i integrację bodźców sensorycznych u dzieci z ASD. Celem jest scharakteryzowanie indywidualnych różnic w czasowym przetwarzaniu prostych bodźców słuchowych i wzrokowych oraz powiązanie ich z umiejętnościami percepcyjnymi wyższego rzędu, takimi jak percepcja mowy.

Badanie funkcji sensorycznych i multisensorycznych u dzieci z zaburzeniami ze spektrum autyzmu

W wieku 3-4 miesięcy, słuchanie wokalizacji naczelnych ludzi i innych niż ludzie zwiększa zdolności poznawcze niemowląt; po 6 miesiącach tylko ludzkie wokalizacje wywierają tę przewagę poznawczą. Opisujemy manipulację ekspozycją, która ujawnia potężną kształtującą rolę doświadczenia, gdy niemowlęta określają, które dźwięki powiązać z poznaniem, a które wyłączyć.

Doświadczenie odgrywa zasadniczą rolę w dostrajaniu związku między językiem a poznaniem: dowody z kategoryzacji obiektów u niemowląt w wieku od 6 do 7 miesięcy

Niniejszy artykuł omawia metodologię śledzenia wzroku w badaniach nad rozumieniem języka. Aby uzyskać wiarygodne dane, należy postępować zgodnie z kluczowymi krokami protokołu. Należą do nich m.in. prawidłowa konfiguracja eye trackera (np. zapewniająca dobrą jakość obrazów oka i głowy) oraz dokładna kalibracja.

Śledzenie ruchu gałek ocznych podczas wizualnego rozumienia języka: elastyczność i ograniczenia w odkrywaniu wizualnych efektów kontekstowych

Paradygmat świata wizualnego monitoruje ruchy gałek ocznych uczestników w przestrzeni wizualnej, gdy słuchają lub mówią w języku mówionym. Paradygmat ten może być wykorzystany do zbadania przetwarzania online szerokiego zakresu pytań psycholingwistycznych, w tym stwierdzeń semantycznie złożonych, takich jak zdania rozłączne.

Wykorzystanie ruchów gałek ocznych zarejestrowanych w paradygmacie świata wizualnego do zbadania przetwarzania języka mówionego online

Przedstawiona tutaj metoda wywołała fałszywe wspomnienia za pomocą list powiązanych słów, a także oceniła wpływ instrukcji obrazowania na przywołanie i rozpoznanie tych fałszywych wspomnień. Protokół ten szczegółowo opisuje zmodyfikowaną wersję paradygmatu Deese Roediger McDermott (DRM).

Wykorzystanie paradygmatu Deese Roediger McDermott do oceny wpływu obrazów na fałszywe wspomnienia

Tutaj prezentujemy protokół paradygmatów testów zapoznawczych, które zapewniają bezpośredni test kategoryzacji niemowląt i pomagają zdefiniować rolę języka we wczesnym uczeniu się kategorii.

Definiowanie roli języka w kategoryzacji obiektów niemowląt za pomocą paradygmatów śledzenia ruchu gałek ocznych

Prezentowany tutaj jest protokół wprowadzający zestaw przyjaznych dzieciom zadań do nauki statystycznej, mających na celu zbadanie uczenia się przez dzieci wzorców statystycznych w różnych dziedzinach i modalnościach sensorycznych. Opracowane zadania zbierają dane behawioralne przy użyciu platformy internetowej i danych funkcjonalnego rezonansu magnetycznego (fMRI) w celu zbadania zaangażowania neuronalnego podczas uczenia się statystycznego.

Pomiar statystycznego uczenia się w różnych modalnościach i dziedzinach u dzieci w wieku szkolnym za pośrednictwem platformy internetowej i technik neuroobrazowania

Prezentujemy protokoły i metody analiz do budowy współadaptacyjnych interfejsów, które strumieniują, parametryzują, analizują i modyfikują sygnały ludzkiego ciała i serca w zamkniętej pętli. Ta konfiguracja łączy sygnały pochodzące z obwodowego i ośrodkowego układu nerwowego osoby z zewnętrznymi bodźcami sensorycznymi, aby pomóc w śledzeniu zmian biofizycznych.

Sterowanie proxy w czasie rzeczywistym ponownie sparametryzowanych sygnałów peryferyjnych za pomocą interfejsu zamkniętej pętli

Nie jest jasne, w jaki sposób sygnały z góry na dół z brzusznego strumienia wzrokowego wpływają na ruch. Opracowaliśmy paradygmat do testowania zachowań motorycznych w stosunku do celu na iluzji odwrócenia głębi 3D. Istotne różnice występują zarówno w celowych, ukierunkowanych na cel ruchach, jak i automatycznych działaniach w iluzorycznych i prawdziwych warunkach widzenia.

Metody badania wpływu odgórnych procesów wzrokowych na zachowania motoryczne

Korzystając z potencjałów EEG związanych ze zdarzeniami (ERP), badamy wpływ leków przeciwpsychotycznych na nieprawidłowe aktywacje semantyczne mózgu u zdrowych osób z cechami schizotypowymi. Używamy ERP do śledzenia wyraźnych zmian w aktywności mózgu, rzucając światło na procesy poznawcze związane z kategoryzacją semantyczną.

Badanie wpływu leków przeciwpsychotycznych i schizotypów na N400 przy użyciu potencjałów związanych ze zdarzeniami i kategoryzacji semantycznej

Poznaj wpływ obrazów wizualnych na efekt bouba/kiki w badaniach neurokognitywnych. Protokół ocenia rozpoznawanie kształtów dźwiękowych u osób z różnym doświadczeniem zmysłowym.

Badanie wpływu obrazów wizualnych i uczenia się prawidłowości dźwiękowych kształtów na boubę i kiki

Przeglądaj więcej filmów