Artykuł metodologiczny

Badanie wpływu obrazów wizualnych i uczenia się prawidłowości dźwiękowych kształtów na boubę i kiki

12.3K wyświetleń

⸱

DOI:

10.3791/59954

⸱

13 września 2019

 , 
1Department of Experimental Psychology, University of Oxford

W tym artykule

Podsumowanie

Celem prezentowanego protokołu jest zbadanie roli obrazów wizualnych w efekcie bouba/kiki, czy trening w dostrzeganiu prawidłowości dźwiękowych kształtu bouba/kiki wpływa na efekt bouba/kiki i rozpoznawanie indywidualnych kształtów bouba i kiki, i w końcu, jakie obrazy mentalne wytwarzają te prawidłowości.

Streszczenie

Ten artykuł przedstawia protokół do badania roli obrazów wizualnych w efekcie bouba/kiki, czy trening w dostrzeganiu prawidłowości dźwiękowych kształtu bouba/kiki wpływa na efekt bouba/kiki i rozpoznawanie indywidualnych kształtów bouba i kiki, i w końcu, jakie obrazy mentalne wytwarzają te prawidłowości. Aby wygenerować prawidłowości dźwiękowe kształtu bouba/kiki, istniały dwa rodzaje kształtów (wypełnione; zarysowane) i dwa rodzaje dźwięku (słowo; dźwięk nie-słowny). Trzy grupy osób wzięły udział w trzech eksperymentach: ślepym, z opaską na oczy i z widzeniem. Eksperymenty zostały przeprowadzone w ustalonej kolejności u wszystkich uczestników, bez przerw między nimi. W eksperymencie 1 (projekt przed testem i po teście z trzema powtórzonymi pomiarami w grupie) uczestnicy zostali poproszeni o wybranie kształtu, który kojarzą im się ze słuchową boubą / kiki; w Eksperymencie 2 (projektowanie wewnątrzobiektowe), aby wymienić jeden kształt i niektóre dźwięki (czasami zgodne, czasami niestosowne) jako "bouba" lub "kiki"; ' i w eksperymencie 3 (projekt tylko po teście), aby narysować kształt, który kojarzyli ze słuchowym bouba/kiki. Wyniki sugerują, że grupa z opaską na oczach korzysta z obrazów wizualnych, aby rozwiązywać nowe problemy, ale nie w dłuższej perspektywie; że trening w dostrzeganiu prawidłowości dźwiękowych kształtów bouba/kiki wpływa na efekt bouba/kiki i rozpoznawanie indywidualnych kształtów bouba i kiki, ale inaczej w każdej grupie eksperymentalnej; i że wszystkie grupy eksperymentalne tworzą mentalne obrazy najbardziej charakterystycznej cechy kształtu bouba (krzywa) i kiki (kąt). W rzeczywistości efekt obrazów wizualnych jest solidny we wszystkich zadaniach, ale nie w dłuższej perspektywie; Efekt uczenia się prawidłowości dźwięku kształtu jest solidny w dłuższej perspektywie, ale nie między zadaniami. Przedstawiony protokół jest odpowiedni do badania wpływu obrazowania wizualnego i uczenia się prawidłowości kształtowo-dźwiękowych, kiedy występują i jak bardzo są wytrzymałe; u konkretnych osób i grup osób. Wyjątkowość tego protokołu polega na tym, że utrzymuje pod kontrolą zarówno obrazy wizualne, jak i informacje sensoryczne podczas treningu i testów.

Wprowadzenie

95% światowej populacji wykazuje słuchowo-wzrokowy efekt bouba/kiki, kojarząc wizualnie zaokrąglony kształt z wypowiadanym słowem 'bouba; ' oraz wizualnie kanciasty kształt z wypowiadanym słowem "kiki"; ' i robią to nawet wtedy, gdy nie mieli żadnego doświadczenia ani z kształtem, ani ze słowem1. Efekt bouba/kiki poprzedza naukę języka; Występuje we wszystkich językach1,2,3,4,5, zarówno z bouba, jak i kiki (por. preferencja ludzi dla krzywych wizualnych zamiast kątów widzenia6,7,8,9) i zależy to od kombinacji samogłosek i spółgłosek (np. nie występuje z 'bibi' i 'kuku').1,5,10,11,12. To skojarzenie kształt-słowo występuje również z innymi parami kształtów i słów, o ile są one głównie zakrzywione, jak bouba, i głównie kanciaste, jako kiki11,13; i/lub mają taką samą kombinację samogłosek i spółgłosek jak 'bouba' i 'kiki', na przykład: 'Baluma' i 'takete', 'maluma' i 'takete', 'uloomo' i 'takete', 'maa-boo-maa' i 'tuh-kee-tee'1,3,4,10,11,12,14. W rzeczywistości ludzie kojarzą zaokrąglone kształty wizualne z wypowiadanymi słowami zawierającymi ciągłe spółgłoski (takie jak /l/ i /m/) i otwarte samogłoski tylne (takie jak /ɑ:/ i /ɔ:/), a wizualne kształty kątowe z wypowiadanymi słowami zawierającymi spółgłoski spółgłoskowe (takie jak /k/ i /t/) oraz samogłoski bliskie z przodu (takie jak (/ε/ i /I/)11, 12,15,16. Większy wpływ mają na nie spółgłoski niż samogłoski, zwłaszcza te bezdźwięczne (np. /k/ i /t/)11,12,15,16. Rzeczywiście, wydaje się, że cechy globalnych kształtów – ich krzywe i kąty17 – oraz dźwięk wypowiadanych słów – ich melody17 – są najważniejsze, w przeciwieństwie do samych globalnych kształtów i słów.

Jedno z badań badało efekt bouba/kiki z dotykowymi kształtami bouba i kiki zamiast wizualnych kształtów bouba/kiki i stwierdziło, że uczestnicy, którzy byli niedowidzący, wykazywali znacznie mniej silny efekt bouba/kiki (~64%) niż osoby w pełni widzące (~90%)18. W badaniu tym stwierdzono, że znacznie mniej silny efekt bouba/kiki wśród uczestników, którzy byli niewidomi i niedowidzący, był spowodowany brakiem obrazów wizualnych: w pełni widzący uczestnicy zauważyli prawidłowości w swoim otoczeniu, które nie są łatwo dostępne, gdy wzrok jest upośledzony18. Z tego badania nie wynika jednak jasno, czy obrazowanie wizualne jest konieczne, aby wystąpił efekt bouba/kiki: tylko sześciu z 42 uczestników z wadą wzroku było od urodzenia całkowicie niewidomych18, a zatem w ogóle nie miało obrazów wizualnych. Co więcej, pozostali uczestnicy, żaden z nich nie miał zawiązanych oczu, mogli zaobserwować ruchy warg eksperymentatora podczas ogłaszania słowa bouba/kiki – zaokrąglone ruchy warg podczas ogłaszania "bouba" i kątowe ruchy warg podczas ogłaszania "kiki"1,18 – pokazujące dotykowo-wzrokowo-słuchowy efekt bouba/kiki, zamiast czerpać z jakichkolwiek wizualnych obrazów. Ponadto nie badano żadnego wpływu zauważania prawidłowości dotykowo-słuchowych, na przykład poprzez porównanie efektu bouba/kiki w badaniu pierwszym i czwartym, zamiast obliczenia efektu we wszystkich czterech badaniach. Co więcej, dotykowe bouba i kiki różniły się raczej w różnych próbach: w próbach pierwszej i drugiej były to kształty 3D i 2D (zakrzywione v kanciaste); W próbach trzeciej i czwartej, identyczne pod względem kształtu (okrąg) i różniące się teksturą (gładkie v szorstkie; gładkie v kolczaste)18. W podobnym duchu, w jednym z badań zbadano kinestetyczno-słuchowy efekt bouba/kiki u osób z zawiązanymi oczami (w pełni widzącymi) i stwierdzono, że po dwuminutowym okresie treningu trzymania robotycznego rysika zaprogramowanego do rysowania trajektorii kształtów bouba i kiki, 82% wykazało efekt bouba/kiki19. Z tego badania nie wynika jednak jasno, czy efekt bouba/kiki wystąpił z powodu okresu treningowego: badanie nie obejmowało testu wstępnego ani grupy kontrolnej.

W tym celu zbadaliśmy rolę obrazów wizualnych w efekcie bouba/kiki, czy trening w dostrzeganiu dotykowych/wzrokowo-słuchowych prawidłowości bouba i kiki wpłynął na efekt bouba/kiki i rozpoznawanie indywidualnych dotykowych/wizualnych kształtów bouba i kiki, i wreszcie, jakie obrazy mentalne wytworzyły te prawidłowości dźwiękowe kształtu17. Aby wygenerować prawidłowości dźwiękowe kształtu bouba/kiki – nie tylko, na przykład, specyfiki kiki-kształtu/kiki-słowa1 – badanie to obejmowało dwa rodzaje dotykowych/wizualnych kształtów bouba/kiki (wypełnione; zarysowane) oraz dwa rodzaje dźwiękowych bouba/kiki [audio (słowo; dźwięk niebędący słowem)]17. Trzy grupy osób wzięły udział w trzech eksperymentach: ślepym (N = 12), z opaską na oczy (N = 12) i ze wzrokiem (N = 12). Eksperymenty zostały przeprowadzone w ustalonej kolejności u wszystkich uczestników i bez przerw między nimi, aby utrzymać pod kontrolą ilość i rodzaj doświadczeń uczestników z bouba i kiki. W eksperymencie 1 (projekt pre-test-post-test z trzema powtórzonymi pomiarami w grupie) uczestnicy zostali poproszeni o wybranie dotykowego/wizualnego kształtu, który kojarzyli ze słuchowym bouba/kiki; w eksperymencie 2 (projektowanie wewnątrzobiektowe), aby wymienić jeden kształt dotykowy/wizualny i niektóre dźwięki (czasami zgodne, czasami nieprzystające) jako "bouba" lub "kiki"; ' i w eksperymencie 3 (projekt tylko po teście), aby narysować dotykowy/wizualny kształt, który skojarzyli ze słuchowym bouba/kiki17. Ogólnie rzecz biorąc, badanie to sugeruje, że efekt obrazów wizualnych jest solidny w różnych zadaniach, ale nie długoterminowo w każdym zadaniu, podczas gdy efekt uczenia się regularności dźwiękowych kształtów jest solidny długoterminowo w każdym zadaniu, ale nie między zadaniami17. W tym artykule przedstawiono protokół z tego badania17. Przedstawiony protokół jest odpowiedni do badania wpływu obrazowania wizualnego i uczenia się prawidłowości kształtowo-dźwiękowych, kiedy występują i jak bardzo są wytrzymałe; u konkretnych osób i grup osób. Wyjątkowość tego protokołu polega na tym, że utrzymuje pod kontrolą zarówno obrazy wizualne, jak i informacje sensoryczne podczas treningu i testów.

Protokół

Międzywydziałowy Komitet Etyki Badań Nauk Medycznych (IDREC) Uniwersytetu w Oxford zatwierdził niniejszy protokół (nr ref.: MS-IDREC-C1-2015-200, R46287/RE002 oraz R42687/RE004).

1. Projekt i warunki

  1. Przeprowadź trzy eksperymenty w następującej stałej kolejności ze wszystkimi uczestnikami: Eksperyment 1, Eksperyment 2 i Eksperyment 3, bez przerw pomiędzy nimi. Upewnij się, że wszyscy uczestnicy Eksperymentu 2 brali udział w Eksperymencie 1, a wszyscy uczestnicy Eksperymentu 3 brali udział również w Eksperymencie 2 (oraz Eksperymencie 1).
  2. Przeprowadź Eksperyment 1 – projekt z pretestem i posttestem, z trzema grupami eksperymentalnymi: osoby niewidome, osoby z opaską na oczach i osoby widzące; oraz trzema powtórzonymi pomiarami wewnątrzgrupowymi. Przedstaw próby w stałej kolejności wszystkim uczestnikom. (Całkowita liczba prób: 8.)
    1. Przeprowadź pretest (Próba 1), aby zbadać natychmiastowy taktylny/wizualno-audytywny efekt bouba/kiki.
    2. Przeprowadź pierwszy powtórzony pomiar wewnątrzgrupowy (Próba 4), aby zbadać efekt powtarzającego się kształtu taktylnego/wizualnego (wypełnionego lub konturowego) i zróżnicowanego sygnału audio (słowo i dźwięk niebędący słowem).
    3. Przeprowadź drugi pomiar wewnątrzgrupowy (Próba 5), aby zbadać efekt nowego kształtu taktylnego/wizualnego (konturowego lub wypełnionego) i zróżnicowanego sygnału audio (słowo i dźwięk niebędący słowem).
    4. Przeprowadź trzeci pomiar wewnątrzgrupowy i posttest (Próba 8), aby zbadać efekt zróżnicowanego kształtu taktylnego/wizualnego (wypełnionego i konturowego) oraz zróżnicowanego sygnału audio (słowa i dźwięku niebędącego słowem).
    5. Losowo przypisz, który typ taktylnych/wizualnych kształtów bouba/kiki zostanie przedstawiony w próbach 1-4 (wypełnione lub konturowe). Przedstaw drugi typ w próbach 4-8. Następnie losowo przypisz, które słowo audytywne (bouba lub kiki) zostanie przedstawione w Próbie 1 oraz który sygnał audytywny bouba/kiki (bouba lub kiki oraz słowo lub dźwięk niebędący słowem) zostanie przedstawiony w każdej z Prób 2-8.
      UWAGA: Upewnij się, że łącznie przeprowadzono cztery próby bouba i cztery próby kiki; cztery próby z wypełnionym i cztery z konturowym kształtem taktylnym/wizualnym; cztery próby ze słowem audytywnym i cztery próby z dźwiękiem audytywnym niebędącym słowem.
  3. Przeprowadź Eksperyment 2 – projekt wewnątrzpodmiotowy, z trzema grupami eksperymentalnymi: osoby niewidome, osoby z opaską na oczach i osoby widzące; oraz dwoma pomiarami wewnątrzgrupowymi. Przedstaw próby w stałej kolejności wszystkim uczestnikom. (Całkowita liczba prób: 8)
    1. Zbadaj natychmiastowe rozpoznanie zgodnych (bouba/kiki + bouba/kiki) kombinacji kształt-audio (Próba 1).
    2. Zbadaj rozpoznawanie (a) zgodnych (bouba/kiki + bouba/kiki) oraz (b) niezgodnych (bouba/kiki + kiki/bouba) kombinacji kształt-audio [w czterech próbach na każdy typ zgodności (Próby 1-8)].
    3. Losowo przypisz, który typ taktylnego/wizualnego kształtu bouba/kiki (wypełniony lub konturowy) zostanie przedstawiony w próbach 1-8. Następnie losowo przypisz, który zgodny kształt taktylny/wizualny i dźwięk audytywny niebędący słowem (bouba + bouba lub kiki + kiki) zostanie przedstawiony w Próbie 1, a na koniec, który typ zgodności (zgodny lub niezgodny kształt taktylny/wizualny bouba/kiki + dźwięk audytywny bouba/kiki niebędący słowem) zostanie przedstawiony w każdej z Prób 2-8.
      UWAGA: Upewnij się, że łącznie przeprowadzono cztery próby z taktylnym/wizualnym bouba i cztery z taktylnym/wizualnym kiki; cztery próby taktylno-wizualne z wypełnieniem i cztery z konturem; cztery próby zgodne i cztery niezgodne (kształt + dźwięk niebędący słowem). (Słowo audytywne bouba/kiki nie jest uwzględnione w tym eksperymencie).
  4. Przeprowadź Eksperyment 3 – projekt oparty wyłącznie na postteście, z trzema grupami eksperymentalnymi: osoby niewidome, osoby z opaską na oczach i osoby widzące. Przedstaw próby w stałej kolejności wszystkim uczestnikom (Całkowita liczba prób: 4).
    1. Zbadaj, jakie obrazy mentalne wytworzył trening zauważania regularności kształt-audio (t.j. Eksperyment 1 i Eksperyment 2), w czterech oddzielnych próbach: słowo bouba, dźwięk bouba niebędący słowem, słowo kiki oraz dźwięk kiki niebędący słowem.
    2. Losowo przypisz, który typ sygnału audytywnego bouba/kiki (bouba lub kiki oraz słowo lub dźwięk niebędący słowem) zostanie przedstawiony w każdej z Prób 1-4.
      ​UWAGA: Upewnij się, że łącznie przeprowadzono jedną próbę ze słowem audytywnym bouba, jedną próbę z dźwiękiem audytywnym bouba niebędącym słowem, jedną próbę ze słowem audytywnym kiki i jedną próbę z dźwiękiem audytywnym kiki niebędącym słowem.

2. Uczestnicy

  1. Zrekrutuj jedną grupę uczestników z wrodłą ślepotą; czyli osób, które utraciły wzrok przed upływem czterech miesięcy od urodzenia20,21,22: kategorie 5: całkowita ślepota oraz 4: odczuwanie światła (postrzeganie źródła światła) i projekcja światła (postrzeganie miejsca, w którym znajduje się źródło światła)22. Upewnij się, że wszyscy znają alfabet Braille'a.
  2. Zrekrutuj jedną grupę uczestników pełnosprawnych wzrokowo, której liczebność będzie dwukrotnością liczby uczestników z wrodłą ślepotą. Upewnij się, że wszyscy mają wzrok prawidłowy lub korygowany do normy.
    UWAGA: Upewnij się, że wszyscy uczestnicy są w wieku od 18 do 70 lat, mają słuch prawidłowy lub korygowany do normy, nie wykazują opóźnień ani zaburzeń poznawczych ani nie posiadają niepełnosprawności fizycznej oraz że nie znają efektu bouba/kiki.
  3. Losowo przydziel połowę grupy uczestników pełnosprawnych wzrokowo do grupy z opaską na oczach (blindfold-group), a pozostałą połowę do grupy z widzeniem (vision-group).
    UWAGA: Uczestnicy, typy kształtów bouba/kiki dotykowych/wizualnych, typy bodźców słuchowych bouba/kiki oraz zgodność są losowo przypisane do jednej z dwóch kategorii: opaska lub widzenie; wypełnione lub konturowe; słowo lub dźwięk niebędący słowem; bouba lub kiki; zgodne lub niezgodne. Zatem losowy przydział może zostać wykonany za pomocą programu komputerowego lub ręcznie (np. poprzez rzut monetą).

3. Materiały

  1. Przygotowanie materiałów dotykowych i wizualnych
    1. Przenieś kształty wizualne bouba/kiki (30 x 23 mm) na papier wypukły, drukując je z komputera osobistego lub kserując z obrazka. Upewnij się, że przeniesiono dwa rodzaje kształtów wizualnych bouba/kiki: jeden wypełniony i jeden konturowy [linia 1,5 pt. Por. Rysunek 1].
    2. Przeciągnij papier wypukły przez utrwalacz termiczny. Upewnij się, że kształty dotykowe bouba/kiki wzniosły się do wysokości ~0,5 mm. Alternatywnie można zamówić kształty dotykowe/wizualne bouba/kiki w serwisie transkrypcyjnym dla osób niedowidzących (dołączając plik PDF).
    3. Przyklej papier wypukły do płyty piankowej [białej (grubość 5 mm)]. Użyj kleju w sprayu.
    4. Dotnij papier wypukły i płytę piankową do wymiarów (50 x 50 mm), aby stworzyć cztery oddzielne karty obrazkowe dotykowo-wizualne: wypełniony bouba, konturowy bouba, wypełniony kiki i konturowy kiki (por. Rysunek 1). Do cięcia użyj noża do tapet.
    5. Dotnij tekturę/płytę piankową do przykrywania kształtów dotykowych/wizualnych bouba/kiki do wymiarów (297 x 210 mm). Użyj noża do tapet. Alternatywnie zamów format A4.
    6. Dotnij papier kserograficzny/plastikową folię do tłoczeń do wymiarów (210 x 148 mm). Użyj gilotyny. Alternatywnie zamów format A5.
    7. Dotnij matę gumową do wymiarów (230 x 150 mm). Użyj noża lub nożyczek. Alternatywnie zamów ramkę ręczną Moon i rozmontuj ją, aby odsłonić matę gumową.

Schemat równowagi statycznej przedstawiający konfiguracje kształtów; pokazano makroskopowy balans i symetrię.
Rycina 1: Dwa typy kształtów bouba/kiki: wypełnione i konturowe Kliknij tutaj, aby wyświetlić powiększoną wersję tej ryciny.

  1. Przygotowanie materiałów słuchowych
    1. Nagrać wypowiedziane słowa bouba (por. Audio 1) oraz kiki. Zapisać w formacie MP3: jeden plik dla słowa bouba i jeden dla słowa kiki.
    2. Stworzyć nie-słowne dźwięki bouba i kiki, naśladując czas trwania i częstotliwość (tj. melodię) wypowiedzianych słów „bouba” i „kiki”. Użyć generatora fal dźwiękowych oraz funkcji pitch bend. Zapisać w formacie MP3: jeden plik dla dźwięku bouba (por. Audio 2) i jeden dla dźwięku kiki.
    3. Zainstalować aplikację VLC dla systemu iOS na smartfonie. Przesłać pliki MP3 dla bouba i kiki do aplikacji VLC. Zapisać je jako cztery oddzielne pliki: dźwięk bouba, słowo bouba, dźwięk kiki oraz słowo kiki.

Audio 1: Słowo Bouba Kliknij tutaj, aby pobrać ten plik.

Audio 2: Dźwięk Bouba Kliknij tutaj, aby pobrać ten plik.

4. Procedura i punktacja

  1. Przygotowanie sesji testowej
    1. Przeprowadzić trzy eksperymenty w cichym pomieszczeniu o neutralnym kolorze, z każdym uczestnikiem indywidualnie. Poprosić uczestników z grupy z opaską o założenie opaski na oczy przed przygotowaniem materiałów dotykowych/wizualno-słuchowych i upewnić się, że opaska pozostanie założona przez cały czas oraz pomiędzy wszystkimi trzema eksperymentami.
  2. Przygotowanie materiałów dotykowych/wizualnych
    1. Umieścić gumową matę bezpośrednio przed uczestnikiem. Następnie położyć na gumowej macie (Eksperyment 1) dwa kształty dotykowe/wizualne bouba i kiki (Eksperyment 2) jeden kształt dotykowy/wizualny bouba lub kiki oraz (Eksperyment 3) papier kopiowy/plastikową folię do tłoczenia.
      UWAGA: W Eksperymencie 1 należy zawsze prezentować bouba po lewej stronie, a kiki po prawej; a w Eksperymencie 1 i 2 zawsze prezentować je w tej samej orientacji (por. Rycina 1), aby zwiększyć zdolność uczestników do tworzenia obrazów mentalnych kształtów bouba i kiki bez zakłóceń wynikających z ich położenia i/lub orientacji na gumowej macie. Należy upewnić się, że uczestnicy nie zostali poinformowani o stałym sposobie prezentacji kształtów dotykowych/wizualnych bouba i kiki. W grupie wzrokowej materiały testowe należy zawsze ustawiać za tekturową płytą/płytą piankową, aby zapobiec podglądaniu przez tych uczestników tego, co zostanie im zaprezentowane.
  3. Przygotowanie materiałów słuchowych
    1. Umieścić odtwarzacz MP3 bezpośrednio przed uczestnikiem (po drugiej stronie gumowej maty), z głośnikiem skierowanym w jego stronę.
      UWAGA: Nie powtarzać werbalnie informacji słuchowych z odtwarzacza MP3, aby zapobiec obserwowaniu ruchów warg podczas prób słownych bouba/kiki1 u uczestników z grupy wzrokowej i w ten sposób kontrolować ilość oraz rodzaj informacji sensorycznych we wszystkich grupach eksperymentalnych.
  4. Przeprowadzenie Eksperymentu 1, Eksperymentu 2 i Eksperymentu 3
    1. Zaprosić uczestników, którzy będą badać i rysować kształty dotykowe (tj. osoby niewidome i grupę z opaskami), do zbadania (dotykiem) gumowej maty: na przykład w celu sprawdzenia jej rozmiaru i tekstury, bez żadnych kart obrazkowych dotykowych/wizualnych i/lub papieru kopiowego lub plastikowej folii do tłoczenia położonych na niej.
  5. Przeprowadzenie Eksperymentu 1
    1. Wyjaśnić, że na gumowej macie zostaną przedstawione dwie karty obrazkowe, z których każda przedstawia kształt dotykowy/wizualny. Następnie wyjaśnić, że z odtwarzacza MP3 zostanie odtworzony sygnał audio, który będzie odpowiadał jednemu z kształtów dotykowych/wizualnych.
      ​UWAGA: Nie informować uczestników o dwóch typach kształtów dotykowych/wizualnych bouba/kiki (wypełnionych i konturowych) oraz dwóch typach bodźców słuchowych bouba/kiki (dźwięk i słowo).
    2. Położyć dwie karty obrazkowe dotykowe/wizualne na gumowej macie (por. Rycina 1).
    3. W grupie osób niewidomych i z opaskami poprosić uczestnika o zaciśnięcie pięści obiema rękami i położenie ich na przedstawionych kartach obrazkowych dotykowych/wizualnych, kierując ich w razie potrzeby. Położyć lewą dłoń na pięściach uczestnika.
    4. Poprosić uczestnika o zbadanie dwóch kształtów dotykowych/wizualnych – grupę niewidomych i z opaskami dotykiem, a grupę wzrokową wzrokiem – w momencie zdjęcia dłoni z pięści (grupa niewidomych i z opaskami) / płyty tekturowej lub piankowej (grupa wzrokowa) i o powiedzenie „tak” po zakończeniu badania.
    5. Zdjąć lewą dłoń z pięści uczestnika (w grupie niewidomych i z opaskami) / usunąć płytę tekturową lub piankową (w grupie wzrokowej).
    6. Gdy tylko uczestnik powie „tak”, zakryć karty obrazkowe dotykowe/wizualne.
    7. Odtworzyć nagranie audio z odtwarzacza MP3.
      ​UWAGA: Informację słuchową z odtwarzacza MP3 należy odtworzyć tylko raz i nie powtarzać jej ustnie uczestnikom.
    8. Poprosić uczestnika o wskazanie, który kształt dotykowy/wizualny kojarzy z nagraniem, na przykład mówiąc „lewy/prawy”, „obły/kanciasty” lub „kwiat/gwiazda”, i odnotować podany kształt. Nie odpowiadać na odpowiedź uczestnika.
    9. Ocenić, czy odpowiedź uczestnika jest prawidłowa, czy błędna.
      ​UWAGA: Powtórzyć kroki 4.5.2–4.5.9 dla wszystkich ośmiu prób.
  6. Przeprowadzenie Eksperymentu 2
    1. Wyjaśnić, że na gumowej macie zostanie przedstawiona jedna karta obrazkowa przedstawiająca kształt dotykowy/wizualny oraz że z odtwarzacza MP3 zostanie odtworzone nagranie audio. Następnie wyjaśnić, że audio zostanie odtworzone raz dla każdej karty obrazkowej, gdy tylko uczestnik zacznie badać kształt dotykowy/wizualny.
      ​UWAGA: Nie informować uczestników o dwóch typach kształtów dotykowych/wizualnych bouba/kiki (wypełnionych i konturowych), jednym typie bodźca słuchowego bouba/kiki (dźwięk) oraz dwóch typach zgodności (zgodna i niezgodna).
    2. Położyć kartę obrazkową dotykową/wizualną na gumowej macie.
    3. W grupie osób niewidomych i z opaskami poprosić uczestnika o zaciśnięcie pięści obiema rękami i położenie ich na przedstawionej karcie obrazkowej dotykowej/wizualnej, kierując ich w razie potrzeby. Położyć lewą dłoń na pięściach uczestnika.
    4. Poprosić uczestnika o zbadanie kształtu dotykowego/wizualnego – grupę niewidomych i z opaskami dotykiem, a grupę wzrokową wzrokiem – w momencie zdjęcia dłoni z pięści (grupa niewidomych i z opaskami) / płyty tekturowej lub piankowej (grupa wzrokowa) i o wysłuchanie nagrania audio. Następnie poprosić o nazwanie kształtu dotykowego/wizualnego oraz sygnału audio jako „bouba” lub „kiki”: tylko jedna nazwa23,24,25, po zakończeniu badania.
    5. Zdjąć lewą dłoń z pięści uczestnika (w grupie niewidomych i z opaskami) / usunąć płytę tekturową lub piankową (w grupie wzrokowej) i odtworzyć nagranie audio z odtwarzacza MP3.
      ​UWAGA: Informację słuchową z odtwarzacza MP3 należy odtworzyć tylko raz i nie powtarzać jej ustnie uczestnikom.
    6. Gdy tylko uczestnik nazwie kształt dotykowy/wizualny i sygnał audio, zakryć kartę obrazkową i odnotować podaną nazwę. Nie odpowiadać na odpowiedź uczestnika.
    7. Ocenić, czy odpowiedź uczestnika jest prawidłowa, czy błędna.
      UWAGA: Powtórzyć kroki 4.6.2–4.6.7 dla wszystkich ośmiu prób.
    8. W próbach zgodnych i niezgodnych uznać uczestnika za „prawidłowego”, jeśli rozpoznał ≥75% kształtów dotykowych/wizualnych bouba i kiki.
  7. Przeprowadzenie Eksperymentu 3:
    1. Wyjaśnić, że na gumowej macie zamiast karty (kart) obrazkowych dotykowych/wizualnych zostanie położony papier kopiowy/plastikowa folia do tłoczenia i że uczestnik zostanie poproszony o rysowanie na nim. W grupie osób niewidomych i z opaskami zaprosić uczestnika do wypróbowania różnych przyborów do rysowania i samodzielnego zdecydowania, który preferuje: papier kopiowy lub folię do tłoczenia oraz długopis żelowy lub styl zakładkowy. Następnie wyjaśnić, że z odtwarzacza MP3 zostanie odtworzone nagranie audio i uczestnik będzie rysował kształt dotykowy/wizualny, który kojarzy z tym audio, rysując jeden kształt na segment nagrania, gdy zostanie o to poproszony.
      ​UWAGA: Nie informować uczestników o treści informacji słuchowej (bouba i kiki) ani o dwóch typach bodźców słuchowych bouba/kiki (dźwięk i słowo).
    2. Położyć papier kopiowy/plastikową folię do tłoczenia na gumowej macie.
    3. W każdej z trzech grup eksperymentalnych (niewidome; z opaskami; wzrokowe) poprosić uczestnika o zaciśnięcie pięści obiema rękami podczas trzymania długopisu żelowego/stylu zakładkowego i położenie pięści na papierze kopiowym/plastikowej folii do tłoczenia, kierując ich w razie potrzeby. Położyć lewą dłoń na pięściach uczestnika.
    4. Poprosić uczestnika o narysowanie kształtu, który kojarzy z prezentowanym audio, w momencie zdjęcia dłoni z jego pięści. W grupie osób niewidomych i z opaskami poprosić o narysowanie kształtu dotykowego, a w grupie wzrokowej – kształtu wizualnego. Poprosić uczestnika o powiedzenie „tak” po zakończeniu rysowania.
    5. Zdjąć lewą dłoń z pięści uczestnika.
    6. Odtworzyć nagranie audio z odtwarzacza MP3.
      ​UWAGA: Informację słuchową z odtwarzacza MP3 należy odtworzyć tylko raz i nie powtarzać jej ustnie uczestnikom.
    7. Gdy tylko uczestnik powie „tak”, usunąć jego rysunek dotykowy/wizualny z gumowej maty i oznaczyć go w prawym dolnym rogu odpowiednim numerem próby. Nie odpowiadać ani nie komentować odpowiedzi/narysowanego kształtu uczestnika.
      ​UWAGA: Powtórzyć kroki 4.7.2–4.7.7 dla wszystkich czterech prób.
    8. Zeskanować wszystkie rysunki dotykowe/wizualne (rozmiar 1:1) do formatu jpg bezpośrednio po każdej sesji testowej.
      ​UWAGA: Eksperyment 3 jest oceniany przez grupę oceniających po zebraniu wszystkich danych z rysunków.
    9. Przygotować kwestionariusz do oceny danych z rysunków (por. Rycina 2):
      1. Zmniejszyć wszystkie zeskanowane rysunki tak, aby na jednej stronie w orientacji poziomej A4 znalazło się 12 obrazków.
      2. Losowo przypisać próby bouba/kiki, próby dźwięk/słowo oraz rysujących z grup niewidomych/z opaskami/wzrokowych.
      3. Dodać numer próby w lewym górnym rogu każdego obrazka.
      4. Dodać podpisy „bouba” i „kiki” oraz „niewidomy”, „z opaską” i „widzący” pod każdym obrazkiem.
    10. Zrekrutować grupę oceniających: osoby powyżej 18 roku życia, z normalnym lub skorygowanym do normy słuchem i wzrokiem, bez opóźnień lub zaburzeń poznawczych oraz bez niepełnosprawności fizycznej, które nie brały udziału w tym badaniu i wykazują efekt bouba/kiki dla kształtów wizualnych i słów drukowanych.
    11. Poprosić oceniających o odpowiedź na dwa pytania wielokrotnego wyboru dla każdego obrazka w kwestionariuszu:
      ​(1) „Czy przedstawiony kształt to „bouba” czy „kiki”?” oraz (2) „Czy przedstawiony kształt został narysowany przez osobę niewidomą (od urodzenia), osobę z opaską na oczach czy osobę w pełni widzącą?”17.
    12. W zależności od liczby obrazków w kwestionariuszu, poprosić połowę grupy oceniających o ocenę połowy kwestionariusza, a drugą połowę o ocenę pozostałej części.
    13. Dla każdej próby odnotować „odpowiada”, „nie odpowiada” i „wynik niejednoznaczny”, czyli:
      1. „Odpowiada”, gdy (i) ≥75% oceniających zgodziło się co do tego, który kształt dotykowy/wizualny (bouba lub kiki) został narysowany, i (ii) kształt ten odpowiadał prezentowanemu bodźcowi słuchowemu bouba/kiki w tej próbie.
      2. „Nie odpowiada”, gdy (i) ≥75% oceniających zgodziło się co do tego, który kształt dotykowy/wizualny (bouba lub kiki) został narysowany, i (ii) kształt ten nie odpowiadał prezentowanemu bodźcowi słuchowemu bouba/kiki w tej próbie.
      3. „Wynik niejednoznaczny”, gdy <75% oceniających zgodziło się co do tego, który kształt dotykowy/wizualny (bouba lub kiki) został narysowany. Usunąć obrazy z wynikiem „niejednoznacznym” / rysunki uczestnika z analiz statystycznych.
    14. W ujęciu zbiorczym z prób uznać uczestnika za „odpowiadającego”, gdy ≥75% jego narysowanych obrazów mentalnych: tzn. gdy kształty dotykowe/wizualne odpowiadają prezentowanym bodźcom słuchowym bouba/kiki.
    15. Dla każdej próby odnotować „rozpoznano”, „nie rozpoznano” i „wynik niejednoznaczny”, czyli:
      1. „Rozpoznano”, gdy (i) ≥66,6% oceniających zgodziło się, która grupa eksperymentalna (niewidoma, z opaskami lub wzrokowa) narysowała przedstawiony kształt i (ii) było to prawidłowe w tej próbie.
      2. „Nie rozpoznano”, gdy (i) ≥66,6% oceniających zgodziło się, która grupa eksperymentalna (niewidoma, z opaskami lub wzrokowa) narysowała przedstawiony kształt i (ii) nie było to prawidłowe w tej próbie.
      3. „Wynik niejednoznaczny”, gdy <66,6% oceniających zgodziło się, która grupa eksperymentalna (niewidoma, z opaskami lub wzrokowa) narysowała przedstawiony kształt. Wykluczyć z analiz statystycznych rozpoznania uczestników z wynikiem „niejednoznacznym”.
    16. W ujęciu zbiorczym z prób (po usunięciu wyników „niejednoznacznych”) uznać uczestnika za „rozpoznanego”, jeśli został rozpoznany w ≥75% wszystkich prób.

Wyniki eksperymentu Bouba-Kiki; rozróżnianie percepcji wizualnej; próby z uczestnikami z zawiązanymi oczami i widzącymi.
Rycina 2: Przykłady z kwestionariusza służącego do oceny danych z rysunków Kliknij tutaj, aby zobaczyć powiększoną wersję tej ryciny.

Wyniki

Efekt bouba/kiki

Sześciu z 12 uczestników, którzy byli wrodzeni ślepi (50%), dziewięciu z 12 osób miało zawiązane oczy (75%) i 10 z 12, którzy byli w pełni widzący (~83%) wykazało natychmiastowy dotykowy/wzrokowo-słuchowy efekt bouba/kiki: Oznacza to, że zarówno grupa z opaską na oczy, jak i grupa wizyjna były znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 3,00, p = 0,08 i χ2(1. N = 12) = 5,33, p = 0,02 (Eksperyment 1, Próba 1)17. W dokładnym teście Fishera nie stwierdzono żadnej znaczącej różnicy między trzema grupami eksperymentalnymi (Eksperyment 1, test wstępny)17. (Por. Tabela 1.)

Jeśli chodzi o długoterminowy efekt dotykowy/wzrokowo-słuchowy bouba/kiki: W pierwszym powtórzonym pomiarze wewnątrz grupy, dziewięciu uczestników, którzy byli wrodzenie ślepi, wykazało efekt bouba/kiki, wraz z dziewięcioma w pełni widzącymi i siedmioma z zawiązanymi oczami: Grupa niewidomych i widzących znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 3,00, p = 0,08 i χ2(1. N = 12) = 3,00, p = 0,08 (Eksperyment 1, Próba 4)17. W drugim powtórzonym pomiarze wewnątrzgrupowym, 11 uczestników w grupie niewidomych i widzących wykazało dotykowy/wzrokowo-słuchowy efekt bouba/kiki: Obie grupy eksperymentalne były ponownie znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 8,33, p = 0,00 i χ2(1. N = 12) = 8,33, p = 0,00; i siedmiu w grupie z opaską na oczy (Eksperyment 1, Próba 5)17. Wreszcie, w trzecim powtórzonym pomiarze w grupie i po teście, dziewięciu z 12 uczestników, którzy byli wrodzeni ślepi (75%), sześciu z 12 uczestników, którzy mieli zawiązane oczy (50%) i wszyscy z 12 uczestników, którzy byli w pełni widzący (100%) wykazywali dotykowy/wzrokowo-słuchowy efekt bouba/kiki; Zarówno grupa niewidoma, jak i grupa widząca ponownie znacznie przekroczyła poziom szansy (50%): χ2(1. N = 12) = 3,00, p = 0,08 i χ2(1. N = 12) = 12,00, p = 0,00 (Eksperyment 1, Próba 8)17. Dokładny test Fishera wykazał istotną różnicę między grupą z opaską na oczy a grupą wizyjną [p = 0,01. (Eksperyment 1, po teście)]17. (Por. Tabela 1.)

Grupa uczestnikówNatychmiastowy efekt bouba/kikiDługoterminowy efekt bouba/kiki
Test wstępnyPowtórzony zabieg 1Powtórzony środek 2Powtórzony pomiar 3/test końcowy
ślepy50,0%75,0%91,7%75,0%
Blindfold75,0%58,3%58,3%50,0%
widzenie83,3%75,0%91,7%100,0%

Tabela 1: Natychmiastowy i długoterminowy efekt bouba/kiki

Rozpoznawanie kształtów bouba i kiki

Jedenaście z 12 uczestników, którzy byli wrodzenie ślepi (~92%), dziewięciu z 12, którzy mieli zawiązane oczy (75%) i wszyscy z 12, którzy byli w pełni widzący (100%) natychmiast rozpoznali zgodne dotykowo-wzrokowe i słuchowe bouba/kiki; wszystkie trzy grupy eksperymentalne były znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 8,33, p = 0,00, χ2(1. N = 12) = 3,00, p = 0,08 i χ2(1. N = 12) = 12,00, p = 0,00 (Eksperyment 2, Próba 1)17. (Por. Tabela 2.)

Długoterminowo, 11 uczestników w grupie niewidomych rozpoznało dotykowe kształty bouba/kiki razem z dźwiękiem konkurującym, a 10 uczestników z dźwiękiem niezgodnym: Oba typy zgodności rozpoznane znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 8,33, p = 0,00 i χ2(1. N = 12) = 5,33, p = 0,02 (Eksperyment 2, Próba 1-8)17. Dziewięcioro uczestników w grupie z opaską na oczach rozpoznało kształty dotykowe wraz z pasującym dźwiękiem, a ośmiu uczestników razem z niepasującym dźwiękiem; Innymi słowy, zgodny kształt i dźwięk były znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 3,00, p = 0,08 (Eksperyment 2, Próba 1-8)17. Wszystkich 12 uczestników w grupie wizyjnej rozpoznało wizualne kształty bouba/kiki wraz z konkurencyjnym dźwiękiem, a sześciu uczestników z niezgodnym dźwiękiem: Zgodny kształt i dźwięk rozpoznany znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 12,00, p = 0,00 (Eksperyment 2, Próba 1-8)17. (Por. Tabela 2.)

Grupa uczestnikówNatychmiastowe rozpoznawanie kształtu bouba/kikiDługoterminowe rozpoznawanie kształtów bouba i kiki
Spójny kształt i dźwiękSpójny kształt i dźwiękNiepasujący kształt i dźwięk
ślepy91,7%91,7%83,3%
Blindfold75,0%75,0%66,7%
widzenie100,0%W 100%50,0%

Tabela 2: Natychmiastowe i długoterminowe rozpoznawanie kształtów bouba i kiki

Mentalne obrazy bouba i kiki

Ośmiu z 12 uczestników, którzy byli wrodzenie ślepi [~73% (z usuniętym jednym 'niejednoznacznym' rysunkiem uczestnika)], ośmiu z 12, którzy mieli zawiązane oczy [~89% (z usuniętymi trzema 'niejednoznacznymi' rysunkami uczestników)], i ośmiu z 12, którzy byli w pełni widzący [80% (z usuniętymi dwoma 'niejednoznacznymi' rysunkami uczestników)] natychmiast narysowało mentalny obraz: Kształt dotykowo-wizualny, który odpowiadał prezentowanemu dźwiękowemu bouba/kiki (Eksperyment 3, Próba 1)17. Zarówno grupa z opaską na oczy, jak i grupa wizyjna były znacznie powyżej poziomu szansy (50%): χ2(1. N = 9) = 5,44, p = 0,02 i χ2(1. N = 10) = 3,60, p = 0,06 (Eksperyment 3, Próba 1)17. (Por. tabela 3.)

Jeśli chodzi o długoterminowe obrazy mentalne bouba i kiki: 11 uczestników w grupie niewidomych, ośmiu w grupie z opaską na oczach i 12 w grupie wizyjnej narysowało dotykowe/wizualne kształty bouba/kiki, które odpowiadały prezentowanym dźwiękowym bouba/kiki (Eksperyment 3, Próba 1-4)17. Zarówno grupa niewidoma, jak i niedowidząca były znacznie powyżej poziomu szansy (50%): χ2(1. N = 12) = 8,33, p = 0,00 i χ2(1. N = 12) = 12,00, p = 0,00 (Eksperyment 3, Próba 1-4)17. Dokładny test Fishera wykazał istotną różnicę między grupą z opaską na oczach a grupą z wizją [p = 0,09 (Eksperyment 3, Próba 1-4)]17. (Por. tabela 3.)

.
Grupa uczestnikówNatychmiastowy obraz mentalny bouba/kikiDługoterminowe obrazy mentalne bouba i kiki
ślepy72,7 proc91,7%
Blindfold88,9%66,7%
widzenie80,0 %100,0%

Tabela 3: Natychmiastowe i długoterminowe obrazy bouba i kiki w pamięci

Ponadto. ~83% wszystkich rysunków uczestników zawierało najbardziej charakterystyczną cechę kształtu globalnych kształtów bouba i kiki: odpowiednio krzywą i kątem (Eksperyment 3, Próba 1-4)17. Rysunki uczestników różniły się ilością krzywych/kątów (np. jeden i pięć kątów dla słowa kiki: por. Rysunek 2, Próby 1, 6 i 9) oraz kierunkiem krzywych/kątów [tj. poziomy, pionowy lub ukośny: por. Rysunek 2, Próby 2, 5 i 8 (dźwięk bouba)], ale zazwyczaj nie zawierały globalnego kształtu bouba/kiki [Eksperyment 3, Próba 1-4 (por. rysunek 1; Rysunek 2)]17. Wreszcie, grupa eksperymentalna została rozpoznana w ~ 43% odpowiedzi wyników: pięciu uczestników w grupie niewidomej, trzech w grupie z opaską na oczy i pięciu w grupie ze wzrokiem; żadna grupa eksperymentalna nie była istotnie powyżej poziomu szansy [33,3% (Eksperyment 3, Próba 1-4)]17.

Efekt wizualnych obrazów i uczenia się

Prezentowany protokół z powodzeniem zbadał rolę obrazów wizualnych w efekcie bouba/kiki, czy trening w zauważaniu dotykowych/wzrokowo-słuchowych prawidłowości bouba i kiki wpłynął na efekt bouba/kiki i rozpoznawanie indywidualnych dotykowych/wizualnych kształtów bouba i kiki, i w końcu, jakie obrazy mentalne wytworzyły te prawidłowości dźwiękowe kształtu17. Włączając jedną grupę eksperymentalną bez doświadczenia wzrokowego (tj. grupę niewidomych) i dwie grupy eksperymentalne z doświadczeniem wzrokowym (tj. grupę z opaską na oczy i grupę wizyjną), możliwe było przetestowanie efektu obrazowania wzrokowego; Włączając jedną grupę eksperymentalną bez doświadczenia wzrokowego i z rozległym doświadczeniem dotykowym (tj. grupę niewidomych) oraz jedną grupę eksperymentalną z dużym doświadczeniem wzrokowym i bez doświadczenia dotykowego (tj. grupę z zawiązanymi oczami), możliwe było przetestowanie efektu treningu w zauważaniu prawidłowości dotykowo-słuchowych. Wyniki wyraźnie sugerują, że grupa z opaską na oczy korzystała z obrazów wizualnych, aby rozwiązać nowe problemy dotykowo-słuchowe, ale nie na dłuższą metę (Eksperyment 1-3); że trening w dostrzeganiu prawidłowości dźwiękowych kształtu bouba/kiki wpłynął na dotykowy/wzrokowo-słuchowy efekt bouba/kiki (Eksperyment 1) i rozpoznawanie indywidualnych dotykowo-wizualnych kształtów bouba i kiki [tj. razem z przystającym dźwiękiem (Eksperyment 2)], ale inaczej w każdej grupie eksperymentalnej (Eksperyment 1-2), oraz że wszystkie grupy eksperymentalne tworzyły mentalne obrazy najbardziej charakterystycznej cechy dotykowego/wzrokowo-słuchowego kształtu bouba (krzywa) i kiki [(kąt) Eksperyment 3. Por. Tabela 1; Tabela 2; Tabela 3]17. Ponadto, włączając powtarzające się wewnątrzgrupowe pomiary natychmiastowego i długoterminowego efektu (Eksperyment 1-3), możliwe było sprawdzenie, kiedy faktycznie wystąpił efekt zobrazowań wizualnych i uczenia się prawidłowości dźwiękowych; oraz poprzez włączenie trzech różnych zadań (tj. dotykowy/wzrokowo-słuchowy efekt bouba/kiki w eksperymencie 1, rozpoznawanie indywidualnych dotykowych/wizualnych kształtów bouba/kiki wraz z przystającym i nieprzystającym dźwiękiem w eksperymencie 2 oraz rysowanie mentalnych obrazów dźwięku bouba/kiki w eksperymencie 3), aby sprawdzić, jak silne były te efekty. Wyniki wyraźnie sugerują, że efekt obrazów wizualnych nie był solidny w długim okresie w każdym zadaniu, zwłaszcza w przypadku korzystania z dotyku dotykowego [por. grupa z opaską na oczy (Eksperyment 1-3)]; mając na uwadze, że efekt uczenia się prawidłowości dźwiękowych był taki, ale nie między zadaniami [por. grupa niewidomych i widzących (Eksperyment 1-3). Por. Tabela 1; Tabela 2; Tabela 3.]17

Dyskusja

Przedstawiony protokół jest odpowiedni do badania wpływu obrazowania wizualnego i uczenia się prawidłowości kształtowo-dźwiękowych, kiedy występują i jak bardzo są wytrzymałe; u konkretnych osób i grup osób.

Protokół ten byłby odpowiedni do testowania nie tylko dokładności, ale także czasu eksploracji: od momentu, gdy eksperymentator zdejmie lewą rękę z pięści uczestnika (w grupie ślepej i z zawiązanymi oczami) / kartonowej płyty lub piankowej tablicy (w grupie wizyjnej) do momentu, gdy uczestnik powie "tak". W analizach statystycznych najdłuższy czas eksploracji na próbę na grupę eksperymentalną zostanie podzielony na cztery, a liczba "szybkich", "średnich" i "wolnych" uczestników w każdej grupie eksperymentalnej zostanie policzona: "Szybko" przy użyciu ≤25% tego czasu eksploracji, "Średni" przy użyciu 26-75% i "Wolny" przy użyciu ≥75%. We wszystkich badaniach uczestnicy byliby liczeni jak w eksperymencie 2: to znaczy jako "szybcy", jeśli byliby liczeni jako "szybcy" w ≥66,6% wszystkich prób, jako "średni", jeśli byliby liczeni jako "średni" w ≥66,6% wszystkich prób i tak dalej. (Dla "niejednoznacznego", tj. uczestnika nie można zaliczyć do "szybkiego", "średniego" lub "wolnego", por. Eksperyment 3.) Możliwe byłoby badanie czasu eksploracji dla poprawnych i nieprawidłowych odpowiedzi oddzielnie, w zależności od wielkości próby i/lub liczby poprawnych i nieprawidłowych odpowiedzi. Niezależnie od tego, czy chodzi o dokładność testów, czas eksploracji, czy jedno i drugie, istnieją krytyczne kroki protokołu, których należy przestrzegać: Trzy eksperymenty powinny być przeprowadzone w ustalonej kolejności, a ich próby powinny być przedstawione w ustalonej kolejności dla wszystkich uczestników. Uczestnicy nie powinni być świadomi, że materiały testowe we wszystkich trzech eksperymentach obejmują bouba i kiki. Co więcej, informacje słuchowe z odtwarzacza MP3 powinny być odtwarzane tylko raz i nie powinny być powtarzane ustnie uczestnikom (wszystkie trzy eksperymenty). W Eksperymencie 1 i Eksperymencie 2 dotykowo-wzrokowe bouba i kiki powinny być przedstawione w tej samej pozycji i orientacji. W przypadku grupy wizyjnej (we wszystkich trzech eksperymentach) materiały testowe powinny być umieszczone za płytą kartonową/tekturą piankową. Wreszcie, w grupie z opaską na oczy, uczestnicy nie powinni zdejmować opaski z oczu, dopóki Eksperyment 3 nie zostanie zakończony. Kroki te mają na celu zapewnienie, że ilość i rodzaj informacji o dotykowo-wzrokowych i słuchowych bouba i kiki jest utrzymywana pod kontrolą we wszystkich grupach eksperymentalnych. Ponadto w eksperymencie 2 kluczowe jest zaprezentowanie słuchowej bouby/kiki, gdy tylko uczestnik zacznie eksplorować dotykowo-wzrokową boubę/kiki. Zapewni to prezentację informacji multimodalnych (zgodnych lub niezgodnych). Co więcej, protokół ten byłby również odpowiedni do testowania innych grup osób. Aby je zintegrować, takie grupy uczestników można dodać jako oddzielne grupy eksperymentalne: na przykład grupa percepcji kolorów i grupa percepcji kształtów; 22 grupa nagłej utraty wzroku i grupa postępującej utraty wzroku; Można dodać 20,21 i/lub określone grupy osób z upośledzeniem słuchu i/lub zaburzeniami ze spektrum autyzmu13.

Dzięki temu protokołowi możliwe byłoby ustalenie normy grupowej (dla dokładności i/lub czasu eksploracji) dla określonych grup w odniesieniu do każdego natychmiastowego i długoterminowego efektu, w tym każdego powtórzonego pomiaru wewnątrzgrupowego i/lub zadania; Następnie, aby przetestować jednostki w stosunku do ich normy grupowej: Czy jakaś poszczególna osoba lub cała grupa potrzebuje dalszego treningu w dostrzeganiu prawidłowości dźwiękowych kształtów. Norma grupowa dla każdego natychmiastowego i długoterminowego efektu, obejmująca każdy powtórzony pomiar wewnątrzgrupowy i/lub zadanie, umożliwiłaby również określenie, jakiego rodzaju trening jest potrzebny, aby zauważyć prawidłowości kształtu dźwięku: Na przykład więcej prób z dotykowym/wzrokowo-słuchowym efektem bouba/kiki (Eksperyment 1) i/lub więcej prób z przystającym i nieprzystającym dotykowym/wizualnym kształtem i dźwiękiem (Eksperyment 2). Rzeczywiście, możliwe byłoby zwiększenie zarówno liczby prób, jak i liczby powtórzonych pomiarów wewnątrzgrupowych w każdym zadaniu, a także zmiana czasu między nimi, co pozwoliłoby na bardziej zindywidualizowane szkolenie i testowanie.

Protokół ten wymagałby jednak modyfikacji, jeśli testowanie, jaki rodzaj materiałów (np. bouba lub kiki, wypełniony lub zarysowany kształt dotykowy/wizualny i/lub dźwiękowy dźwięk lub słowo) najlepiej zapewnia naukę prawidłowości dźwięku kształtu. Możliwym sposobem modyfikacji tego protokołu może być przedstawienie różnych materiałów w blokach: na przykład wypełnione kształty dotykowe/wizualne i dźwięki słuchowe i/lub zarysowane kształty dotykowe/wizualne i słowo słuchowe (Eksperyment 1). Bloki te można było prezentować w losowej kolejności wszystkim uczestnikom w jednej grupie eksperymentalnej; lub alternatywnie, każdy z czterech bloków, aby oddzielić grupy eksperymentalne (Eksperyment 1). Protokół ten wymagałby również modyfikacji, gdyby testowano jeszcze bardziej solidność obrazów wizualnych i/lub wyuczonych prawidłowości kształtu dźwięku w ramach zadań i między nimi. Modyfikacja może polegać na dodaniu powtarzających się działań w obrębie grupy o innym kształcie dotykowym/wizualnym i/lub dźwiękowym niż te uwzględnione w szkoleniu; na przykład z dźwiękiem słuchowym dla "maa-boo-maa" i "tuh-kee-tee" po treningu z dotykowymi/wizualnymi kształtami bouba i kiki oraz słowami słuchowymi (Eksperyment 1)1,3,4,10,11,12,13,14,15,16 . Inną opcją może być przedstawienie trzeciego kształtu dotykowego/wizualnego, który nie jest głównie zakrzywiony/kanciasty, wraz z dotykowymi/wizualnymi kształtami bouba i kiki w eksperymencie 1 10,11,12,13,14,15,16. Słuchowe słowo i dźwięk mogą zostać stworzone dla tego dotykowo-wizualnego kształtu, aby wytworzyć trzecią parę kształt-słowo14,15,16 i trzecią parę kształt-dźwięk17 (Eksperyment 1). Para kształt-dźwięk może być następnie włączona do Eksperymentu 2 jako próby złapania; lub alternatywnie jako regularne próby zgodne i z odpowiadającymi im próbami nieprzystającymi. Wreszcie, dźwięk (z Eksperymentu 2 i Eksperymentu 1) i/lub słowo nonsensowne (z Eksperymentu 1) mogą być prezentowane w Eksperymencie 3. Trzecia opcja mogłaby polegać na tym, że Eksperyment 2 i Eksperyment 3 nie zostałyby w ogóle przeprowadzone, ale raczej włączono je jako zadania do powtarzanych pomiarów wewnątrzgrupowych w Eksperymencie 1, w kolejności losowej.

Wyjątkowość przedstawionego protokołu polega na tym, że utrzymuje on pod kontrolą zarówno obrazy wizualne, jak i informacje sensoryczne podczas treningu i testów. Jest elastyczny: duże i małe próbki oraz konkretne osoby mogą być testowane przeciwko sobie (por. testy wewnątrzgrupowe) i/lub innym grupom osób (por. testy międzygrupowe). Możliwe jest testowanie zarówno dokładności, jak i czasu eksploracji, zmiana liczby prób i powtórzonych pomiarów wewnątrzgrupowych w każdym eksperymencie oraz czasu między nimi, a także zmiana lub nawet załamanie kolejności prób i/lub eksperymentów.

Oświadczenia

Autorzy nie mają nic do ujawnienia.

Podziękowania

Fundatorzy:
Prace zostały sfinansowane przez program Unii Europejskiej w zakresie badań naukowych i innowacji Horyzont 2020 w ramach działań "Maria Skłodowska-Curie" (umowa o grant nr 657440) oraz Norweskie Stowarzyszenie Niewidomych i Słabowidzących.

Makijaż filmowy:
Wizażystka Rachael Parrey.

Materiały

Lista materiałów użytych w tym artykule
NazwaFirmaNumer katalogowyKomentarze
boubą/kiki30 mm w poziomie, 23 mm w pionie i 0,5 mm grubości m w pionie, 0,5 mm wysokości linii i 0,5 mm wytłoczonej wysokości
Bouba/kiki obrysowane30 mm w poziomie, 23 mm w pionie i 0,5 mm grubości m w pionie, 0,5 mm wysokości linii i 0,5 mm wytłoczonej wysokości
Dźwięk Bouba/kiki (fala sinusoidalna)
Słowo Bouba/kiki (ludzki głos)
Płyta kartonowa/tektura piankowa do oklejania bouba/kiki (biała)Ryman230461860297 mm poziomo x 210 pionowo 0 mm pionowo
Papier do kopiowania [biały (80 g/m2 )]Ryman250030000210 mm poziomy x 148 mm pionowy
Płyta piankowa do kart obrazkowych bouba/kiki [biała (grubość 5 mm)]Ryman23046186050 mm pozioma x 50 mm pionowa
Odtwarzacz MP3 (smartfon z zainstalowaną aplikacją VLC na iOS)Magazyn
Folia do tłoczenia z tworzywa sztucznegoRNIB SklepZM04210 mm poziomo x 148 mm
pionowo Pióro kulkowe [czarne (końcówka 1,0 mm)]Ryman827134001
Mata gumowaRNIB ShopLC177230 mm poziomo x 150 mm pionowo
Styl siodłaRNIB SklepB511
Papier pęczniejącyZychem Sp. z o.oZytex2 papier50 mm poziomy x 50 mm pionowy
Wypełnione samochodowy.

Bibliografia

  1. Ramachandran, V. S., Hubbard, E. M. Synaesthesia - A Window Into Perception, Thought and Language. Journal of Consciousness Studies. 8 (12), 3-34 (2001).
  2. Bremner, A. J., Caparos, S., Davidoff, J., de Fockert, J., Linnell, K. J., Spence, C. Bouba’’and ‘‘Kiki’’ in Namibia? A remote culture make similar sound-shape matches, but different taste-shape matches to Westerners. Cognition. 126 (2), 165-172 (2013).
  3. Davis, R. The fitness of names to drawings. A cross-cultural study in Tanganyika. British Journal of Psychology. 52 (3), 259-268 (1961).
  4. Maurer, D., Pathman, T., Mondloch, C. J. The shape of boubas: sound-shape correspondences in toddlers and adults. Developmental Science. 9 (3), 316-322 (2006).
  5. Ozturk, O., Krehm, M., Vouloumanos, A. Sound-symbolism in infancy: Evidence for sound-Shape cross-modal correspondences in 4-months-olds. Journal of Experimental Child Psychology. 114 (2), 173-186 (2013).
  6. Bar, M., Neta, M. Humans Prefer Curved Visual Objects. Psychological Science. 17 (8), 645-648 (2006).
  7. Bertamini, M., Palumbo, L., Gheorghes, T. N., Galatsidas, M. Do observers like curvature or do they dislike angularity? British Journal of Psychology. 107 (1), 154-178 (2016).
  8. Quinn, P. C., Brown, C. R., Streppa, M. L. Perceptual Organization of Complex Visual Configurations by Young Infants. Infant Behavior and Development. 20 (1), 35-46 (1997).
  9. Silvia, P. J., Barona, C. M. Do people prefer curved objects? Angularity, expertise, and aesthetic preference. Empirical Studies of the Arts. 27 (1), 25-42 (2009).
  10. Nielsen, A., Rendall, D. The Sound of Round: Evaluating the Sound-Symbolic Role of Consonants in the Classic Takete-Maluma Phenomenon. Canadian Journal of Experimental Psychology. 65 (2), 115-124 (2011).
  11. D’Onofrio, A. Phonetic Detail and Dimensionality in Sound-shape Correspondences: Refining the Bouba-Kiki Paradigm. Language and Speech. 57 (3), 367-393 (2014).
  12. Westbury, C., Hollis, G., Sidhu, D. M., Pexman, P. M. Weighing up the evidence for sound symbolism: Distributional properties predict cue strength. Journal of Memory and Language. 99, 122-150 (2018).
  13. Oberman, L. M., Ramachandran, V. S. Preliminary evidence for deficits in multisensory integration in autism spectrum disorders: The mirror neuron hypothesis. Social Neuroscience. 3 (3-4), 348-355 (2008).
  14. Köhler, W. Gestalt psychology. , Liveright. New York, NY. (1929).
  15. Monaghan, P., Mattock, K., Walker, P. The Role of Sound Symbolism in Language Learning. Journal of Experimental Psychology: Learning, Memory, and Cognition. 38 (5), 1152-1164 (2012).
  16. Fort, M., Martin, A., Peperkamp, S. Consonants are More Important than Vowels in the Bouba-kiki Effect. Language and Speech. 58 (2), 247-266 (2015).
  17. Graven, T., Desebrock, C. Bouba or kiki with and without vision: Shape-audio regularities and mental images. Acta Psychologica. 188, 200-212 (2018).
  18. Fryer, L., Freeman, J., Pring, L. Touching words is not enough: How visual experience influences haptic-auditory associations in the “Bouba-Kiki” effect. Cognition. 132 (2), 164-173 (2014).
  19. Fontana, F. Association of Haptic Trajectories to Takete and Maluma. Lecture Notes in Computer Science. 7989, 60-68 (2013).
  20. Graven, T. How blind individuals discriminate braille characters: An identification and comparison of three discrimination strategies. British Journal of Visual Impairment. 33 (2), 80-95 (2015).
  21. Graven, T. How attention is allocated when using haptic touch: Shape feature distinction and discrimination strategy. EuroHaptics 2016, Part 1. Bello, F., Kajimoto, H., Visell, Y. , Springer International Publishing AG. Switzerland, Heidelberg. Part of the Lecture Notes in Computer Science book series (LNCS, volume 9774) 380-393 (2016).
  22. WHO. ICD-10 version: 2016 (International Statistical Classification of Diseases and Related Health Problems 10th revision). Chapter VII Diseases of the eye and adnexa (H00-H59). , Available from: http://apps.who.int/classifications/icd10/browse/2016/en#/H53-H54 (2019).
  23. Heller, M. A., Calcaterra, J. A., Burson, L. L., Tyler, L. A. Tactual picture identification by blind and sighted people: Effects of providing categorical information. Perception & Psychophysics. 58 (2), 310-323 (1996).
  24. Heller, M. A., Gentaz, E. Psychology of Touch and Blindness. , Psychology Press. New York, NY and Hove, East Sussex. (2014).
  25. Pathak, K., Pring, L. Tactual picture recognition in congenitally blind and sighted children. Applied Cognitive Psychology. 3 (4), 337-350 (1989).

Przedruki i uprawnienia

Tagi

Efekt Bouba Kikigrupa z opaskami na oczachkszta ty dotykoweasocjacje d wi koweobrazy mentalneosoby niewidome od urodzeniapomiary wewn trzgrupowoweprotok eksperymentalny
Badanie wpływu obrazów wizualnych i uczenia się prawidłowości dźwiękowych kształtów na boubę i kiki
Skontaktuj się z nami
Poleć bibliotece

Prywatność

Warunki Korzystania

Zasady

Copyright © 2026 MyJoVE Corporation. Wszelkie prawa zastrzeżone.