Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
JoVE Journal Behavior
Click here for the English version

Behavior

Исследование влияния визуальных изображений и обучения формы-аудио регулярности на Буба и Кики

Published: September 13, 2019 doi: 10.3791/59954
Automatic Translation
1, 1
1Department of Experimental Psychology, University of Oxford

Summary

Целью представленного протокола является изучение роли визуальных изображений в бубе/кики-эффекте, независимо от того, влияет ли обучение на замечание бубы/кики формы-аудио регулярности на бубу/кики-эффект и признание отдельных форм бубы и кики, и, наконец, то, что психические образы эти закономерности производить.

Abstract

В этой статье представлен протокол для изучения роли визуальных изображений в бубе / кики-эффект, будь то обучение в заметив буба / кики формы-аудио регулярности влияет на буба / кики-эффект и признание отдельных форм бубы и кики, и, наконец, то, что психические образы эти закономерности производить. Для генерации бубы/кики формы-аудио регулярности, было два типа форм (заполненные; изложенные) и два типа звука (слово; не-слово звука). Три группы людей участвовали в трех экспериментах: слепые, с завязанными глазами и зрение. Эксперименты проводились в фиксированном порядке между участниками, без перерыва между ними. В эксперименте 1 (предтест-пост-тест дизайн с тремя повторными в рамках группы меры) участникам было предложено выбрать форму они связаны со слуховой буба / кики; в Эксперименте 2 (в рамках предмета дизайна), чтобы назвать одну форму и некоторые аудио (иногда congruous, иногда нелепо) как "буба" или "кики", и в эксперименте 3 (после испытания только дизайн), чтобы нарисовать форму, они связаны со слуховой буба / кики. Полученные результаты свидетельствуют о том, что группа с завязанными глазами опирается на визуальные образы для решения новых проблем, но не в долгосрочной перспективе; что обучение замечанию бубы/кики формы-аудио регулярности влияет на бубу/кики-эффект и признание отдельных форм бубы и кики, но по-разному в каждой экспериментальной группе; и что все экспериментальные группы создают умственные образы наиболее характерной черты формы бубы (кривой) и кики (угол). В самом деле, эффект визуальных изображений является надежным для всех задач, но не в долгосрочной перспективе; эффект обучения формы-аудио регулярности является надежным долгосрочной перспективе, но не между задачами. Представленный протокол подходит для изучения влияния визуальных изображений и изучения формы-аудио закономерностей, когда они происходят и насколько они надежны; у конкретных лиц и групп лиц. Этот протокол уникален тем, что он держит под контролем как визуальные изображения, так и сенсорную информацию во время обучения и тестирования.

Introduction

95% населения мира показывает слухово-визуальный буба/кики-эффект, связывая визуально округлую форму с произнесенное слово «буба»; и визуально угловатую форму с произнесенное слово «кики»; либо с формой или словом1. Эффект бубы/кики предшествует изучению языка; это происходит через языки1,2,3,4,5, с обеих буба и кики (ср. люди предпочтение визуальных кривых над визуальными углами6,7 , 8 , 9),и это зависит от сочетания гласных и согласных (например, это не происходит с "биби" и "куку"). 1 , 5 , 10 Лет , 11 Год , 12. Эта ассоциация форм-слова происходит с другими парами формы и слова также, по тех пор пока они главным образом изогнуты, как bouba, и главным образом угловатый, как kiki11,13; и / или они имеют такое же сочетание гласных и согласных, как "буба" и "кики", например: "Балума" и "takete", "малума" и "takete", "uloomo" и "takete", "маа-бу-маа" и "тух-ки-ти"1, 3 4,10,11,12,14. В самом деле, люди связывают округлые визуальные формы с произнесенные слова, содержащие континуантные согласные (такие как /l/ и /м/) и открытыми гласными (такими как /:', и /:/), и визуальные угловые формы с произнесенные слова, содержащие плосивые согласные (такие как / к/ и /т/) и закрыть передние гласные (например, (/я/ и /I/)11,12,15,16. Они находятся под влиянием больше согласных, чем гласных, особенно безголосых (например, /k/ и /t/)11,12,15,16. Действительно, кажется, особенности глобальных форм - их кривые и углы17 - и звук произнесенных слов - их мелодия17 - являются наиболее важными, в отличие от глобальных форм и слов себя.

Одно исследование исследовало буба / кики-эффект с тактильной бубы и кики вместо визуальной формы буба / кики и обнаружили, что участники, которые были слабовидящими показали значительно менее надежный буба / кики-эффект (64%) чем полностью зрячие (90%)18. Это исследование утверждало, что значительно менее надежный буба / кики-эффект среди участников, которые были слепы и частично зрячих было вызвано отсутствием визуальных изображений: Полностью зрячие участники заметили закономерности в их среде, которые не являются легко доступны, когда зрение нарушается18. Это не ясно из этого исследования, однако, является ли визуальные изображения необходимы для буба / кики-эффект происходит: Только шесть из 42 участников с нарушениями зрения были врожденно полностьюслепых 18, таким образом, не было визуальных изображений на всех. Кроме того, другие участники, ни один из них с завязанными глазами, возможно, наблюдали движения губ экспериментатора, объявляя буба / кики слово - округлые движения губ при объявлении "буба" и угловые движения губ при объявлении "кики"1 , 18 - показ тактильной-визуальной бубы/кики-эффектвместо рисования на каких-либо визуальных образах. Кроме того, не было исследовано любое влияние замечания тактильно-слуховых закономерностей, например, путем сравнения бубы/кики-эффекта с пробной первой и пробной четверки вместо расчета эффекта во всех четырех исследованиях. Кроме того, тактильные бубы и кики были довольно разными в ходе испытаний: в испытаниях один и два они были 3D и 2D-формами (изогнутые v угловой); в испытаниях три и четыре, идентичные по форме (круг) и непохожие по текстуре (гладкий v грубый; гладкий V колючий)18. В родственном вене, одно исследование исследовало кинестетик-слуховой буба / кики-эффект в с завязанными глазами (полностью зрячих) лиц и обнаружили, что после двухминутного периода обучения проведения робота стилус запрограммирован рисовать траектории буба и кики формы, 82% показали буба / кики-эффект19. Однако из этого исследования не ясно, произошел ли эффект бубы/кики из-за периода обучения: исследование не включало ни предварительного теста, ни контрольную группу.

С этой целью мы исследовали роль визуальных изображений в бубе/кики-эффекте, независимо от того, повлияла ли подготовка к тактильной/визуально-слуховой бубе и кики-эффекту и признанию индивидуальной тактильной/визуальной бубы и Кики формы, и, наконец, какие психические образы этих форм-аудио регулярности производится17. Для генерации бубы / кики формы-аудио регулярности - не только, например, кики-формы / кики-слово особенности1 - это исследование включало два типа тактильных / визуальные формы буба / кики (заполнены; изложены) и два типа слуховых буба / кики слово; не-слово звук)»17. Три группы людей участвовали в трех экспериментах: слепой (N No 12), с завязанными глазами (N No 12) и зрением (N No 12). Эксперименты проводились в фиксированном порядке между участниками и без перерыва между ними, чтобы держать под контролем количество участников и тип опыта с бубой и кики. В эксперименте 1 (предтест-пост-тест дизайн с тремя повторными в рамках группы меры) участникам было предложено выбрать тактильные / визуальные формы они связаны со слуховой буба / кики; в эксперименте 2 (в рамках предмета дизайна), чтобы назвать одну тактильную/визуальную форму и некоторые аудио (иногда congruous, иногда нелепо) как "буба" или "кики", и в эксперименте 3, (после тестирования только дизайн), чтобы нарисовать тактильную / визуальную форму они связаны с слуховой буба/кики17. В целом, это исследование показало, что эффект визуальных изображений является надежным по всем задачам, но не долгосрочный в рамках каждой задачи, в то время как эффект обучения формы-аудио регулярности является надежным долгосрочной перспективе в рамках каждой задачи, но не через задачи17. В этой статье представлен протокол из этого исследования17. Представленный протокол подходит для изучения влияния визуальных изображений и изучения формы-аудио закономерностей, когда они происходят и насколько они надежны; у конкретных лиц и групп лиц. Этот протокол уникален тем, что он держит под контролем как визуальные изображения, так и сенсорную информацию во время обучения и тестирования.

Protocol

Межотделные исследования медицинских наук Комитета по этике (IDREC) Оксфордского университета предоставили одобрение на этот протокол (Ref No: MS-IDREC-C1-2015-200, R46287/RE002, и R42687/RE004).

1. Дизайн и условия

  1. Проведите три эксперимента в следующем фиксированном порядке со всеми участниками: Эксперимент 1, Эксперимент 2 и Эксперимент 3, без перерыва между ними. Убедитесь, что все участники эксперимента 2 участвовали в Эксперименте 1 и все участники эксперимента 3 также в Эксперименте 2 (и Эксперимент 1).
  2. Проведение эксперимента 1 — предтестовый послетестовый дизайн с тремя экспериментальными группами: слепыми, с завязанными глазами и зрением; и три повторных внутригрупповых мера. Представить испытания в установленном порядке для всех участников. (Общее количество испытаний: 8.)
    1. Провести предварительный тест (Испытание 1), чтобы проверить мгновенный тактильный/визуальный-слуховой буба/кики-эффект.
    2. Провести первую повторную внутригрупповую меру (Trial 4) для проверки влияния повторяющейся тактильной/визуальной формы (либо заполненной, либо очерченной) и разнообразного звука (слово и звук, не связанный со словом).
    3. Провести вторую внутригрупповую меру (Trial 5) для проверки влияния новой тактильной/визуальной формы (либо изложенной, либо заполненной) и разнообразного звука (слово и звук, не связанный со словом).
    4. Провести третью внутригрупповую меру и после тестирования (Trial 8) для проверки влияния разнообразной тактильной/визуальной формы (заполненной и очерченной) и разнообразного звука (слово и звук, не связанный с словом).
    5. Случайно назначить, какой тип тактильной / визуальной формы бубы / кики представить в испытаниях 1-4 (либо заполнены или изложены). Представляем другой тип в испытаниях 4-8. Затем, случайно назначить, какие слуховые слова (либо буба или кики), чтобы представить в Испытании 1, и какие слуховые буба / кики (либо буба или кики и либо слово или не-слово звука), чтобы представить в каждом из испытаний 2-8.
      ПРИМЕЧАНИЕ: Убедитесь, что в общей сложности, Есть четыре бубы и четыре кики испытаний; четыре заполненные и четыре очерченных тактильных/визуальных проб; четыре слуховые слова и четыре слуховых не-слово звуковых испытаний.
  3. Проведение эксперимента 2 - в рамках предмета дизайн, с тремя экспериментальными группами: слепые, с завязанными глазами, и видение; и две внутригрупповые меры. Представить испытания в установленном порядке для всех участников. (Общее количество испытаний: 8)
    1. Проверьте мгновенное распознавание конгрузированной (буба/кики и буба/кики) формы-аудио (Испытание 1).
    2. Проверьте распознавание (а) конлеарных (буба/кики) и (б) нелепых (буба/кики) формы-аудио "через четыре испытания на тип конлеобразности (Испытания 1-8) ".
    3. Случайно назначить, какой тип тактильной / визуальной формы бубы / кики (либо заполнены или изложены), чтобы представить в испытаниях 1-8. Затем, случайно назначить, какие совмещете тактильные / визуальные формы и слуховой не-слово звука (либо буба буба или кики) представить в испытании 1, и, наконец, какой тип congruousness (либо конгрузированные или нелепые тактильные / визуальные буба / кики формы bouba/kiki non-word sound) для представления в каждом из Испытаний 2-8.
      ПРИМЕЧАНИЕ: Убедитесь, что в общей сложности, Есть четыре тактильные / визуальные бубы и четыре тактильные / визуальные кики испытаний; четыре заполненные и четыре очерченных тактильных/визуальных испытания; четыре конлеированных и четыре нелепых (форма и не-слово звук) испытаний. (Слуховое слово буба/кики не включено в этот эксперимент.)
  4. Проведение эксперимента 3 - после теста только дизайн, с тремя экспериментальными группами: слепые, с завязанными глазами, и зрение. Представить испытания в установленном порядке всем участникам (общее количество испытаний: 4).
    1. Проверьте, какие умственные образы обучение в заметив форму-аудио регулярности (т.е. Эксперимент 1 и эксперимент 2) подготовили, в четырех отдельных испытаний: Буба слово, буба не-слово звук, кики слово, и кики не-слово звука.
    2. Случайно назначить какой тип слуховой буба / кики (либо буба или кики и либо слово или не-слово звук), чтобы представить в каждом из испытаний 1-4.
      ПРИМЕЧАНИЕ: Убедитесь, что в общей сложности, Есть один слуховой буба слово суда, один слуховой буба не-слово звуковое испытание, один слуховой кики слово суда, и один слуховой кики не слово звукового суда.

2. Участники

  1. Набрать одну группу участников, которые врожденно слепы; то есть, ослепленный менее чем через четыре месяца после рождения20,21,22: Категории 5: общая слепота; и 4: Восприятие света (восприятие источника света) и световая проекция (восприятие, где находится источник света)22. Убедитесь, что они все Брайль читателей.
  2. Наймите одну группу полностью зрячих участников, в два раза больше группы участников, которые врожденно слепы. Убедитесь, что все они имеют нормальный / исправлены к нормальному зрению.
    ПРИМЕЧАНИЕ: Убедитесь, что все участники в возрасте от 18 до 70 лет, с нормальным / исправлены к нормальному слуху, без когнитивных задержки или нарушения, ни каких-либо физических недостатков, и что все они наивны для бубы / кики-эффект.
  3. Случайно отсвативаем половину группы полностью зрячих участников группе с завязанными глазами, а другую половину — группе видения.
    ПРИМЕЧАНИЕ: Участники, тип тактильной/визуальной формы бубы/кики (ы), тип слуховой бубы/кики, и конгрузность все случайным образом присваиваются одной из двух категорий: Слепой или зрение; заполнены или изложены; слово или не-слово звука; буба или кики; конгруповые или нелепые. Таким образом, случайное назначение может быть выполнено либо компьютерной программой, либо вручную (например, путем подброски монеты).

3. Материалы

  1. Производите тактильные/визуальные материалы
    1. Перенесите визуальные формы бубы/кики (30 х 23 мм) на набухающую бумагу, либо печатая их с персонального компьютера, либо спомощьи фотокопирования с картинки. Убедитесь в том, чтобы передать два типа визуальных форм буба / кики: Один заполнены и один очертил »1,5 pt. линии). Cf. Рисунок 1.
    2. Передайте набухаемую бумагу через тепловой фузер. Убедитесь, что тактильные формы бубы/кики поднимаются на высоту 0,5 мм. Кроме того, закажите тактильные/визуальные формы бубы/кики из службы транскрипции для людей с нарушениями зрения (с прикрепленным файлом PDF).
    3. Клей набухаем уюрку на пенную доску (белая (толщина 5 мм)». Используйте спрей клей.
    4. Вырезать набухают бумаги и пены борту в размере (50 х 50 мм), то есть, чтобы создать четыре отдельных тактильных / визуальные карты изображения: Буба заполнены, буба очерчены, кики заполнены, и кики очерчены (ср. Рисунок 1). Используйте нож для резки обоев.
    5. Вырезать картонную пластину / пенопластовую доску для покрытия тактильных/визуальных форм бубы/кики в размерах (297 x 210 мм). Используйте нож для резки обоев. Кроме того, закажите формат A4.
    6. Вырезать копию бумаги / пластиковой тиснением пленки в размерах (210 х 148 мм). Используйте гильотину. Кроме того, закажите формат A5.
    7. Разрежьте резиновый коврик на размер (230 x 150 мм). Используйте нож или ножницы. Кроме того, заказать раму руки Луны и разобрать его, чтобы раскрыть резиновый коврик.

Figure 1
Рисунок 1: Два типа форм бубы/кики: Заполненные и изложенные Пожалуйста, нажмите здесь, чтобы просмотреть большую версию этой цифры.

  1. Продукция слуховых материалов
    1. Запись говорил буба (ср. Аудио 1) и кики слова. Сохранить в формате MP3: Один файл для слова буба и один для слова кики.
    2. Создавайте звуки бубы и кики, имитирующие продолжительность и частоту (т.е. мелодию) произнесенных слов «буба» и «кики». Используйте генератор звуковых волн и шаг изгиба. Сохранить в формате MP3: Один файл для звука бубы (ср. Аудио 2) и один для звука кики.
    3. Установите приложение VLC для iOS на смартфон. Перенесите файлы MP3 для бубы и кики в приложение VLC. Сохраните их как четыре отдельных файла: звук бубы, слово буба, звук кики и слово кики.

Аудио 1: Буба слово Пожалуйста, нажмите здесь, чтобы загрузить этот файл.

Аудио 2: Буба звук Пожалуйста, нажмите здесь, чтобы загрузить этот файл.

4. Процедура и скоринг

  1. Настройка тестового сеанса
    1. Проведите три эксперимента в тихой комнате нейтрального цвета, и со всеми участниками индивидуально. Попросите участников группы с завязанными глазами надеть повязку, прежде чем настроить тактильные/визуально-слуховые материалы, и убедиться, что они держат повязку на глазах на протяжении всего и между всеми тремя экспериментами.
  2. Настройка тактильных/визуальных материалов
    1. Поместите резиновый коврик прямо перед участником. Затем, место (Эксперимент 1) две тактильные / визуальные формы бубы и кики (Эксперимент 2), один тактильный / визуальный буба или кики формы и (Эксперимент 3), копия бумаги / пластиковой тиснением пленки на верхней части резиновой коврик.
      ПРИМЕЧАНИЕ: В эксперименте 1, убедитесь, что всегда присутствует буба слева и кики справа; и в обоих экспериментах 1 и Эксперимент 2, чтобы всегда представить их в той же ориентации (ср. Рисунок 1): Для повышения способности участников формировать психические образы формы бубы и кики без вмешательства с их позиции и / или ориентации на резиновый коврик. Убедитесь в том, чтобы не информировать участников об этой фиксированной презентации тактильной / визуальной формы бубы и кики. В видении-группы, всегда настроить тестовый материал за картонной пластины / пены борту, чтобы предотвратить эти участники от принятия украдкой заглянуть на то, что в магазине.
  3. Настройка слуховых материалов
    1. Поместите MP3-плеер прямо перед участником (по другую сторону резиновой коврики), с ближе всего к ним громкоговорителем.
      ПРИМЕЧАНИЕ: Не повторяйте назад устно слуховую информацию от mp3 игрока: Для того чтобы предотвратить участников в взянии-группе от наблюдать движения губы на bouba/kiki слово-испытания1,и таким образом держать под управлением через все экспериментальные группы количество и тип сенсорной информации.
  4. Проведение эксперимента 1, эксперимента 2 и эксперимента 3
    1. Предложите участникам, которые будут изучать и рисовать тактильные формы (т.е. слепые и с завязанными глазами группы) для изучения резиновый коврик (на ощупь): Например, для размера и текстуры, без каких-либо тактильных / визуальных карт изображения и / или копировать бумаги или пластика тиснение пленки размещены на вершине.
  5. Проведение эксперимента 1
    1. Объясните, что на резиновой коврике будут представлены две карты с картинками, каждая из которых представляет тактильную/визуальную форму. Затем объясните, что некоторые аудио будут воспроизводиться с MP3-плеера и что этот звук будет соответствовать одной из тактильных/визуальных форм.
      ПРИМЕЧАНИЕ: Не информируйте участников о двух типах тактильных/визуальных бубы/кики (заполненных и изложенных) и двух типах слуховой бубы/кики (звук и слово).
    2. Поместите две тактильные/визуальные карты изображения на резиновый коврик (ср. Рисунок 1).
    3. В группе слепых и с завязанными глазами попросите участника сделать кулак обеими руками и поставить кулаки поверх представленных тактильных/визуальных карточек, направляя их при необходимости. Поместите левую руку на кулаки участника.
    4. Попросите участника изучить две тактильные/визуальные формы, слепую и группу с завязанными глазами на ощупь и видение-группу по зрению, когда рука поверх кулаков (слепая и с завязанными глазами-группа) / картонная пластина или пенная доска (видение-группа) удаляется, и сказать ' Да, когда они закончили свое исследование.
    5. Снимите левую руку с кулаков участника (в группе с завязанными глазами и повязкой на глазах) / картонной пластиной или пенопластовой доской (в группе зрения).
    6. Как только участник говорит "да", покройте тактильные/визуальные картинки.
    7. Воспроизведение аудио с MP3-плеера.
      ПРИМЕЧАНИЕ: Воспроизведение слуховой информации от MP3-плеера только один раз и не повторяйте ее в устной форме участникам.
    8. Попросите участника сигнализировать, какую тактильные/визуальные формы они ассоциируют с аудио, например, говоря «левый/правый», «извилс/угловой» или «цветок/звезда», и обратите внимание на данную форму. Не отвечайте на ответ участника.
    9. Оценка того, является ли ответ участника правильным или неверным.
      ПРИМЕЧАНИЕ: Повторите 4.5.2-4.5.9 для всех 8 проб.
  6. Эксперимент по проведению 2
    1. Объясните, что одна карта с изображением тактильной/визуальной формы будет представлена на резиновой коврике и что некоторые аудио будут воспроизведены от MP3-плеера. Затем объясните, что аудио будет воспроизводиться один раз на карту-картинку, как только участник начнет изучать тактильные/визуальные формы.
      ПРИМЕЧАНИЕ: Не информируйте участников о двух типах тактильных/визуальных буба/кики (заполненных и очерченных), одном типе слуховой бубы/кики (звук) и двух типах конправности (конлезированные и нелепые).
    2. Поместите тактильную/визуальную карточку с картинками на резиновый коврик.
    3. В группе слепых и с завязанными глазами попросите участника сделать кулак обеими руками и поставить кулаки поверх представленной тактильной/визуальной картой изображения, направляя их при необходимости. Поместите левую руку на кулаки участника.
    4. Попросите участника изучить тактильные /визуальная форма, слепую и группу с завязанными глазами на ощупь и видение-группы по зрению, когда рука на кулаках (слепая и с завязанными глазами-группа) / картонная пластина или пенная доска (видение-группа) удаляется, и слушать аудио. Затем попросите их назвать тактильную/визуальную форму и звук как «буба» или «кики»: одно имя только23,24,25, когда они закончат свое исследование.
    5. Снимите левую руку с кулаков участника (в группе с завязанными глазами и повязкой на глазах) / картонной пластиной или пенопластовой доской (в группе зрения) и воспроизвейте звук с MP3-плеера.
      ПРИМЕЧАНИЕ: Воспроизведение слуховой информации от MP3-плеера только один раз и не повторяйте ее в устной форме участникам.
    6. Как только участник называет тактильную/визуальную форму и звук, накройте карточку изображения и обратите внимание на данное имя. Не отвечайте на ответ участника.
    7. Оценка того, является ли ответ участника правильным или неверным.
      ПРИМЕЧАНИЕ: Повторите 4.6.2-4.6.7 для всех 8 проб.
    8. Через конгрузированные и нелепые испытания, подсчитайте участника как «правильное», когда они признали 75% тактильной/визуальной формы бубы и кики.
  7. Проведение эксперимента 3:
    1. Объясните, что на верхней части резиновой коврика вместо тактильной/визуальной картой(ы) будет размещена некоторая копия бумаги/пластиковой тисненой пленки, и что участнику будет предложено нарисовать ее. В слепой и с завязанными глазами группы, предложить участнику попробовать различные чертежное оборудование и решить для себя, что они предпочитают: копия бумаги или пластиковые тиснение пленки и роликовые ручки или седло стиль. Далее, объясните, что некоторые аудио будут воспроизведены из MP3-плеер и что участник будет рисовать тактильные / визуальные формы они связывают с этим аудио, одна форма в сегменте аудио, когда спросил.
      ПРИМЕЧАНИЕ: Не информируйте участников ни о слуховой информации (буба и кики), ни о двух типах слуховой бубы/кики (звук и слово).
    2. Поместите копию бумаги / пластиковой тиснением пленки на резиновый коврик.
    3. Во всех трех экспериментальных группах (слепая; с завязанными глазами; зрение), попросите участника сделать кулак, используя обе руки, держа в руках роликовую ручку/седловую одежду, и поставить кулаки поверх копировальной бумаги/пластиковой тиснения пленки, направляя их при необходимости. Поместите левую руку на кулаки участника.
    4. Попросите участника нарисовать форму, которую он ассоциирует с представленным звуком, когда рука на кулаках удаляется. В группе слепых и с завязанными глазами попросите участника нарисовать тактильную форму; и в группе зрения, визуальная форма. Попросите участника сказать "да", когда он закончит свой рисунок.
    5. Снимите левую руку с кулаков участника.
    6. Воспроизведение аудио с MP3-плеера.
      ПРИМЕЧАНИЕ: Воспроизведение слуховой информации от MP3-плеера только один раз и не повторяйте ее в устной форме участникам.
    7. Как только участник говорит "да", удалите их тактильный/визуальный рисунок с резиновой коврики и пометьте его в правом нижнем углу с правильным номером пробного разбирательства. Не отвечайте и не предоставляйте никаких комментариев по форме ответа/нарисованной формы участника.
      ПРИМЕЧАНИЕ: Повторите 4.7.2-4.7.7 для всех 4 проб.
    8. Сканирование всех тактильных/визуальных рисунков (размер 1:1) в формате jpg сразу после каждого тестового сеанса.
      ПРИМЕЧАНИЕ: Эксперимент 3 забивается группой бомбардиров после того, как все данные о рисовании были собраны.
    9. Подготовить анкету для подсчета данных о чертежах (ср. Рисунок 2):
      1. Масштабируйте все отсканированные рисунки, чтобы включить 12 фотографий на страницу в формате пейзажа A4.
      2. Случайно присвоить буба / кики испытаний, звук / слово испытаний, и слепые / повязки / видение ящики.
      3. Добавьте пробный номер в верхнем левом углу каждой картинки.
      4. Добавьте под каждую картинку «буба» и «кики» и «слепой», «с завязанными глазами» и «зрячий».
    10. Набирать бомбардира группы, старше 18 лет; с нормальным/исправленным до нормального слуха и зрения; без когнитивных задержек или нарушений, а также физических недостатков; , которые все наивны для этого исследования, и которые показывают, визуальная форма печатных слово буба / кики-эффект.
    11. Попросите бомбардиров ответить на два вопроса с несколькими вариантами на картинку в анкете:
      (1) 'Является ли изображенная форма "буба" или "кики", и (2) 'Является ли изображенная форма обращается кем-то, кто слепой (с рождения), с завязанными глазами, или полностью зрячий? 17.
    12. В зависимости от количества фотографий в анкете, попросите половину группы бомбардиров набрать половину анкеты, а другую половину забить остальным.
    13. Для каждого испытания количество "переписывается", "не соответствует" и "неубедительно", то есть:
      1. 'Correspond', когда (i) 75% бомбардиров договорились о том, какая тактильная/визуальная форма (буба или кики) была изображена, и (ii) эта форма соответствовала представленной слуховой бубе/кики в этом испытании.
      2. "Не соответствует", когда (i) 75% бомбардиров согласились на том, какая тактильная/визуальная форма (буба или кики) была изображена, и (ii) эта форма не соответствовала представленной слуховой бубе/кики в этом испытании.
      3. «Неубедительно», когда 75% бомбардиров договорились о том, какая тактильная/визуальная форма (буба или кики) была изображена. Удалите из статистического анализа «неубедительные» рисунки/участники.
    14. В ходе испытаний подсчитайте участника как «соответствует», когда 75% от их нарисованных умственных образов: То есть тактильные/визуальные формы соответствуют представленной слуховой бубе/кики.
    15. Для каждого испытания количество "признанных", "не признанных" и "неубедительных", то есть:
      1. «Признано», когда (i) 66,6% бомбардиров договорились о том, какая экспериментальная группа (слепая, с завязанными глазами или зрение) нарисовала изображенную форму, и (ii) это было правильно в этом испытании.
      2. "Не признано", когда (i) 66,6% бомбардиров договорились о том, какая экспериментальная группа (слепая, с завязанными глазами или зрение) нарисовала изображенную форму, и (ii) это было не правильно в этом испытании.
      3. «Неубедительно», когда 66,6% бомбардиров договорились о том, какая экспериментальная группа (слепая, с завязанными глазами или зрение) нарисовала изображенную форму. Исключить "неубедительные" признания участников из статистического анализа.
    16. В ходе испытаний (и с удалением "неубедительных" признаний участников) отсчитайте участника как "признанного", когда он распознается в 75% всех испытаний.

Figure 2
Рисунок 2: Примеры из вопросника для подсчета данных о чертежах Пожалуйста, нажмите здесь, чтобы просмотреть большую версию этой цифры.

Representative Results

Буба/кики-эффект

Шесть из 12 участников, которые были врожденно слепых (50%), девять из 12, которые были с завязанными глазами (75%), и 10 из 12, которые были полностью зрячими (83%) показал мгновенный тактильный/визуальный-слуховой буба/кики-эффект: То есть и повязка на глазах, и группа зрения были значительно выше случайного уровня (50%):No 2(1. N No 12) - 3,00, р 0,08 и2(1. N No 12) 5,33, р 0,02 (Эксперимент 1, Испытание 1)17. Не было найдено существенной разницы в точном тесте Фишера между тремя экспериментальными группами (Эксперимент 1, предварительный тест)17. (Cf. Таблица 1.)

Когда дело доходит до долгосрочной тактильной / визуальной слуховой буба / кики-эффект: На первом повторяется в рамках группы мера, девять участников, которые были врожденно слепых показал буба / кики-эффект вместе с девятью, которые были полностью зрячими и семь, которые были с завязанными глазами: Слепая и группа зрения значительно выше случайного уровня (50%):No 2(1. N No 12) - 3,00, р 0,08 и2(1. N No 12) - 3,00, р 0,08 (Эксперимент 1, Испытание 4)17. На втором повторении внутригрупповой меры 11 участников слепой и зрительно-визуальной группы показали тактильный/визуальный-слуховой буба/кики-эффект: обе экспериментальные группы снова были значительно выше случайного уровня (50%):2 -1. N No 12) 8,33, р 0,00 иNo 2(1. N No 12) 8,33, р 0,00; и семь в группе с завязанными глазами (Эксперимент 1, Испытание 5)17. Наконец, на третьем повторяется в рамках группы мера и после тестирования, девять из 12 участников, которые были врожденно слепых (75%), шесть из 12, которые были с завязанными глазами (50%), и все 12 участников, которые были полностью зрячие (100%) показал тактильный/визуальный-слуховой буба/кики-эффект; как слепые, так и группа зрения снова были значительно выше случайного уровня (на 50%):No 2(1. N No 12) - 3,00, р 0,08 и2(1. N No 12) - 12,00, р 0,00 (Эксперимент 1, Испытание 8)17. Точный тест Фишера обнаружил существенную разницу между повязкой на глазах и группой зрения,р- 0,01. (Эксперимент 1, после тестирования) 17. (Cf. Таблица 1.)

Группа участников Мгновенный буба/кики-эффект Долгосрочный буба/кики-эффект
Предварительная проверка Повторная мера 1 Повторная мера 2 Повторяющиеся меры 3/после тестирования
Слепой 50.0% 75.0% 91.7% 75.0%
Повязку 75.0% 58.3% 58.3% 50.0%
Видение 83.3% 75.0% 91.7% 100.0%

Таблица 1: Мгновенный и долгосрочный буба/кики-эффект

Признание форм бубы и кики

Одиннадцать из 12 участников, которые были врожденно слепыми (92%), девять из 12, которые были с завязанными глазами (75%), и все 12, которые были полностью зрячими (100%) мгновенно распознаваемый конгрузный тактильный/визуальный и слуховой буба/кики; все три экспериментальные группы были значительно выше шансового уровня (на 50%):No 2(1. N No 12) 8,33, р- 0,00,2(1. N No 12) - 3,00, р 0,08 и2(1. N No 12) - 12,00, р 0,00 (Эксперимент 2, Испытание 1)17. (Cf. Таблица 2.)

В долгосрочной перспективе, 11 участников слепой группы признали тактильные формы бубы/кики вместе с конгрузированным аудио и 10 участников с нелепым звуком: Оба типа конгрузности признаны значительно выше шансового уровня (50%): No2( 1. N no 12) - 8,33, р 0,00 иNo 2(1. N No 12) 5,33, р 0,02 (Эксперимент 2, Испытание 1-8)17. Девять участников группы с завязанными глазами распознали тактильные фигуры вместе с конлеированным звуком и восемь участников вместе с нелепым звуком; другими словами, конгрупная форма и звук были значительно выше шансового уровня (на 50%):No 2(1. N No 12) - 3,00, р 0,08 (Эксперимент 2, Испытание 1-8)17. Все 12 участников группы видения признали визуальные формы бубы/кики вместе с конлеированным звуком и шесть участников с нелепым звуком: конгрузированная форма и звук распознаются значительно выше шансового уровня (50%):No 2(1. N No 12) 12.00, р 0.00 (Эксперимент 2, Испытание 1-8)17. (Cf. Таблица 2.)

Группа участников Мгновенное распознавание формы бубы/кики Долгосрочное признание форм бубы и кики
Конгрузитная форма и звук Конгрузитная форма и звук Нелепая форма и звук
Слепой 91.7% 91.7% 83.3%
Повязку 75.0% 75.0% 66.7%
Видение 100.0% 100% 50.0%

Таблица 2: Мгновенное и долгосрочное распознавание форм бубы и кики

Психические образы бубы и кики

Восемь из 12 участников, которые были врожденно слепыми (73% (с одним "неубедительным" участником рисунок удалены) ", восемь из 12, которые были с завязанными глазами (89% (с тремя "неубедительных" участников рисунки удалены)) и восемь из 12, которые были полностью зрячими «80% (с двумя «неубедительными» рисунками участника удалены) » мгновенно нарисовал умственный образ: тактильные/визуальные формы, которые соответствовали представленной слуховой бубе/кики (Эксперимент 3, Испытание 1)17. И повязка на глаза, и группа зрения были значительно выше случайного уровня (на 50%):No 2(1. N No 9) 5,44, р 0,02 иNo 2(1. N No 10) - 3,60, р 0,06 (Эксперимент 3, Испытание 1)17. (Cf. Таблица 3.)

Что касается долгосрочных психических образов бубы и кики: 11 участников слепой группы, восемь в группе с завязанными глазами и 12 в группе зрения нарисовали тактильные/визуальные формы бубы/кики, которые соответствовали представленной слуховой бубе/кики (Эксперимент 3, Испытание 1-4)17. И слепые, и группа зрения были значительно выше шансового уровня (на 50%):No 2(1. N No 12) 8,33, р 0,00 иNo 2(1. N No 12) 12.00, р 0.00 (Эксперимент 3, Испытание 1-4)17. Точный тест Фишера обнаружил существенную разницу между группой с завязанными глазами и группой зрения :стр. 0,09 (Эксперимент 3, Испытание 1-4)17. (Cf. Таблица 3.)

Группа участников Мгновенный умственный образ бубы/кики Долгосрочные психические образы бубы и кики
Слепой 72.7% 91.7%
Повязку 88.9% 66.7%
Видение 80.0% 100.0%

Таблица 3: Мгновенные и долгосрочные умственные образы бубы и кики

Кроме того. 83% всех рисунков участников включали наиболее характерную черту формы глобальной формы бубы и кики: кривая и угловая, соответственно (Эксперимент 3, Испытание 1-4)17. Рисунки участника отличались по количеству кривых/углов (например, один и пять углов для слова кики: cf. Рисунок 2, Испытания 1, 6 и 9), и в направлении кривых/углов, т.е. горизонтальных, вертикальных или диагональных: cf. Рисунок 2, Испытания 2, 5 и 8 (буба звук) ", но, как правило, не включают в себя глобальную форму бубы / кики "Эксперимент 3, Испытание 1-4 (ср. Рисунок 1; Рисунок 2)17. Наконец, экспериментальная группа была признана в 43% ответов: пять участников в слепой группе, три в группе с завязанными глазами и пять в группе зрения; ни одна экспериментальная группа не была значительно выше случайного уровня (33,3% (Эксперимент 3, Испытание 1-4))17.

Эффект визуальных изображений и обучения

Представленный протокол удалось исследовать роль визуальных изображений в бубе / кики-эффект, будь то обучение в заметив тактильные / визуально-аудиторные бубы и кики регулярности повлияли на буба / кики-эффект и признание отдельных тактильных /визуальные формы бубы и кики, и, наконец, какие умственные образы эти формы-аудио регулярности производится17. Включая одну экспериментальную группу без визуального опыта (т.е. слепой группы) и две экспериментальные группы с визуальным опытом (т.е. повязку на глаза и группу зрения), можно было проверить влияние визуальных изображений; и путем включения одной экспериментальной группы, не имеющая визуального опыта и обширного тактильного опыта (т.е. слепой группы) и одной экспериментальной группы с обширным визуальным опытом и отсутствием тактильного опыта (т.е. группы с завязанными глазами), можно было проверить эффект обучения в замечая тактильные-слуховые закономерности. Результаты ясно показывают, что группа с завязанными глазами опиралась на визуальные образы для решения новых тактильных-слуховых проблем, но не долгосрочных (Эксперимент 1-3); что обучение замечая буба / кики формы-аудио регулярности пострадавших тактильных / визуально-аудиторный буба / кики-эффект (Эксперимент 1) и признание отдельных тактильных / визуальных бубы и кики формы займы , т.е. вместе с конгрузным аудио (Эксперимент 2) , но по-разному в каждой экспериментальной группе (Эксперимент 1-2), и что все экспериментальные группы создали психические образы наиболее характерной тактильной / визуально-аудиторской формы особенность бубы (кривая) и кики (угол) Эксперимент 3. Cf. Таблица 1; Таблица 2; Таблица 3No17. Кроме того, путем включения повторяющихся внутригрупповых показателей мгновенного и долгосрочного эффекта (Эксперимент 1-3) можно было проверить, когда влияние визуальных изображений и обучения формы-аудио регулярности на самом деле произошло; и путем включения трех различных задач (т.е. тактильные/визуальные-слуховые буба/кики-эффект в Эксперименте 1, распознавание отдельных тактильных/визуальных форм бубы/кики вместе с конгрузированным и нелепым звуком в Эксперименте 2 и рисование умственных образов буба / кики аудио в эксперименте 3), чтобы проверить, насколько надежны эти эффекты были. Результаты ясно показывают, что эффект визуальных изображений не был надежным долгосрочной перспективе в рамках каждой задачи, особенно при использовании тактильных прикосновений «cf. с завязанными глазами-группой (Эксперимент 1-3)»; в то время как эффект обучения формы-аудио регулярности был, но не между задачами ,cf. слепых и видение группы (Эксперимент 1-3). Cf. Таблица 1; Таблица 2; Таблица 3. 17 Лет

Discussion

Представленный протокол подходит для изучения влияния визуальных изображений и изучения формы-аудио закономерностей, когда они происходят и насколько они надежны; у конкретных лиц и групп лиц.

Этот протокол был бы уместным для проверки не только точности, но и времени исследования: С момента, когда экспериментатор удаляет левую руку из кулаков участника (в группе с завязанными глазами) / картонной пластины или пенопластовой доски (в видение-группы), когда участник говорит "да". В статистическом анализе самое длинное время исследования на каждую экспериментальную группу будет разделено на четыре, а число «быстрых», «средних» и «медленных» участников в каждой экспериментальной группе подсчитано: «Быстрый» с использованием 25% этого времени исследования, ' средний' с использованием 26-75%, и "медленный" с использованием 75%. В ходе испытаний участники будут учитываться как в Эксперименте 2: То есть, как «быстрые», если считать «быстрыми», если считать «быстрыми» в 66,6% всех испытаний, как «средние», если считать «средним» в 66,6% всех испытаний и так далее. (Для "неубедительно", т.е. участник не может считаться "быстрым", "средним" или "медленным", cf. Эксперимент 3.) Можно было бы проверить время исследования на правильные и неправильные ответы отдельно, в зависимости от размера выборки и/или количества правильных и неправильных ответов. Независимо от точности тестирования, времени исследования или обоих, необходимо следовать критическиважным шагам протокола: три эксперимента должны проводиться в установленном порядке, а их испытания представлены в фиксированном порядке для всех участников. Участники не должны быть осведомлены о том, что тестовые материалы во всех трех экспериментах включают бубу и кики. Кроме того, слуховая информация от MP3-плеера должна быть воспроизведена только один раз и не повторяется обратно устно участникам (все три эксперимента). В эксперименте 1 и Эксперимент е2 тактильные/визуальные бубы и кики должны быть представлены в том же положении и ориентации. Для группы зрения (во всех трех экспериментах) испытательные материалы должны быть установлены за картонной пластиной/пенопластовой доской. Наконец, в группе с завязанными глазами участники не должны снимать повязку до завершения эксперимента 3. Эти шаги должны обеспечить, чтобы количество и тип информации о тактильной / визуальной и слуховой бубы и кики находится под контролем во всех экспериментальных группах. Кроме того, в эксперименте 2 крайне важно представить слуховую бубу/кики, как только участник начнет исследовать тактильные/визуальные бубы/кики. Это обеспечит представление мультимодальной (коннесной или нелепой) информации. Кроме того, этот протокол будет также уместным для проверки других групп лиц. Для их интеграции такие группы участников можно было бы добавить в качестве отдельных экспериментальных групп: например, группу восприятия цвета и группу восприятия формы; 22 внезапная потеря зрения группы и прогрессивной потери зрения группы; 20 , 21 и / или конкретных групп лиц с нарушениями слуха и / или расстройство аутистического спектра13 могут быть добавлены.

С помощью этого протокола можно было бы установить групповую норму (для точности и/или времени исследования) для конкретных групп по каждому мгновенному и долгосрочному эффекту, включая каждую повторяющуюся внутригрупповую меру и/или задачу; затем, чтобы проверить лиц против их групповой нормы: ли какой-либо конкретный человек или вся группа нуждается в дальнейшей подготовке в заметив форму-аудио регулярностей. Групповая норма для каждого мгновенного и долгосрочного эффекта, включая каждое повторение внутригрупповой меры и/или задачи, также позволит определить, какая подготовка необходима для того, чтобы заметить закономерности формы-аудио: например, больше испытаний с тактильными/ визуально-аудиторная буба/кики-эффект (Эксперимент 1) и/или другие испытания с конлеобразной и нелепой тактильной/визуальной формой и аудио (Эксперимент 2). Действительно, можно было бы увеличить как число испытаний, так и число повторяющихся внутригрупповых мер в каждой задаче, а также изменить время между ними, что позволило бы проводить более индивидуальную подготовку и тестирование.

Тем не менее, этот протокол потребуетизменения, если тестирование того, какой тип материалов (например, буба или кики, заполненные или изложенные тактильные / визуальные формы, и / или слуховой звук или слово) лучше всего обеспечивает изучение формы аудио регулярностей. Возможный способ изменения этого протокола может включать представление различных материалов в блоках: Например, заполненные тактильные/визуальные формы и слуховой звук и/или изложенные тактильные/визуальные формы и слуховое слово (Эксперимент 1). Эти блоки могут быть представлены в случайном порядке всем участникам одной экспериментальной группы; или же каждый из четырех блоков для разделения экспериментальных групп (Эксперимент 1). Этот протокол также потребует изменения, если тестирование еще больше надежность визуальных изображений и / или узнал формы аудио регулярности внутри и между задачами. Эта модификация может включать добавление повторяющихся внутригрупповых мер с различной тактильной/визуальной формой и/или аудио, чем те, которые включены в обучение; например, со слуховым звуком для 'maa-boo-maa' и 'tuh-kee-tee' после тренировки с тактильными/визуальными формами бубы и кики и слуховыми словами (Эксперимент 1)1,3,4,10, 11 Год , 12 Лет , 13 Год , 14 Год , 15 лет , 16. Другой вариант может включать представление третьей тактильной / визуальной формы, которая не в основном изогнутые / угловые вместе с тактильной / визуальной бубы и кики формы в эксперименте 110,11,12 ,13,14,15,16. Слуховой нонсенс слово и звук может быть создан для этой тактильной / визуальной формы для получения третьей формы слова пара14,15,16 и третья форма звука пара17 (Эксперимент 1). Пара звуков формы может быть включена в Эксперимент 2 в качестве улова-испытания; или же в качестве регулярных конгрузных испытаний и с соответствующими нелепыми испытаниями. Наконец, звук (от эксперимента 2 и эксперимент 1) и / или нонсенс слово (от эксперимента 1) может быть представлен в эксперименте 3. Третий вариант может включать в себя не проведение Эксперимента 2 и Эксперимента 3 вообще, а включение их в качестве задач в повторяющихся внутригрупповых мерах в Эксперименте 1, в случайном порядке.

Представленный протокол уникален тем, что он держит под контролем как визуальные изображения, так и сенсорную информацию во время обучения и тестирования. Она гибкая: большие и малые образцы и конкретные лица могут быть проверены против себя (ср. внутригрупповое тестирование) и/или других групп лиц (ср. тестирование между группами). Можно проверить как точность, так и время исследования, изменить количество испытаний и повторяющиеся внутригрупповые измерения в каждом эксперименте и время между ними, а также изменить или даже свернуть порядок испытаний и/или экспериментов.

Disclosures

Авторам нечего раскрывать.

Acknowledgments

Спонсоров:
Эта работа финансировалась исследовательской и инновационной программой Европейского союза «Горизонт 2020» в рамках программы «Действия Марии Склодовской-Кюри» (грантовое соглашение No 657440) и Норвежской ассоциацией слепых и частично видячих.

Киновиза:
Визажист Рэйчел Парри.

Materials

Name Company Catalog Number Comments
Bouba/kiki filled 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki outlined 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki sound (sine wave)
Bouba/kiki word (human voice)
Carton plate/foam board for covering bouba/kiki (white) Ryman 230461860 297 mm horizontal x 210 vertical 0 mm vertical
Copy paper [white (80 g/m2 )] Ryman 250030000 210 mm horizontal x 148 mm vertical
Foam board for bouba/kiki picture cards [white (5 mm thick)] Ryman 230461860 50 mm horizontal x 50 mm vertical
MP3-player (smartphone with the VLC app for iOS installed) Carphone Warehouse
Plastic embossing film RNIB Shop ZM04 210 mm horizontal x 148 mm vertical
Rollerball pen [black (1.0 mm tip)] Ryman 827134001
Rubber mat RNIB Shop LC177 230 mm horizontal x 150 mm vertical
Saddleback style RNIB Shop B511
Swell paper Zychem Ltd Zytex2 paper 50 mm horizontal x 50 mm vertical

DOWNLOAD MATERIALS LIST

References

  1. Ramachandran, V. S., Hubbard, E. M. Synaesthesia - A Window Into Perception, Thought and Language. Journal of Consciousness Studies. 8 (12), 3-34 (2001).
  2. Bremner, A. J., Caparos, S., Davidoff, J., de Fockert, J., Linnell, K. J., Spence, C. Bouba’’and ‘‘Kiki’’ in Namibia? A remote culture make similar sound-shape matches, but different taste-shape matches to Westerners. Cognition. 126 (2), 165-172 (2013).
  3. Davis, R. The fitness of names to drawings. A cross-cultural study in Tanganyika. British Journal of Psychology. 52 (3), 259-268 (1961).
  4. Maurer, D., Pathman, T., Mondloch, C. J. The shape of boubas: sound-shape correspondences in toddlers and adults. Developmental Science. 9 (3), 316-322 (2006).
  5. Ozturk, O., Krehm, M., Vouloumanos, A. Sound-symbolism in infancy: Evidence for sound-Shape cross-modal correspondences in 4-months-olds. Journal of Experimental Child Psychology. 114 (2), 173-186 (2013).
  6. Bar, M., Neta, M. Humans Prefer Curved Visual Objects. Psychological Science. 17 (8), 645-648 (2006).
  7. Bertamini, M., Palumbo, L., Gheorghes, T. N., Galatsidas, M. Do observers like curvature or do they dislike angularity? British Journal of Psychology. 107 (1), 154-178 (2016).
  8. Quinn, P. C., Brown, C. R., Streppa, M. L. Perceptual Organization of Complex Visual Configurations by Young Infants. Infant Behavior and Development. 20 (1), 35-46 (1997).
  9. Silvia, P. J., Barona, C. M. Do people prefer curved objects? Angularity, expertise, and aesthetic preference. Empirical Studies of the Arts. 27 (1), 25-42 (2009).
  10. Nielsen, A., Rendall, D. The Sound of Round: Evaluating the Sound-Symbolic Role of Consonants in the Classic Takete-Maluma Phenomenon. Canadian Journal of Experimental Psychology. 65 (2), 115-124 (2011).
  11. D’Onofrio, A. Phonetic Detail and Dimensionality in Sound-shape Correspondences: Refining the Bouba-Kiki Paradigm. Language and Speech. 57 (3), 367-393 (2014).
  12. Westbury, C., Hollis, G., Sidhu, D. M., Pexman, P. M. Weighing up the evidence for sound symbolism: Distributional properties predict cue strength. Journal of Memory and Language. 99, 122-150 (2018).
  13. Oberman, L. M., Ramachandran, V. S. Preliminary evidence for deficits in multisensory integration in autism spectrum disorders: The mirror neuron hypothesis. Social Neuroscience. 3 (3-4), 348-355 (2008).
  14. Köhler, W. Gestalt psychology. , Liveright. New York, NY. (1929).
  15. Monaghan, P., Mattock, K., Walker, P. The Role of Sound Symbolism in Language Learning. Journal of Experimental Psychology: Learning, Memory, and Cognition. 38 (5), 1152-1164 (2012).
  16. Fort, M., Martin, A., Peperkamp, S. Consonants are More Important than Vowels in the Bouba-kiki Effect. Language and Speech. 58 (2), 247-266 (2015).
  17. Graven, T., Desebrock, C. Bouba or kiki with and without vision: Shape-audio regularities and mental images. Acta Psychologica. 188, 200-212 (2018).
  18. Fryer, L., Freeman, J., Pring, L. Touching words is not enough: How visual experience influences haptic-auditory associations in the “Bouba-Kiki” effect. Cognition. 132 (2), 164-173 (2014).
  19. Fontana, F. Association of Haptic Trajectories to Takete and Maluma. Lecture Notes in Computer Science. 7989, 60-68 (2013).
  20. Graven, T. How blind individuals discriminate braille characters: An identification and comparison of three discrimination strategies. British Journal of Visual Impairment. 33 (2), 80-95 (2015).
  21. Graven, T. How attention is allocated when using haptic touch: Shape feature distinction and discrimination strategy. EuroHaptics 2016, Part 1. Bello, F., Kajimoto, H., Visell, Y. , Springer International Publishing AG. Switzerland, Heidelberg. Part of the Lecture Notes in Computer Science book series (LNCS, volume 9774) 380-393 (2016).
  22. WHO. ICD-10 version: 2016 (International Statistical Classification of Diseases and Related Health Problems 10th revision). Chapter VII Diseases of the eye and adnexa (H00-H59). , Available from: http://apps.who.int/classifications/icd10/browse/2016/en#/H53-H54 (2019).
  23. Heller, M. A., Calcaterra, J. A., Burson, L. L., Tyler, L. A. Tactual picture identification by blind and sighted people: Effects of providing categorical information. Perception & Psychophysics. 58 (2), 310-323 (1996).
  24. Heller, M. A., Gentaz, E. Psychology of Touch and Blindness. , Psychology Press. New York, NY and Hove, East Sussex. (2014).
  25. Pathak, K., Pring, L. Tactual picture recognition in congenitally blind and sighted children. Applied Cognitive Psychology. 3 (4), 337-350 (1989).

Tags

Поведение Выпуск 151 Буба / кики-эффект кроссмодальный тактичее прикосновение слух эффект обучения психическое изображение мультимодальные сенсорные закономерности распознавание формы форма-аудио регулярности видение визуальные образы
Исследование влияния визуальных изображений и обучения формы-аудио регулярности на Буба и Кики
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Graven, T., Desebrock, C.… More

Graven, T., Desebrock, C. Investigating the Effect of Visual Imagery and Learning Shape-Audio Regularities on Bouba and Kiki. J. Vis. Exp. (151), e59954, doi:10.3791/59954 (2019).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter