Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
JoVE Journal Behavior
Click here for the English version

Behavior

Investigación del efecto de las imágenes visuales y el aprendizaje de las regularidades de audio de forma en Bouba y Kiki

Published: September 13, 2019 doi: 10.3791/59954
Automatic Translation
1, 1
1Department of Experimental Psychology, University of Oxford

Summary

El objetivo del protocolo presentado es investigar el papel de las imágenes visuales en el efecto bouba/kiki, si el entrenamiento para notar las regularidades de audio de forma bouba/kiki afecta al efecto bouba/kiki y al reconocimiento de formas individuales de bouba y kiki, y finalmente qué imágenes mentales producen estas regularidades.

Abstract

Este artículo presenta un protocolo para investigar el papel de las imágenes visuales en el efecto bouba/kiki, ya sea que el entrenamiento en la atención de las regularidades de audio de forma bouba/kiki afecta al efecto bouba/kiki y al reconocimiento de formas individuales de bouba y kiki, y finalmente qué imágenes mentales producen estas regularidades. Para generar regularidades de audio de forma bouba/kiki, había dos tipos de formas (rellenadas; esbozadas) y dos tipos de audio (palabra; sonido sin palabras). Tres grupos de individuos participaron en tres experimentos: ciego, vendado y visionado. Los experimentos se llevaron a cabo en orden fijo entre los participantes, sin descanso entre ellos. En el Experimento 1 (diseño previo a la prueba con tres medidas repetidas dentro del grupo), se pidió a los participantes que eligieran la forma que asociaban con el bouba/kiki auditivo; en el Experimento 2 (diseño dentro del sujeto), para nombrar una forma y algo de audio (a veces congruente; a veces incongruente) como 'bouba' o 'kiki;' y en el Experimento 3 (diseño post-prueba solamente), para dibujar la forma que asociaban con el bouba/kiki auditivo. Los resultados sugieren que el grupo con los ojos vendados se basa en imágenes visuales para resolver nuevos problemas, pero no a largo plazo; que el entrenamiento en la atención de las regularidades de audio en forma de bouba/kiki afecta al efecto bouba/kiki y al reconocimiento de formas individuales de bouba y kiki, pero de manera diferente en cada grupo experimental; y que todos los grupos experimentales crean imágenes mentales de la característica de forma más característica de bouba (curva) y kiki (ángulo). De hecho, el efecto de las imágenes visuales es sólido en todas las tareas, pero no a largo plazo; el efecto del aprendizaje de las regularidades de audio de forma es robusto a largo plazo, pero no a través de las tareas. El protocolo presentado es apropiado para investigar el efecto de las imágenes visuales y el aprendizaje de las regularidades de audio de forma, cuando se producen y lo robustos que son; en individuos y grupos específicos de individuos. Este protocolo es único en el sentido de que mantiene bajo control tanto las imágenes visuales como la información sensorial durante el entrenamiento y las pruebas.

Introduction

El 95% de la población mundial muestra un efecto bouba/kiki-visual auditivo, asociando la forma visualmente redondeada con la palabra hablada, 'bouba;' y la forma visualmente angular con la palabra hablada 'kiki;' y lo hacen incluso cuando no han tenido ninguna experiencia con la forma o la palabra1. El efecto bouba/kiki precede al aprendizaje de idiomas; ocurre en todos los idiomas1,2,3,4,5, con bouba y kiki (cf. preferencia de las personas por las curvas visuales sobre los ángulos visuales6,7 , 8 , 9), y depende de la combinación de vocales y consonantes (por ejemplo, no ocurre con 'bibi' y 'kuku'.) 1 , 5 , 10 , 11 , 12. Esta asociación forma-palabra se produce con otros pares de formas y palabras también, siempre y cuando sean principalmente curvos, como bouba, y principalmente angulares, como kiki11,13; y/o tienen la misma combinación de vocales y consonantes que 'bouba' y 'kiki', por ejemplo: 'Baluma' y 'takete', 'maluma' y 'takete', 'uloomo' y 'takete', 'maa-boo-maa' y 'tuh-kee-tee'1,3, 4,10,11,12,14. De hecho, las personas asocian las formas visuales redondeadas con las palabras habladas que contienen consonantes continuantes (como /l/ y /m/) y vocales de espalda abiertas (como por ejemplo /-:/, y /-:/), y las formas angulares visuales con las palabras habladas que contienen consonantes plosivos (como / k/ y /t/) y las vocales delanteras de cierre (como (/o/ y /I/)11,12,15,16. Están influenciados más por las consonantes que por las vocales, especialmente por las sin voz (por ejemplo, /k/ y /t/)11,12,15,16. De hecho, parece que las características de las formas globales – sus curvas y ángulos17 – y el sonido de las palabras habladas – su melodía17 – son las más cruciales, a diferencia de las formas y palabras globales en sí.

Un estudio ha investigado el efecto bouba/kiki con bouba táctil y kiki en lugar de las formas visuales de bouba/kiki y encontró que los participantes con discapacidad visual mostraron un efecto bouba/kiki significativamente menos robusto (64%) que el completamente avistado (90%)18. Este estudio argumentó que el efecto de bouba/kiki significativamente menos robusto entre los participantes ciegos y parcialmente avistados fue causado por la falta de imágenes visuales: Los participantes completamente avistados habían notado regularidades en su entorno que no son fácil acceso cuando la visión se deteriora18. Sin embargo, no se desprende claramente de este estudio si las imágenes visuales son necesarias para que se produzca el efecto bouba/kiki: Sólo seis de los 42 participantes con discapacidad visual eran congénitos totalmente ciegos18, por lo tanto, no tenían imágenes visuales en absoluto. Además, los otros participantes, ninguno de ellos con los ojos vendados, pueden haber observado los movimientos de los labios del experimentador al anunciar la palabra bouba/kiki – movimientos de labios redondeados al anunciar 'bouba' y movimientos angulares de los labios al anunciar 'kiki'1 , 18 – mostrar un efecto bouba/kiki táctil-visual-auditivo en lugar de dibujar sobre cualquier imagen visual. Además, no se investigó ningún efecto de notar regularidades táctiles-auditivas, por ejemplo, comparando el efecto bouba/kiki en el ensayo uno y el ensayo cuatro en lugar de calcular el efecto en los cuatro ensayos. Además, el bouba táctil y el kiki eran bastante diferentes en todos los ensayos: en los ensayos uno y dos eran formas 3D y 2D (curvado v angular); en ensayos tres y cuatro, idénticos en forma (círculo) y disímiles en textura (suave v áspero; suave v puntiagudo)18. En una línea relacionada, un estudio ha investigado un efecto binótico-auditivo-cinético en individuos con los ojos vendados (completamente avistados) y ha encontrado que, después de un período de entrenamiento de dos minutos de la celebración de un estilete robótico programado para dibujar trayectorias de la bouba y el kiki formas, el 82% mostró el efecto bouba/kiki19. Sin embargo, no se desprende claramente de si el efecto bouba/kiki se produjo debido al período de entrenamiento: El estudio no incluyó una prueba previa, ni un grupo de control.

Con este fin, hemos investigado el papel de las imágenes visuales en el efecto bouba/kiki, si el entrenamiento en la atención de las regularidades táctiles/visuales-auditivas de bouba y kiki afectó al efecto bouba/kiki y al reconocimiento de las bouba táctiles/visuales individuales y kiki formas, y finalmente lo que las imágenes mentales estas regularidades de audio de forma produjo17. Para generar regularidades de audio de forma de bouba/kiki – no sólo, por ejemplo, las particularidades kiki-shape/kiki-word1 – este estudio incluyó dos tipos de formas táctiles/visuales de bouba/kiki (rellenadas; esbozadas) y dos tipos de bouba/kiki auditivos [audio ( palabra; sonido sin palabras)]17. Tres grupos de individuos participaron en tres experimentos: Ciego (N-12), venda en los ojos (N-12) y visión (N-12). Los experimentos se llevaron a cabo en orden fijo entre los participantes y sin descanso entre ellos, para mantener bajo control la cantidad de los participantes y el tipo de experiencia con bouba y kiki. En el Experimento 1 (diseño previo a la prueba con tres medidas repetidas dentro del grupo), se pidió a los participantes que eligieran la forma táctil/visual que asociaban con el bouba/kiki auditivo; en el Experimento 2 (dentro del diseño del sujeto), por nombrar una forma táctil/visual y un poco de audio (a veces congruente; a veces incongruente) como 'bouba' o 'kiki;' y en el Experimento 3, (diseño post-prueba solamente) para dibujar la forma táctil/visual que asociaban con la auditor bouba/kiki17. En general, este estudio sugirió que el efecto de las imágenes visuales es sólido en todas las tareas, pero no a largo plazo dentro de cada tarea, mientras que el efecto de aprender regularidades de audio de forma es robusto a largo plazo dentro de cada tarea, pero no en las tareas17. Este artículo presenta el protocolo de este estudio17. El protocolo presentado es apropiado para investigar el efecto de las imágenes visuales y el aprendizaje de las regularidades de audio de forma, cuando se producen y lo robustos que son; en individuos y grupos específicos de individuos. Este protocolo es único en el sentido de que mantiene bajo control tanto las imágenes visuales como la información sensorial durante el entrenamiento y las pruebas.

Protocol

El Comité Interdivisional de Etica de Investigación de Ciencias Médicas (IDREC) de la Universidad de Oxford anotó este protocolo (Ref No: MS-IDREC-C1-2015-200, R46287/RE002 y R42687/RE004).

1. Diseño y condiciones

  1. Realiza tres experimentos en el siguiente orden fijo con todos los participantes: Experimento 1, Experimento 2 y Experimento 3, sin descanso entre ellos. Asegúrese de que todos los participantes en el Experimento 2 participaron en el Experimento 1 y todos los participantes en el Experimento 3 también en el Experimento 2 (y el Experimento 1).
  2. Experimento de conducta 1 – un diseño previo a la prueba posterior a la prueba, con tres grupos experimentales: ciego, vendado y visión; y tres medidas repetidas dentro del grupo. Presentar las pruebas en orden fijo a todos los participantes. (Número total de ensayos: 8.)
    1. Realice la prueba previa (Prueba 1) para probar el efecto inmóvil/visual-auditivo instantáneo de bouba/kiki.
    2. Realizar la primera medida repetida dentro del grupo (Prueba 4) para probar el efecto de la forma táctil/visual repetida (ya sea llena o esbozada) y el audio variado (sonido de palabra y no palabra).
    3. Realizar la segunda medida dentro del grupo (Prueba 5) para probar el efecto de la nueva forma táctil/visual (ya sea esbozada o rellenada) y audio variado (sonido de palabra y no palabra).
    4. Llevar a cabo la tercera medida dentro del grupo y después de la prueba (Prueba 8) para probar el efecto de la forma táctil/visual variada (rellenada y esbozada) y el audio variado (sonido de palabra y no palabra).
    5. Asignar aleatoriamente qué tipo de formas táctiles/visuales de bouba/kiki presentar en los ensayos 1-4 (ya sea rellenados o esbozados). Presente el otro tipo en los ensayos 4-8. A continuación, asigne aleatoriamente qué palabra auditiva (ya sea bouba o kiki) presentar en el juicio 1, y que bouba/kiki auditivo (ya sea bouba o kiki y sonido de palabra o no palabra) presentar en cada uno de los juicios 2-8.
      NOTA: Asegúrese de que, en total, hay cuatro pruebas de bouba y cuatro kiki; cuatro ensayos de forma táctil/visual rellenados y cuatro esbozados; cuatro palabras auditivas y cuatro ensayos de sonido auditivos no denominados.
  3. Conduct Experiment 2 – un diseño dentro del sujeto, con tres grupos experimentales: ciego, vendado y visión; y dos medidas dentro del grupo. Presentar las pruebas en orden fijo a todos los participantes. (Número total de ensayos: 8)
    1. Pruebe el reconocimiento instantáneo de audio de forma congruente (bouba/kiki + bouba/kiki) (Prueba 1).
    2. Probar el reconocimiento de (a) congruente (bouba/kiki + bouba/kiki), y (b) incongruente (bouba/kiki + kiki/bouba) forma-audio [a través de cuatro ensayos por tipo de congruencia (Pruebas 1-8)].
    3. Asigne aleatoriamente qué tipo de forma táctil/visual de bouba/kiki (ya sea rellenada o esbozada) presente en los ensayos 1-8. A continuación, asigne aleatoriamente qué forma táctil/visual congruente y el sonido auditivo no-palabra (ya sea bouba + bouba o kiki + kiki) para presentar en el ensayo 1, y finalmente qué tipo de congruencia (ya sea congruente o incongruente táctil / visual bouba / kiki forma + forma auditiva + forma auditiva + bouba/kiki no-word sound) para presentar en cada uno de los Ensayos 2-8.
      NOTA: Asegúrese de que, en total, haya cuatro bouba táctil/visual y cuatro ensayos táctiles/visuales de kiki; cuatro ensayos táctiles/visuales llenos y cuatro esbozados; cuatro ensayos congruentes y cuatro incongruentes (forma + sonido sin palabras). (La palabra auditiva bouba/kiki no está incluida en este experimento.)
  4. Conduct Experiment 3 – un diseño solo post-prueba, con tres grupos experimentales: ciego, vendado y visión. Presentar las pruebas en orden fijo a todos los participantes (Número total de ensayos: 4).
    1. Pruebe qué imágenes mentales ha producido el entrenamiento en las regularidades de audio de forma que se dan cuenta (es decir, el Experimento 1 y el Experimento 2), en cuatro ensayos separados: palabra Bouba, sonido de bouba sin palabras, palabra kiki y sonido kiki sin palabras.
    2. Asigne aleatoriamente qué tipo de bouba/kiki auditivo (ya sea bouba o kiki y sonido de palabra o no palabra) presentar en cada uno de los Ensayos 1-4.
      NOTA: Asegúrese de que, en total, haya un ensayo de palabras bouba auditiva, un ensayo de sonido no-palabra de bouba auditivo, un ensayo de palabras kiki auditivo y un ensayo de sonido auditivo kiki no-word.

2. Participantes

  1. Reclutar a un grupo de participantes que sean congénitamente ciegos; es decir, cegado menos de cuatro meses después del nacimiento20,21,22: Categorías 5: ceguera total; y 4: Percepción de la luz (percibir una fuente de luz) y proyección de luz (percibir dónde se encuentra una fuente de luz)22. Asegúrese de que todos son lectores braille.
  2. Reclutar a un grupo de participantes completamente avistados, al doble del tamaño del grupo de participantes que son congénitamente ciegos. Asegúrese de que todos tengan una visión normal/corregida a la normal.
    NOTA: Asegúrese de que todos los participantes tengan entre 18 y 70 años de edad, con audición normal/corregida a la audición normal, sin retraso cognitivo o impedimento, ni ninguna discapacidad física, y que todos sean ingenuos al efecto bouba/kiki.
  3. Asigne aleatoriamente la mitad del grupo de los participantes con visión completa al grupo con los ojos vendados y la otra mitad al grupo de visión.
    NOTA: Los participantes, el tipo de forma táctil/visual de bouba/kiki, el tipo de bouba/kiki auditivo y la congruencia se asignan aleatoriamente a una de dos categorías: Venda en los ojos o visión; llenado o esbozado; sonido de palabra o no palabra; bouba o kiki; congruente o incongruente. Por lo tanto, la asignación aleatoria se puede hacer ya sea por un programa de computadora o manualmente (por ejemplo, mediante la lanzamiento de una moneda).

3. Materiales

  1. Producir los materiales táctiles/visuales
    1. Transfiera las formas visuales de bouba/kiki (30 x 23 mm) para hinchar el papel, ya sea imprimiéndolos desde un ordenador personal o fotocopiando y luego desde una imagen. Asegúrese de transferir dos tipos de formas visuales de bouba/kiki: Una rellena y otra esbozada [(línea de 1,5 pt). Cf. Figura 1].
    2. Pase el papel hincha a través de un fusor de calor. Asegúrese de que las formas táctiles de bouba/kiki se eleven a 0,5 mm de altura. Alternativamente, pida las formas táctiles/visuales de bouba/kiki de un servicio de transcripción para personas con discapacidad visual (con un archivo PDF adjunto).
    3. Pegue el papel de oleaje en una placa de espuma [blanco (5 mm de espesor)]. Use pegamento en aerosol.
    4. Cortar el papel de oleaje y la tabla de espuma en tamaño (50 x 50 mm), es decir, para crear cuatro tarjetas táctiles/visuales separadas: Bouba filled, bouba outlined, kiki filled y kiki outlined (cf. Figura 1). Utilice un cuchillo para cortar papel pintado.
    5. Corte una placa de cartón/placa de espuma para cubrir las formas táctiles/visuales de bouba/kiki en tamaño (297 x 210 mm). Utilice un cuchillo para cortar papel pintado. Como alternativa, ordene el formato A4.
    6. Corte la película de grabado de papel/plástico en tamaño (210 x 148 mm). Usa una guillotina. Como alternativa, ordene el formato A5.
    7. Cortar una estera de goma en tamaño (230 x 150 mm). Usa un cuchillo o un par de tijeras. Alternativamente, pida el marco de la mano de la Luna y desmonte para descubrir la alfombra de goma.

Figure 1
Figura 1: Dos tipos de formas bouba/kiki: Rellenadas y esbozadas Haga clic aquí para ver una versión más grande de esta figura.

  1. Producir los materiales auditivos
    1. Grabe las palabras bouba hablada (cf. Audio 1)y kiki. Guardar en el formato MP3: Un archivo para la palabra bouba y otro para la palabra kiki.
    2. Crea los sonidos de bouba y kiki que no sean palabras, imitando la duración y frecuencia (es decir, la melodía) de las palabras habladas 'bouba' y 'kiki'. Utilice un generador de ondas sonoras y una curva de tono. Guardar en el formato MP3: Un archivo para el sonido bouba (cf. Audio 2) y otro para el sonido kiki.
    3. Instale la aplicación VLC para iOS en un smartphone. Transfiera los archivos MP3 para bouba y kiki a la aplicación VLC.

Audio 1: Palabra Bouba Haga clic aquí para descargar este archivo.

Audio 2: Sonido Bouba Haga clic aquí para descargar este archivo.

4. Procedimiento y puntuación

  1. Configurar la sesión de prueba
    1. Llevar a cabo los tres experimentos en una habitación tranquila que es de color neutro, y con todos los participantes individualmente. Pida a los participantes del grupo con los ojos vendados que se pongan la venda en los ojos, antes de configurar los materiales táctiles/auditivos visuales, y asegúrese de que mantengan la venda en los ojos durante y entre los tres experimentos.
  2. Configurar los materiales táctiles/visuales
    1. Coloque la alfombra de goma directamente delante del participante. A continuación, coloque (Experimento 1) las dos formas táctiles/visuales de bouba y kiki (Experimento 2), la forma de bouba o kiki táctil/visual y (Experimento 3), la película de grabado de papel/plástico en la parte superior de la alfombra de goma.
      NOTA: En el Experimento 1, asegúrese de presentar siempre bouba a la izquierda y kiki a la derecha; y tanto en el Experimento 1 como en el Experimento 2, para presentarlos siempre en la misma orientación (cf. Figura 1):Mejorar la capacidad de los participantes para formar imágenes mentales de las formas bouba y kiki sin interferencia de su posición y/o orientación en la alfombra de goma. Asegúrese de no informar a los participantes sobre esta presentación fija de las formas táctiles/visuales de bouba y kiki. En el grupo de visión, siempre configure el material de prueba detrás de una placa de cartón / tablero de espuma, para evitar que estos participantes tomeuns un adelanto de lo que está en la tienda.
  3. Configurar los materiales auditivos
    1. Coloque el reproductor de MP3 directamente delante del participante (al otro lado de la alfombra de goma), con el altavoz más cercano a ellos.
      NOTA: No repita verbalmente la información auditiva del reproductor MP3: Para evitar que los participantes en el grupo de visión observen los movimientos de los labios en los ensayos de palabras bouba/kiki1, y así mantener bajo control en todos los grupos experimentales la cantidad y el tipo de información sensorial.
  4. Realizar el Experimento 1, El Experimento 2 y el Experimento 3
    1. Invite a los participantes que explorarán y dibujarán las formas táctiles (es decir, el grupo ciego y con los ojos vendados) a explorar la alfombra de goma (por contacto): Por ejemplo, para el tamaño y la textura, sin ninguna de las tarjetas de imagen táctiles / visuales y / o copiar papel o plástico película de relieve colocada en la parte superior.
  5. Realizar experimento 1
    1. Explique que se presentarán dos tarjetas de imagen en la alfombra de goma, cada una de las que se imagina una forma táctil/visual. A continuación, explique que se reproducirá algo de audio desde el reproductor de MP3 y que este audio corresponderá a una de las formas táctiles/visuales.
      NOTA: No informe a los participantes sobre los dos tipos de bouba/kiki táctil/visual (llenado y esbozado) y los dos tipos de bouba/kiki auditivo (sonido y palabra).
    2. Coloque las dos tarjetas de imagen táctiles/visuales en la alfombra de goma (cf. Figura 1).
    3. En el grupo ciego y con los ojos vendados, pida al participante que haga un puño usando ambas manos y que coloque sus puños encima de las tarjetas de imagen táctiles/visuales presentadas, guiándolos si es necesario. Coloque la mano izquierda encima de los puños del participante.
    4. Pida al participante que explore las dos formas táctiles/visuales, el grupo ciego y con los ojos vendados por el tacto y el grupo de visión por visión, cuando se retire la mano en la parte superior de sus puños (grupo ciego y vendado) / la placa de cartón o tablero de espuma (grupo de visión), y decir ' Sí' cuando hayan terminado su exploración.
    5. Retire la mano izquierda de los puños del participante (en el grupo ciego y con los ojos vendados) / la placa de cartón o la tabla de espuma (en el grupo de visión).
    6. Tan pronto como el participante diga "sí", cubra las tarjetas de imagen táctiles/visuales.
    7. Reproduce el audio del reproductor de MP3.
      NOTA: Reproduzca la información auditiva del reproductor MP3 una sola vez y no la repita por vía oral a los participantes.
    8. Pida al participante que señale qué forma táctil/visual asocia con el audio, por ejemplo, diciendo "izquierda/derecha", "curvado/angular" o "flor/estrella", y anote la forma dada. No responda a la respuesta del participante.
    9. Puntuar si la respuesta del participante es correcta o incorrecta.
      NOTA: Repita 4.5.2–4.5.9 para las ocho pruebas.
  6. Llevar a cabo el experimento 2
    1. Explique que una tarjeta de imagen, que pictura una forma táctil/visual, se presentará en la alfombra de goma y que se reproducirá algo de audio desde el reproductor de MP3. A continuación, explique que el audio se reproducirá una vez por tarjeta de imagen, tan pronto como el participante comience a explorar la forma táctil/visual.
      NOTA: No informe a los participantes sobre los dos tipos de bouba/kiki táctil/visual (llenado y esbozado), el único tipo de bouba/kiki auditivo (sonido) y los dos tipos de congruencia (congruente e incongruente).
    2. Coloque la tarjeta de imagen táctil/visual en la alfombra de goma.
    3. En el grupo ciego y con los ojos vendados, pida al participante que haga un puño usando ambas manos y que coloque sus puños encima de la tarjeta de imagen táctil/visual presentada, guiándolos si es necesario. Coloque la mano izquierda encima de los puños del participante.
    4. Pida al participante que explore la forma táctil/visual, el grupo ciego y con los ojos vendados por el tacto y el grupo de visión por visión, cuando se retire la mano en la parte superior de sus puños (grupo ciego y con los ojos vendados) / la placa de cartón o tablero de espuma (grupo de visión), y para escuchar el audio. Luego, pídales que nombren la forma táctil/visual y el audio como 'bouba' o 'kiki': Un nombre sólo23,24,25, cuando hayan terminado su exploración.
    5. Retire la mano izquierda de los puños del participante (en el grupo ciego y con los ojos vendados) / la placa de cartón o tablero de espuma (en el grupo de visión) y reproduzca el audio del reproductor de MP3.
      NOTA: Reproduzca la información auditiva del reproductor MP3 una sola vez y no la repita por vía oral a los participantes.
    6. Tan pronto como el participante nombre la forma táctil / visual y el audio, cubra la tarjeta de imagen y anote el nombre dado. No responda a la respuesta del participante.
    7. Puntuar si la respuesta del participante es correcta o incorrecta.
      NOTA: Repita 4.6.2–4.6.7 para las ocho pruebas.
    8. A través de los ensayos congruentes e incongruentes, contar a un participante como "correcto" cuando han reconocido el 75% de las formas táctiles/visuales de bouba y kiki.
  7. Llevar a cabo el experimento 3:
    1. Explique que se colocará alguna película de grabado en papel/plástico encima de la alfombra de goma, en lugar de la(s) tarjeta(s) de imagen táctil/visual, y que se le pedirá al participante que dibuje sobre ella. En el grupo ciego y con los ojos vendados, invite al participante a probar los diferentes equipos de dibujo y a decidir por sí mismos cuál es el de su preferencia: la película de papel de copia o de grabado de plástico y bolígrafo de rodillos o estilo de silla de montar. A continuación, explique que se reproducirá algo de audio desde el reproductor de MP3 y que el participante dibujará la forma táctil/visual que asocian con este audio, una forma por segmento de audio cuando se le pregunte.
      NOTA: No informar a los participantes sobre la información auditiva (bouba y kiki), ni los dos tipos de bouba/kiki auditivo (sonido y palabra).
    2. Coloque la película de grabado de papel/plástico en la alfombra de goma.
    3. En los tres grupos experimentales (ciegos; vendados; visión), pida al participante que haga un puño usando ambas manos mientras sostiene el estilo de bolígrafo/saddleback y que coloque sus puños encima de la película de copia de papel/plástico en relieve, guiándolos si es necesario. Coloque la mano izquierda encima de los puños del participante.
    4. Pida al participante que dibuje la forma que asocia con el audio presentado cuando se quita la mano enla parte superior de sus puños. En el grupo ciego y con los ojos vendados, pida al participante que dibuje una forma táctil; y en el grupo de visión, una forma visual. Pida al participante que diga "sí" cuando haya terminado su dibujo.
    5. Retire la mano izquierda de los puños del participante.
    6. Reproduce el audio del reproductor de MP3.
      NOTA: Reproduzca la información auditiva del reproductor MP3 una sola vez y no la repita por vía oral a los participantes.
    7. Tan pronto como el participante diga "sí", retire su dibujo táctil/visual de la alfombra de goma y etiquételo en la esquina inferior derecha con el número de prueba correcto. No responda ni proporcione comentarios sobre la respuesta/forma dibujada del participante.
      NOTA: Repita 4.7.2–4.7.7 para las cuatro pruebas.
    8. Escanee todos los dibujos táctiles/visuales (tamaño 1:1) en el formato jpg inmediatamente después de cada sesión de prueba.
      NOTA: El experimento 3 es puntuado por un grupo de anotadores después de que se hayan recopilado todos los datos del dibujo.
    9. Elaborar un cuestionario para puntuar los datos del dibujo (cf. Figura 2):
      1. Reduzca la escala de todos los dibujos escaneados para incluir 12 imágenes por página en el formato A4 horizontal.
      2. Asigne aleatoriamente ensayos de bouba/kiki, ensayos de sonido/palabras y cajones ciegos/ciegos/visiones.
      3. Agregue el número de prueba en la esquina superior izquierda de cada imagen.
      4. Añadir 'bouba' y 'kiki', y 'ciego', 'blindfolded' y 'sighted' debajo de cada imagen.
    10. Reclutar a un goleador de grupo, mayor de 18 años; con audición y visión normales/corregidas a la normal; sin retraso cognitivo o deterioro, ni ninguna discapacidad física; que son todos ingenuos para este estudio, y que muestran una palabra visual impresa en forma bouba/kiki-effect.
    11. Pida a los anotadores que respondan dos preguntas de opción múltiple por imagen en el cuestionario:
      (1) '¿Está la forma en la imagen "bouba" o "kiki;" y (2) '¿Está la forma enlacada dibujada por alguien ciego (desde el nacimiento), con los ojos vendados o completamente avistado?' 17.
    12. Dependiendo del número de imágenes en el cuestionario, pida a la mitad del grupo de anotadores que puntúe la mitad del cuestionario, y la otra mitad que puntúe el resto.
    13. Para cada ensayo, cuente 'corresponder', 'no corresponder' y 'no concluyente', es decir:
      1. 'Correspond' cuando (i) el 75% de los anotadores acordaron qué forma táctil/visual (bouba o kiki) se engrafió, y ii) esta forma correspondía a la bouba/kiki auditiva presentada en este ensayo.
      2. "No corresponder" cuando (i) el 75 % de los anotadores acordaron qué forma táctil/visual (bouba o kiki) se enmarcó, y ii) esta forma no se correspondía con la bouba/kiki auditiva presentada en este ensayo.
      3. "No concluyente" cuando el <75% de los anotadores acordaron qué forma táctil/visual (bouba o kiki) se enmarcó. Elimine las imágenes 'no concluyentes'/dibujos de participantes de los análisis estadísticos.
    14. A lo largo de los ensayos, cuente a un participante como "corresponde" cuando el 75 % de sus imágenes mentales dibujadas: Es decir, que las formas táctiles/visuales corresponden al bouba/kiki auditivo presentado.
    15. Para cada ensayo, cuente "reconocido", "no reconocido" y "no concluyente", es decir:
      1. "Reconocido" cuando (i) el 66,6% de los anotadores acordaron qué grupo experimental (ciego, vendado o visión) había dibujado la forma en la imagen, y (ii) esto era correcto en este ensayo.
      2. "No reconocido" cuando (i) el 66,6% de los anotadores acordaron qué grupo experimental (ciego, vendado o visión) había dibujado la forma en la imagen, y (ii) esto no era correcto en este ensayo.
      3. "No concluyente" cuando <66,6% de los anotadores acordaron qué grupo experimental (ciego, vendado o visión) había dibujado la forma en la imagen. Excluir de los análisis estadísticos los reconocimientos de participantes «no concluyentes».
    16. A lo largo de los ensayos (y con los reconocimientos de participantes "no concluyentes" eliminados), contar a un participante como "reconocido" cuando se reconoce en el 75 % de todos los ensayos.

Figure 2
Figura 2: Ejemplos del cuestionario para puntuar los datos del dibujo Haga clic aquí para ver una versión más grande de esta figura.

Representative Results

El efecto bouba/kiki

Seis de los 12 participantes que eran ciegos congénitamente (50%), nueve de los 12 que tenían los ojos vendados (75%), y 10 de los 12 que estaban completamente avistados (83%) mostró un efecto instantáneo de bouba/kiki táctil/visual-auditivo: Es decir, tanto la venda de los ojos como el grupo de visión estaban significativamente por encima del nivel de probabilidad (del 50%):2(1. N a 12) a 3,00, p a 0,08 ya 2(1. N a 12) a 5,33, p a 0,02 (Experimento 1, Prueba 1)17. La prueba exacta de Fisher no encontró ninguna diferencia significativa entre los tres grupos experimentales (Experimento 1, prueba previa)17. (Cf. Tabla 1.)

Cuando se trata del efecto bouba/kiki táctil/visual-auditivo a largo plazo: En la primera medida dentro del grupo repetida, nueve de los participantes ciegos congénitamente mostraron el efecto bouba/kiki junto con nueve que fueron completamente avistados y siete con los ojos vendados: El grupo ciego y visual significativamente por encima del nivel de probabilidad (del 50%):2libras (1. N a 12) a 3,00, p a 0,08 ya 2(1. N a 12) a 3,00, p a 0,08 (Experimento 1, Prueba 4)17. En la segunda medida repetida dentro del grupo, 11 participantes en el grupo ciego y visual mostraron el efecto bouba/kiki táctil/visual-auditivo: Ambos grupos experimentales estaban de nuevo significativamente por encima del nivel de probabilidad (del 50%):2(1. N a 12 o 8,33, p a 0,00 y2(1. N a 12 o 8,33, p a 0,00; y siete en el grupo de los ojos vendados (Experimento 1, Prueba 5)17. Finalmente, en la tercera medida y post-prueba dentro del grupo, nueve de los 12 participantes que eran congénitamente ciegos (75%), seis de los 12 que tenían los ojos vendados (50%), y todos los 12 participantes que fueron completamente avistados (100%) mostró el efecto bouba/kiki táctil/visual-auditivo; tanto el grupo ciego como el de la visión estaban de nuevo significativamente por encima del nivel de probabilidad (del 50%):2libras (1. N a 12) a 3,00, p a 0,08 ya 2(1. N a 12) a 12,00, p a 0,00 (Experimento 1, Prueba 8)17. La prueba exacta de Fisher encontró una diferencia significativa entre la venda de los ojos y el grupo de visión [p - 0.01. (Experimento 1, post-prueba)] 17. (Cf. Tabla 1.)

Grupo participante Efecto bouba/kiki- instantáneo Efecto bouba/kiki a largo plazo
Prueba previa Medida repetida 1 Medida repetida 2 Medida repetida 3/post-prueba
Ciego 50.0% 75.0% 91.7% 75.0%
Venda 75.0% 58.3% 58.3% 50.0%
Visión 83.3% 75.0% 91.7% 100.0%

Tabla 1: El efecto bouba/kiki instantáneo y a largo plazo

El reconocimiento de las formas de bouba y kiki

Once de los 12 participantes que fueron ciegos congénitamente (92%), nueve de los 12 que tenían los ojos vendados (75%), y todos los 12 que fueron completamente avistados (100%) reconoció al instante el congruente bouba/kiki táctil/visual y auditivo; los tres grupos experimentales estaban significativamente por encima del nivel de probabilidad (del 50%):2(1. N a 12 o 8,33, p a 0,00,2(1. N a 12) a 3,00, p a 0,08 ya 2(1. N a 12) a 12,00, p a 0,00 (Experimento 2, Prueba 1)17. (Cf. Tabla 2.)

A largo plazo, 11 participantes en el grupo ciego reconocieron las formas táctiles de bouba/kiki junto con audio congruente y 10 participantes con audio incongruente: Ambos tipos de congruencia reconocidos significativamente por encima del nivel de probabilidad (del 50%):2( 1. N a 12) a 8,33, p a 0,00 ya 2(1. N a 12) 5,33, p a 0,02 (Experimento 2, Prueba 1-8)17. Nueve participantes en el grupo con los ojos vendados reconocieron las formas táctiles junto con el audio congruente y ocho participantes junto con audio incongruente; en otras palabras, la forma congruente y el audio estaban significativamente por encima del nivel de probabilidad (del 50%):2(1. N a 12) a 3,00, p a 0,08 (Experimento 2, Prueba 1-8)17. Los 12 participantes en el grupo de visión reconocieron las formas visuales de bouba/kiki junto con el audio congruente y seis participantes con audio incongruente: La forma congruente y el audio reconocido significativamente por encima del nivel de oportunidad (del 50%):2(1. N a 12) a 12,00, p a 0,00 (Experimento 2, Prueba 1-8)17. (Cf. Tabla 2.)

Grupo participante Reconocimiento instantáneo de la forma bouba/kiki Reconocimiento a largo plazo de formas bouba y kiki
Forma y audio congruentes Forma y audio congruentes Forma y audio incongruentes
Ciego 91.7% 91.7% 83.3%
Venda 75.0% 75.0% 66.7%
Visión 100.0% 100% 50.0%

Tabla 2: El reconocimiento instantáneo y a largo plazo de las formas bouba y kiki

Las imágenes mentales de bouba y kiki

Ocho de los 12 participantes que fueron ciegos congénitamente [73% (con un dibujo de participante 'inconcluso' eliminado)], ocho de los 12 que tenían los ojos vendados [89% (con tres dibujos de participantes "no concluyentes" eliminados)], y ocho de los 12 que fueron completamente avistados [80% (con dos dibujos de participantes 'no concluyentes' eliminados)] dibujó instantáneamente una imagen mental: Una forma táctil/visual que correspondía al bouba/kiki auditivo presentado (Experimento 3, Prueba 1)17. Tanto la venda de los ojos como el grupo de visión estaban significativamente por encima del nivel de probabilidad (del 50%):2libras (1. N a 9) a 5,44, p a 0,02 ya 2(1. N a 10) a 3,60, p a 0,06 (Experimento 3, Prueba 1)17. (Cf. Tabla 3.)

En cuanto a las imágenes mentales a largo plazo de bouba y kiki: 11 participantes en el grupo ciego, ocho en el grupo de venda-ojos, y 12 en el grupo de visión dibujaron formas táctiles / visuales bouba /kiki que correspondían a la bouba/kiki auditiva presentada (Experimento 3, Prueba 1-4)17. Tanto el grupo ciego como el de la visión estaban significativamente por encima del nivel de probabilidad (del 50%):2libras (1. N a 12 o 8,33, p a 0,00 y2(1. N a 12) a 12,00, p a 0,00 (Experimento 3, Prueba 1-4)17. La prueba exacta de Fisher encontró una diferencia significativa entre el grupo de los ojos vendados y el grupo de visión [p - 0.09 (Experimento 3, Prueba 1-4)]17. (Cf. Tabla 3.)

Grupo participante Imagen mental instantánea de bouba/kiki Imágenes mentales a largo plazo de bouba y kiki
Ciego 72.7% 91.7%
Venda 88.9% 66.7%
Visión 80.0% 100.0%

Tabla 3: Las imágenes mentales instantáneas y a largo plazo de bouba y kiki

Además. El 83 % de todos los dibujos de los participantes incluían la característica de la forma más característica de las formas globales de bouba y kiki: Curva y ángulo, respectivamente (Experimento 3, Prueba 1-4)17. Los dibujos participantes diferían en la cantidad de curvas/ángulos (por ejemplo, uno y cinco ángulos para la palabra kiki: cf. Figura 2, Ensayos 1, 6 y 9), y en la dirección de las curvas/ángulos [es decir, horizontal, vertical o diagonal: cf. Figura 2, Ensayos 2, 5 y 8 (sonido bouba)], pero normalmente no incluían la forma global de bouba/kiki [Experimento 3, Prueba 1-4 (cf. Figura 1; Figura 2)]17. Por último, el grupo experimental fue reconocido en el 43% de las respuestas de las puntuaciones: Cinco participantes en el grupo ciego, tres en el grupo de los ojos vendados y cinco en el grupo de visión; ningún grupo experimental estaba significativamente por encima del nivel de probabilidad [de 33,3% (Experimento 3, Prueba 1-4)]17.

El efecto de las imágenes visuales y el aprendizaje

El protocolo presentado logró investigar el papel de las imágenes visuales en el efecto bouba/kiki, si la capacitación en la detección de las regularidades táctiles/visual-auditivas de bouba y kiki afectó al efecto bouba/kiki y al reconocimiento de las regularidades táctiles individuales /visual bouba y kiki formas, y finalmente lo que imágenes mentales estas regularidades de forma-audio produjeron17. Al incluir un grupo experimental sin experiencia visual (es decir, el grupo ciego) y dos grupos experimentales con experiencia visual (es decir, la venda en los ojos y el grupo de visión), fue posible probar el efecto de las imágenes visuales; y al incluir un grupo experimental sin experiencia visual y amplia experiencia táctil (es decir, el grupo ciego) y un grupo experimental con amplia experiencia visual y sin experiencia táctil (es decir, el grupo con los ojos vendados), fue posible probar el efecto de la formación en la notar las regularidades táctiles-auditivas. Los resultados sugieren claramente que el grupo con los ojos vendados se basó en imágenes visuales para resolver nuevos problemas táctiles-auditivos, pero no a largo plazo (Experimento 1–3); que la formación en la nota de las regularidades de la forma-audio bouba/kiki afectó al efecto bouba/kiki táctil/visual (Experimento 1) y al reconocimiento de formas individuales táctiles/visuales de bouba y kiki [es decir, junto con audio congruente (Experimento 2)] , pero de manera diferente en cada grupo experimental (Experimento 1-2), y que todos los grupos experimentales crearon imágenes mentales de la característica más característica de la característica de forma táctil/visual-auditiva de bouba (curva) y kiki [(ángulo) Experimento 3. Cf. Tabla 1; Cuadro 2; Cuadro 3]17. Además, al incluir medidas repetidas dentro del grupo de efecto instantáneo y a largo plazo (Experimento 1-3), fue posible probar cuándo se produjo realmente el efecto de las imágenes visuales y el aprendizaje de regularidades de audio de forma; y al incluir tres tareas diferentes (es decir, el efecto bouba/kiki táctil/visual-auditivo en el Experimento 1, reconociendo formas individuales táctiles/visuales de bouba/kiki junto con audio congruente e incongruente en el Experimento 2, y dibujando imágenes mentales de el audio bouba/kiki en el Experimento 3), para probar lo robustos que eran estos efectos. Los resultados sugieren claramente que el efecto de las imágenes visuales no fue robusto a largo plazo dentro de cada tarea, especialmente cuando se utiliza el toque háptico [cf. el grupo de los ojos vendados (Experimento 1-3)]; mientras que el efecto del aprendizaje de las regularidades de la forma y el audio era, pero no a través de las tareas [cf. los ciegos y el grupo de visión (Experimento 1-3). Cf. Tabla 1; Cuadro 2; Tabla 3.] 17

Discussion

El protocolo presentado es apropiado para investigar el efecto de las imágenes visuales y el aprendizaje de las regularidades de audio de forma, cuando se producen y lo robustos que son; en individuos y grupos específicos de individuos.

Este protocolo sería apropiado para probar no sólo la precisión, sino también el tiempo de exploración: Desde cuando el experimentador retira su mano izquierda de los puños del participante (en el grupo ciego y con los ojos vendados) / la placa de cartón o tablero de espuma (en el grupo de visión) a cuando el participante dice "sí". En los análisis estadísticos, el tiempo de exploración más largo por ensayo por grupo experimental se dividiría en cuatro y el número de participantes "rápidos", "medios" y "lentos" en cada grupo experimental contado: "Rápido" usando el 25 % de este tiempo de exploración, ' medio' usando 26-75%, y 'lento' usando 75%. Durante los ensayos, los participantes se contarían como en el Experimento 2: Es decir, como "rápido" si se cuenta como "rápido" en el 66,6 % de todos los ensayos, como "medio" si se cuenta como "medio" en el 66,6 % de todos los ensayos, y así sucesivamente. (Para 'inconcluso', es decir, el participante no puede ser contado como 'rápido', 'medio' o 'lento', cf. Experimento 3.) Sería posible probar el tiempo de exploración para obtener respuestas correctas e incorrectas por separado, dependiendo del tamaño de la muestra y/o del número de respuestas correctas e incorrectas. Ya sea la precisión de las pruebas, el tiempo de exploración o ambos, hay pasos críticos del protocolo que deben seguirse: los tres experimentos deben llevarse a cabo en orden fijo, y sus ensayos presentados en orden fijo, para todos los participantes. Los participantes no deben ser conscientes de que los materiales de prueba en los tres experimentos incluyen bouba y kiki. Además, la información auditiva del reproductor de MP3 debe reproducirse una sola vez y no repetirse por vía oral a los participantes (los tres experimentos). En el Experimento 1 y el Experimento 2, el bouba táctil/visual y el kiki deben presentarse en la misma posición y orientación. Para el grupo de visión (en los tres experimentos), los materiales de prueba deben establecerse detrás de una placa de cartón / placa de espuma. Finalmente, en el grupo con los ojos vendados, los participantes no deben quitarse la venda hasta que se haya completado el Experimento 3. Estos pasos son para garantizar que la cantidad y el tipo de información sobre el táctil/visual y el bouba auditivo y el kiki se mantengan bajo control en todos los grupos experimentales. Además, es crucial en el Experimento 2 presentar el bouba/kiki auditivo tan pronto como el participante comience a explorar el bouba/kiki táctil/visual. Esto garantizará que se presente información multimodal (congruente o incongruente). Además, este protocolo también sería apropiado para probar otros grupos de individuos. Para integrarlos, estos grupos participantes podrían añadirse como grupos experimentales independientes: por ejemplo, un grupo de percepción de color y un grupo de percepción de forma; 22 un grupo de pérdida de visión repentina y un grupo de pérdida de visión progresiva; 20 , Se podrían añadir 21 y/o grupos específicos de personas con discapacidad auditiva y/o un Trastorno del Espectro Autista13.

Con este protocolo, sería posible establecer una norma de grupo (para la precisión y/o el tiempo de exploración) para grupos específicos en cada efecto instantáneo y a largo plazo, incluyendo cada medida repetida dentro del grupo, y / o tarea; a continuación, para probar a las personas en contra de su norma de grupo: Si cualquier individuo en particular o todo el grupo está en necesidad de más entrenamiento en la atención de las regularidades de audio de forma. Una norma de grupo para cada efecto instantáneo y a largo plazo, incluyendo cada medida repetida dentro del grupo, y / o tarea también permitiría determinar qué tipo de entrenamiento es necesario para notar las regularidades de audio de forma: Por ejemplo, más ensayos con el táctil / efecto bouba/kiki visual (Experimento 1) y/o más ensayos con forma táctil/visual congruente e incongruente y audio (Experimento 2). De hecho, sería posible aumentar tanto el número de ensayos como el número de medidas repetidas dentro del grupo en cada tarea, así como alterar el tiempo entre ellos, permitiendo así una formación y pruebas más individualizadas.

Sin embargo, este protocolo tendría que modificarse si probar qué tipo de materiales (por ejemplo, bouba o kiki, forma táctil/visual rellena o esbozada, y/o sonido o palabra auditiva) garantiza mejor el aprendizaje de las regularidades de audio de forma. Una posible forma de modificar este protocolo podría consistir en presentar los diferentes materiales en bloques: Por ejemplo, formas táctiles/visuales llenas y sonido auditivo y/o formas táctiles/visuales esbozadas y palabra sorcelante (Experimento 1). Estos bloques podrían presentarse en orden aleatorio a todos los participantes en un grupo experimental; o alternativamente, cada uno de los cuatro bloques para separar los grupos experimentales (Experimento 1). Este protocolo también necesitaría modificarsi se prueba aún más la robustez de las imágenes visuales y/o las regularidades de audio de forma aprendidas dentro y entre las tareas. La modificación podría implicar la adición de medidas repetidas dentro del grupo con diferentes formas táctiles/visuales y/o audio que las incluidas en la capacitación; por ejemplo, con el sonido auditivo de 'maa-boo-maa' y 'tuh-kee-tee' después de entrenar con formas táctiles/visuales de bouba y kiki y palabras auditivas (Experimento 1)1,3,4,10, 11 , 12 , 13 , 14 , 15 , 16. Otra opción podría implicar la presentación de una tercera forma táctil/visual que no sea principalmente curvada/angular junto con las formas táctiles/visuales de bouba y kiki en el Experimento 110,11,12 ,13,14,15,16. Se podría crear una palabra sin sentido auditiva y un sonido para esta forma táctil/visual para producir un tercer par de palabras de forma14,15,16 y un tercer par de sonido de forma17 (Experimento 1). El par de sonido de forma podría incluirse en el Experimento 2 como ensayos de captura; o alternativamente como ensayos congruentes regulares y con los ensayos incongruentes correspondientes. Por último, el sonido (del Experimento 2 y el Experimento 1) y/o la palabra sin sentido (del Experimento 1) podrían presentarse en el Experimento 3. Una tercera opción podría implicar no llevar a cabo el Experimento 2 y el Experimento 3 en absoluto, sino incluirlos como tareas en las medidas repetidas dentro del grupo en el Experimento 1, en orden aleatorio.

El protocolo presentado es único en el sentido de que mantiene bajo control tanto las imágenes visuales como la información sensorial durante el entrenamiento y las pruebas. Es flexible: Se pueden probar muestras grandes y pequeñas e individuos específicos contra sí mismos (cf. las pruebas dentro del grupo) y/u otros grupos de individuos (cf. las pruebas entre grupos). Es posible probar la precisión y el tiempo de exploración, cambiar el número de ensayos y las medidas repetidas dentro del grupo en cada experimento y el tiempo entre ellos, y cambiar o incluso colapsar el orden de los ensayos y / o experimentos.

Disclosures

Los autores no tienen nada que revelar.

Acknowledgments

Financiadores:
Este trabajo fue financiado por el programa de investigación e innovación Horizonte 2020 de la Unión Europea en el marco de las Acciones Marie Sklodowska-Curie (número de acuerdo de concesión 657440) y la Asociación Noruega de Ciegos y Ojos Parcialmente.

Maquillaje de película:
Maquillador Rachael Parrey.

Materials

Name Company Catalog Number Comments
Bouba/kiki filled 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki outlined 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki sound (sine wave)
Bouba/kiki word (human voice)
Carton plate/foam board for covering bouba/kiki (white) Ryman 230461860 297 mm horizontal x 210 vertical 0 mm vertical
Copy paper [white (80 g/m2 )] Ryman 250030000 210 mm horizontal x 148 mm vertical
Foam board for bouba/kiki picture cards [white (5 mm thick)] Ryman 230461860 50 mm horizontal x 50 mm vertical
MP3-player (smartphone with the VLC app for iOS installed) Carphone Warehouse
Plastic embossing film RNIB Shop ZM04 210 mm horizontal x 148 mm vertical
Rollerball pen [black (1.0 mm tip)] Ryman 827134001
Rubber mat RNIB Shop LC177 230 mm horizontal x 150 mm vertical
Saddleback style RNIB Shop B511
Swell paper Zychem Ltd Zytex2 paper 50 mm horizontal x 50 mm vertical

DOWNLOAD MATERIALS LIST

References

  1. Ramachandran, V. S., Hubbard, E. M. Synaesthesia - A Window Into Perception, Thought and Language. Journal of Consciousness Studies. 8 (12), 3-34 (2001).
  2. Bremner, A. J., Caparos, S., Davidoff, J., de Fockert, J., Linnell, K. J., Spence, C. Bouba’’and ‘‘Kiki’’ in Namibia? A remote culture make similar sound-shape matches, but different taste-shape matches to Westerners. Cognition. 126 (2), 165-172 (2013).
  3. Davis, R. The fitness of names to drawings. A cross-cultural study in Tanganyika. British Journal of Psychology. 52 (3), 259-268 (1961).
  4. Maurer, D., Pathman, T., Mondloch, C. J. The shape of boubas: sound-shape correspondences in toddlers and adults. Developmental Science. 9 (3), 316-322 (2006).
  5. Ozturk, O., Krehm, M., Vouloumanos, A. Sound-symbolism in infancy: Evidence for sound-Shape cross-modal correspondences in 4-months-olds. Journal of Experimental Child Psychology. 114 (2), 173-186 (2013).
  6. Bar, M., Neta, M. Humans Prefer Curved Visual Objects. Psychological Science. 17 (8), 645-648 (2006).
  7. Bertamini, M., Palumbo, L., Gheorghes, T. N., Galatsidas, M. Do observers like curvature or do they dislike angularity? British Journal of Psychology. 107 (1), 154-178 (2016).
  8. Quinn, P. C., Brown, C. R., Streppa, M. L. Perceptual Organization of Complex Visual Configurations by Young Infants. Infant Behavior and Development. 20 (1), 35-46 (1997).
  9. Silvia, P. J., Barona, C. M. Do people prefer curved objects? Angularity, expertise, and aesthetic preference. Empirical Studies of the Arts. 27 (1), 25-42 (2009).
  10. Nielsen, A., Rendall, D. The Sound of Round: Evaluating the Sound-Symbolic Role of Consonants in the Classic Takete-Maluma Phenomenon. Canadian Journal of Experimental Psychology. 65 (2), 115-124 (2011).
  11. D’Onofrio, A. Phonetic Detail and Dimensionality in Sound-shape Correspondences: Refining the Bouba-Kiki Paradigm. Language and Speech. 57 (3), 367-393 (2014).
  12. Westbury, C., Hollis, G., Sidhu, D. M., Pexman, P. M. Weighing up the evidence for sound symbolism: Distributional properties predict cue strength. Journal of Memory and Language. 99, 122-150 (2018).
  13. Oberman, L. M., Ramachandran, V. S. Preliminary evidence for deficits in multisensory integration in autism spectrum disorders: The mirror neuron hypothesis. Social Neuroscience. 3 (3-4), 348-355 (2008).
  14. Köhler, W. Gestalt psychology. , Liveright. New York, NY. (1929).
  15. Monaghan, P., Mattock, K., Walker, P. The Role of Sound Symbolism in Language Learning. Journal of Experimental Psychology: Learning, Memory, and Cognition. 38 (5), 1152-1164 (2012).
  16. Fort, M., Martin, A., Peperkamp, S. Consonants are More Important than Vowels in the Bouba-kiki Effect. Language and Speech. 58 (2), 247-266 (2015).
  17. Graven, T., Desebrock, C. Bouba or kiki with and without vision: Shape-audio regularities and mental images. Acta Psychologica. 188, 200-212 (2018).
  18. Fryer, L., Freeman, J., Pring, L. Touching words is not enough: How visual experience influences haptic-auditory associations in the “Bouba-Kiki” effect. Cognition. 132 (2), 164-173 (2014).
  19. Fontana, F. Association of Haptic Trajectories to Takete and Maluma. Lecture Notes in Computer Science. 7989, 60-68 (2013).
  20. Graven, T. How blind individuals discriminate braille characters: An identification and comparison of three discrimination strategies. British Journal of Visual Impairment. 33 (2), 80-95 (2015).
  21. Graven, T. How attention is allocated when using haptic touch: Shape feature distinction and discrimination strategy. EuroHaptics 2016, Part 1. Bello, F., Kajimoto, H., Visell, Y. , Springer International Publishing AG. Switzerland, Heidelberg. Part of the Lecture Notes in Computer Science book series (LNCS, volume 9774) 380-393 (2016).
  22. WHO. ICD-10 version: 2016 (International Statistical Classification of Diseases and Related Health Problems 10th revision). Chapter VII Diseases of the eye and adnexa (H00-H59). , Available from: http://apps.who.int/classifications/icd10/browse/2016/en#/H53-H54 (2019).
  23. Heller, M. A., Calcaterra, J. A., Burson, L. L., Tyler, L. A. Tactual picture identification by blind and sighted people: Effects of providing categorical information. Perception & Psychophysics. 58 (2), 310-323 (1996).
  24. Heller, M. A., Gentaz, E. Psychology of Touch and Blindness. , Psychology Press. New York, NY and Hove, East Sussex. (2014).
  25. Pathak, K., Pring, L. Tactual picture recognition in congenitally blind and sighted children. Applied Cognitive Psychology. 3 (4), 337-350 (1989).

Tags

Comportamiento Número 151 Bouba/kiki-efecto crossmodal táctil audición efecto de aprendizaje imagen mental multimodal regularidades sensoriales reconocimiento de formas regularidades de audio de forma visión imágenes visuales
Investigación del efecto de las imágenes visuales y el aprendizaje de las regularidades de audio de forma en Bouba y Kiki
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Graven, T., Desebrock, C.… More

Graven, T., Desebrock, C. Investigating the Effect of Visual Imagery and Learning Shape-Audio Regularities on Bouba and Kiki. J. Vis. Exp. (151), e59954, doi:10.3791/59954 (2019).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter