Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
JoVE Journal Behavior
Click here for the English version

Behavior

Investigando o efeito de imagens visuais e aprendizagem forma-regularidades de áudio em Bouba e Kiki

Published: September 13, 2019 doi: 10.3791/59954
Automatic Translation
1, 1
1Department of Experimental Psychology, University of Oxford

Summary

O objetivo do protocolo apresentado é investigar o papel da imagética visual no efeito Bouba/Kiki, se o treinamento em perceber a forma Bouba/Kiki-regularidades de áudio afeta o efeito Bouba/Kiki e o reconhecimento de formas individuais de Bouba e Kiki, e, finalmente, que imagens mentais essas regularidades produzem.

Abstract

Este artigo apresenta um protocolo para investigar o papel da imagética visual no Bouba/Kiki-Effect, se o treinamento em perceber o Bouba/Kiki forma-regularidades de áudio afeta o Bouba/Kiki-efeito e o reconhecimento de Bouba individual e formas Kiki, e, finalmente, que imagens mentais essas regularidades produzem. Para gerar regularidades de áudio de forma Bouba/Kiki, havia dois tipos de formas (preenchidas; delineadas) e dois tipos de áudio (palavra; som sem palavra). Três grupos de indivíduos participaram de três experimentos: cego, Blindfold e visão. Os experimentos foram conduzidos em ordem fixa entre os participantes, sem ruptura entre eles. No experimento 1 (pré-teste-pós-teste de desenho com três medidas repetidas dentro do grupo) os participantes foram solicitados a escolher a forma que eles associaram com o Bouba/Kiki auditivo; no experimento 2 (projeto dentro do assunto), para nomear uma forma e algum áudio (às vezes congruous; às vezes incongruous) como ' Bouba ' ou ' Kiki; ' e no experimento 3 (pós-teste apenas Design), para desenhar a forma que eles associaram com o auditivo Bouba/Kiki. Os resultados sugerem que o grupo Blindfold desenhe sobre imagens visuais para resolver novos problemas, mas não a longo prazo; que o treinamento em perceber Bouba/Kiki forma-regularidades de áudio afeta o Bouba/Kiki-efeito e o reconhecimento das formas individuais Bouba e Kiki, mas de forma diferente em cada grupo experimental; e que todos os grupos experimentais criam imagens mentais da característica de forma mais característica de Bouba (curva) e Kiki (ângulo). Na verdade, o efeito das imagens visuais é robusto entre as tarefas, mas não a longo prazo; o efeito da aprendizagem de regularidades de áudio de forma é robusta a longo prazo, mas não entre tarefas. O protocolo apresentado é apropriado para investigar o efeito da imagética visual e da aprendizagem da forma-regularidades de áudio, quando eles ocorrem e como eles são robustos; em indivíduos e grupos de indivíduos específicos. Este protocolo é único em que ele mantém controle tanto a imagética visual e as informações sensoriais durante o treinamento e teste.

Introduction

95% da população mundial mostra um efeito auditivo-visual de Bouba/Kiki, associando a forma visualmente arredondada com a palavra falada, ' Bouba; ' e a forma visualmente angular com a palavra falada ' Kiki; ' e eles fazem isso mesmo quando eles não tiveram nenhuma experiência com a forma ou a palavra1. O efeito Bouba/Kiki precede a aprendizagem de línguas; ocorre entre os idiomas1,2,3,4,5, com Bouba e Kiki (cf. preferência das pessoas por curvas visuais sobre ângulos visuais6,7 , 8 . º , 9), e depende da combinação de vogais e consoantes (por exemplo, não ocorre com ' Bibi ' e ' Kuku '.) 1. º , 5. º , 10 de , 11 anos de , 12. esta associação da forma-palavra ocorre com outros pares da forma e da palavra também, contanto que forem curvadas principalmente, como Bouba, e principalmente angular, como Kiki11,13; e/ou têm a mesma combinação de vogais e consoantes como ' Bouba ' e ' Kiki ', por exemplo: ' Baluma ' e ' takete ', ' Maluma ' e ' takete, ' ' uloomo ' e ' takete, ' ' Maa-Boo-Maa ' e ' tuh-Kee-tee '1,3, 4,10,11,12,14. Na verdade, as pessoas associam as formas visuais arredondadas com as palavras faladas contendo consoantes continuantes (como/l/e/m/) e as vogais de volta abertas (como/ɑ:/, e/ɔ:/) e as formas angulares visuais com as palavras faladas contendo consoantes plosivas (como/ k/e/t/) e feche as vogais dianteiras (tais como (/ε/e/i/)11,12,15,16. Elas são mais influenciadas pelas consoantes do que as vogais, especialmente pelas surdas (por exemplo,/k/e/t/)11,12,15,16. De fato, parece que as características das formas globais – suas curvas e ângulos17 – e o som das palavras faladas – sua melodia17 – são as mais cruciais, ao contrário das formas e palavras globais.

Um estudo investigou o Bouba/Kiki-efeito com Bouba tátil e Kiki em vez das formas de Bouba/Kiki visuais e constatou que os participantes que foram deficientes visuais mostraram um Bouba/Kiki-Effect significativamente menos robusto (~ 64%) do que o totalmente avistado (~ 90%)18. Este estudo argumentou que o efeito Bouba/Kiki significativamente menos robusto entre os participantes cegos e parcialmente avistados foi causado pela falta de imagens visuais: os participantes plenamente avistados haviam notado regularidades em seu ambiente que não são facilmente acessado quando a visão é prejudicada18. Não é desobstruído deste estudo, entretanto, se o imaginário Visual é necessário para que o Bouba/Kiki-efeito ocorra: somente seis dos 42 participants com um prejuízo Visual eram congenital totalmente cegos18, assim não tiveram nenhuma imaginação visual de todo. Além disso, os outros participantes, nenhum deles vendados, pode ter observado os movimentos dos lábios do experimentador ao anunciar a palavra Bouba/Kiki-movimentos lábio arredondados ao anunciar ' Bouba ' e movimentos de lábio angular ao anunciar ' Kiki '1 , 18 – mostrando um efeito tátil-Visual-auditivo Bouba/Kiki-Effect em vez de desenhar sobre qualquer imagética Visual. Adicionalmente, qualquer efeito de notar regularidades tátil-auditivas não foi investigado, por exemplo, comparando-se o efeito Bouba/Kiki no ensaio experimental e quatro em vez de calcular o efeito em todos os quatro ensaios. Além disso, o Bouba tátil e Kiki foram bastante diferentes através de ensaios: em ensaios um e dois eram formas 3D e 2D (curvo v angular); em ensaios de três e quatro, idênticos em forma (círculo) e diferentes em textura (liso v áspero; liso v spiky)18. Em uma veia relacionada, um estudo investigou um Bouba/Kiki-efeito cinestésico-auditivo em indivíduos de olhos vendados (totalmente avistado) e constatou que, após um período de treinamento de dois minutos de segurar uma caneta robótica programada para desenhar trajetórias do Bouba e Kiki as formas, 82% mostraram o Bouba/Kiki-Effect19. Não está claro a partir deste estudo, no entanto, se o efeito Bouba/Kiki ocorreu por causa do período de treinamento: o estudo não inclui um pré-teste, nem um grupo controle.

Para este fim, nós investigamos o papel da imagética visual no Bouba/Kiki-Effect, se o treinamento em notar o Bouba tátil/Visual-auditivo e as regularidades de Kiki afetaram o Bouba/Kiki-Effect e o reconhecimento do Bouba tátil/Visual individual e formas Kiki, e finalmente o que imagens mentais estas regularidades forma-áudio produzidos17. Para gerar Bouba/Kiki forma-regularidades de áudio-não apenas, por exemplo, Kiki-Shape/Kiki-palavra particularidades1 -este estudo incluiu dois tipos de formas tátil/Visual Bouba/Kiki (preenchido; delineado) e dois tipos de Bouba/Kiki auditivo [áudio ( palavra som sem palavra)]17. Três grupos de indivíduos participaram de três experimentos: cego (n = 12), olhos vendados (n = 12) e visão (n = 12). Os experimentos foram conduzidos em ordem fixa entre os participantes e sem ruptura entre eles, para manter controle a quantidade e o tipo de experiência dos participantes com Bouba e Kiki. No experimento 1 (pré-teste-pós-teste de desenho com três medidas repetidas dentro do grupo) os participantes foram solicitados a escolher a forma tátil/visual que eles associaram com o Bouba/Kiki auditivo; no experimento 2 (projeto dentro do assunto), para nomear uma forma tátil/visual e algum áudio (às vezes congruous; às vezes incongruous) como ' Bouba ' ou ' Kiki; ' e no experimento 3, (pós-teste apenas Design) para desenhar a forma tátil/visual que eles associaram com o Bouba auditivo/Kiki17. Globalmente, este estudo sugeriu que o efeito das imagens visuais é robusto entre tarefas, mas não a longo prazo dentro de cada tarefa, enquanto o efeito de aprendizagem de regularidades de áudio forma é robusto longo prazo dentro de cada tarefa, mas não entre as tarefas17. Este artigo apresenta o protocolo deste estudo17. O protocolo apresentado é apropriado para investigar o efeito da imagética visual e da aprendizagem da forma-regularidades de áudio, quando eles ocorrem e como eles são robustos; em indivíduos e grupos de indivíduos específicos. Este protocolo é único em que ele mantém controle tanto a imagética visual e as informações sensoriais durante o treinamento e teste.

Protocol

O Comitê de ética em pesquisa inter-divisional de ciências médicas (IDREC) da Universidade de Oxford forneceu aprovação para este protocolo (ref no: MS-IDREC-C1-2015-200, R46287/RE002 e R42687/RE004).

1. Design e condições

  1. Realize três experimentos na seguinte ordem fixa com todos os participantes: experimento 1, experimento 2 e experimento 3, sem interrupção entre eles. Certifique-se de que todos os participantes do experimento 2 participaram do experimento 1 e de todos os participantes do experimento 3 também no experimento 2 (e experimento 1).
  2. Realize o experimento 1 – um projeto pré-teste pós-teste, com três grupos experimentais: cego, Blindfold e visão; e três medidas repetidas dentro do grupo. Apresente os ensaios em ordem fixa a todos os participantes. (Número total de ensaios: 8.)
    1. Realize o pré-teste (ensaio 1) para testar o Instant tátil/Visual-auditivo Bouba/Kiki-Effect.
    2. Conduza a primeira medida dentro do grupo repetida (Trial 4) para testar o efeito da forma tátil/Visual repetida (preenchida ou esboçada) e áudio variado (som de palavra e não-palavra).
    3. Conduza a segunda medida dentro do grupo (Trial 5) para testar o efeito de uma nova forma tátil/Visual (esboçada ou preenchida) e áudio variado (som de palavra e não-palavra).
    4. Conduza a terceira medida dentro do grupo e o pós-teste (teste 8) para testar o efeito da forma tátil/Visual variada (preenchida e delineada) e áudio variado (som de palavra e não-palavra).
    5. Atribua aleatòria que tipo de formas táteis/visuais de Bouba/Kiki a apresentar nos testes 1-4 (enchido ou esboçado). Apresente o outro tipo em ensaios 4-8. Em seguida, atribua aleatoriamente qual palavra auditiva (Bouba ou Kiki) para apresentar no ensaio 1, e que Bouba/Kiki auditiva (Bouba ou Kiki e palavra ou som sem palavra) para apresentar em cada um dos Trials 2-8.
      Nota: Certifique-se que no total, há quatro Bouba e quatro testes de Kiki; quatro preenchido e quatro delineados tátil/Visual forma ensaios; quatro palavras auditivas e quatro experimentações sonoras não-palavra auditivas.
  3. Realize experimento 2 – um projeto dentro do assunto, com três grupos experimentais: cego, Blindfold e visão; e duas medidas dentro do grupo. Apresente os ensaios em ordem fixa a todos os participantes. (Número total de ensaios: 8)
    1. Teste o reconhecimento imediato de forma congruous (Bouba/Kiki + Bouba/Kiki)-áudio (Trial 1).
    2. Teste o reconhecimento de (a) congruous (Bouba/Kiki + Bouba/Kiki), e (b) forma-áudio incongruente (Bouba/Kiki + Kiki/Bouba) [através de quatro experimentações por o tipo de congruousness (experimentações 1-8)].
    3. Atribua aleatòria que tipo de forma tátil/visual de Bouba/Kiki (enchido ou esboçado) para apresentar nos testes 1-8. Então, atribua aleatòria que forma tátil/Visual congruous e som non-Word auditivo (Bouba + Bouba ou Kiki + Kiki) para apresentar no julgamento 1, e finalmente que tipo de congruousness (congruous ou incongruente tátil/Visual Bouba/forma de Kiki + auditivo Bouba/Kiki não-palavra de som) para apresentar em cada um dos Trials 2-8.
      Nota: Certifique-se que no total, existem quatro tátil/Visual Bouba e quatro tátil/Visual Kiki ensaios; quatro ensaios tácteis e visuais delineados e quatro; quatro ensaios congruous e quatro incongruente (forma + som não-palavra). (A palavra Bouba/Kiki auditiva não está incluída neste experimento.)
  4. Realize experimento 3 – um projeto pós-teste apenas, com três grupos experimentais: cego, Blindfold e visão. Apresente os ensaios em ordem fixa a todos os participantes (número total de ensaios: 4).
    1. Teste o que imagens mentais o treinamento em perceber regularidades forma-áudio (ou seja, experimento 1 e experimento 2) produziram, em quatro ensaios separados: Bouba palavra, Bouba som não-palavra, Kiki palavra, e Kiki não-palavra som.
    2. Atribua aleatoriamente que tipo de Bouba/Kiki auditiva (Bouba ou Kiki e palavra ou som sem palavra) para apresentar em cada um dos Trials 1-4.
      Nota: Certifique-se que no total, há um julgamento de palavra de Bouba auditiva, uma audição de som não-palavra de Bouba auditiva, um julgamento de palavra de Kiki auditiva, e uma audição de som não-palavra Kiki auditiva.

2. os participantes

  1. Recrutar um grupo de participantes que são congenitais cegos; ou seja, cego menos de quatro meses após o nascimento20,21,22: categorias 5: cegueira total; e 4: percepção de luz (percebendo uma fonte de luz) e projeção de luz (percebendo onde uma fonte de luz está situada)22. Certifique-se de que são todos os leitores de braille.
  2. Recrutar um grupo de participantes plenamente avistados, no dobro do tamanho do grupo de participantes que são congenitais cegos. Certifique-se que todos têm normal/corrigido para a visão normal.
    Nota: Certifique-se de que todos os participantes estão entre 18 e 70 anos de idade, com normal/corrigido para audição normal, sem atraso cognitivo ou prejuízo, nem quaisquer deficiências físicas, e que todos eles são ingênuos para o Bouba/Kiki-efeito.
  3. Atribua aleatoriamente metade do grupo dos participantes totalmente avistados ao grupo de venda e a outra metade ao grupo de visão.
    Nota: os participantes, tipo de forma tátil/Visual Bouba/Kiki (s), tipo de Bouba/Kiki auditiva, e congruousness são atribuídos aleatoriamente a uma das duas categorias: Blindfold ou visão; preenchido ou delineado; palavra ou som não-palavra; Bouba ou Kiki; congruous ou incongruous. Assim, a atribuição aleatória pode ser feita tanto por um programa de computador ou manualmente (por exemplo, por jogar uma moeda).

3. materiais

  1. Produza os materiais táteis/visuais
    1. Transfira as formas visuais de Bouba/Kiki (30 x 23 mm) para inchar papel, seja imprimindo-as de um computador pessoal ou por fotocópias, em seguida, de uma imagem. Certifique-se transferir dois tipos de formas visuais de Bouba/Kiki: um enchido e um esboçado [(1,5 pinta. linha). Cf. Figura 1].
    2. Passe o papel de ondulação através de um fusor de calor. Certifique-se o tátil Bouba/Kiki formas subir a ~ 0,5 mm de altura. Alternativamente, encomendar o tátil/Visual Bouba/Kiki formas de um serviço de transcrição para pessoas que são deficientes visuais (com um arquivo PDF anexado).
    3. Cole o papel de ondulação na placa de espuma [branco (5 mm de espessura)]. Use cola spray.
    4. Corte o papel do swell e a placa da espuma no tamanho (50 x 50 milímetros), isto é, para criar quatro cartões táteis/visuais separados do retrato: Bouba enchido, Bouba esboçado, Kiki enchido, e Kiki esboçado (cf. Figura 1). Use uma faca para cortar papel de parede.
    5. Corte um cartão da placa da caixa/espuma para cobrir as formas táteis/visuais do Bouba/Kiki no tamanho (297 x 210 milímetros). Use uma faca para cortar papel de parede. Alternativamente, encomende o formato A4.
    6. Corte o papel de cópia/película de gravação plástica no tamanho (210 x 148 milímetros). Use uma guilhotina. Alternativamente, encomende o formato a5.
    7. Corte uma esteira de borracha em tamanho (230 x 150 mm). Use uma faca ou um par de tesouras. Alternativamente, encomende o quadro de mão da lua e desmontá-lo para descobrir a esteira de borracha.

Figure 1
Figura 1: dois tipos de formas Bouba/Kiki: preenchido e delineado Por favor clique aqui para ver uma versão maior desta figura.

  1. Produza os materiais auditivos
    1. Grave o Bouba falado (cf. áudio 1) e as palavras de Kiki. Salvar no formato MP3: um arquivo para a palavra Bouba e um para a palavra Kiki.
    2. Criar o Bouba e Kiki sons não-palavra, imitando a duração e frequência (ou seja, melodia) das palavras faladas ' Bouba ' e ' Kiki '. Use um gerador de onda de som e Pitch Bend. Salvar no formato MP3: um arquivo para o som Bouba (cf. audio 2) e um para o som Kiki.
    3. Instale o aplicativo VLC para iOS em um smartphone. Transfira os arquivos MP3 para Bouba e Kiki para o aplicativo VLC. salvá-los como quatro arquivos separados: Bouba som, Bouba palavra, Kiki som, e Kiki palavra.

Áudio 1: palavra Bouba Por favor, clique aqui para baixar este arquivo.

Áudio 2: Bouba Sound Por favor, clique aqui para baixar este arquivo.

4. procedimento e Pontuação

  1. Configurar a sessão de teste
    1. Conduza os três experimentos em uma sala tranquila que é neutra em cores, e com todos os participantes individualmente. Peça aos participantes do grupo de venda para colocar em sua venda, antes de configurar o tátil/Visual-auditivo materiais, e certifique-se que manter a sua venda em toda e entre os três experimentos.
  2. Configurar os materiais táteis/visuais
    1. Coloque a esteira de borracha diretamente na frente do participante. Em seguida, coloque (experimento 1) as duas formas tátil/Visual Bouba e Kiki (experimento 2), a uma forma tátil/Visual Bouba ou Kiki e (experimento 3), o papel de cópia/filme de gravação de plástico em cima da esteira de borracha.
      Nota: no experimento 1, certifique-se de sempre apresentar Bouba à esquerda e Kiki à direita; e no experimento 1 e no experimento 2, para sempre apresentá-los na mesma orientação (cf. Figura 1): para melhorar a capacidade dos participantes de formar imagens mentais das formas Bouba e Kiki sem interferência de sua posição e/ou orientação sobre a esteira de borracha. Certifique-se de não informar os participantes sobre esta apresentação fixa das formas tátil/Visual Bouba e Kiki. No grupo de visão, sempre configurar o material de teste por trás de uma placa de papelão/placa de espuma, para evitar que esses participantes de dar uma espiada no que está na loja.
  3. Configurar os materiais auditivos
    1. Coloque o MP3 Player diretamente na frente do participante (do outro lado da esteira de borracha), com o altifalante mais próximo a eles.
      Nota: não repita verbalmente as informações auditivas do leitor de MP3: para evitar que os participantes do grupo de visão observem os movimentos dos lábios nos ensaios de palavras Bouba/Kiki1e, portanto, mantenham-se controle em todos os grupos experimentais a quantidade e o tipo de informação sensorial.
  4. Realizar experimento 1, experimento 2 e experimento 3
    1. Convide os participantes que irão explorar e desenhar as formas táteis (ou seja, o grupo cego e Blindfold) para explorar a esteira de borracha (por toque): por exemplo, para tamanho e textura, sem qualquer um dos cartões de imagem tátil/visual e/ou papel de cópia ou plástico película de gravação coloc na parte superior.
  5. Realizar experimento 1
    1. Explique-lhes que dois cartões de imagem serão apresentados no tapete de borracha, cada um imaginando uma forma tátil/Visual. Em seguida, explique que algum áudio será reproduzido a partir do leitor de MP3 e que este áudio corresponderá a uma das formas táteis/visuais.
      Nota: não informe os participantes sobre os dois tipos de Bouba/Kiki tátil/Visual (preenchido e delineado) e os dois tipos de Bouba/Kiki auditiva (som e palavra).
    2. Coloque os dois cartões de imagem tátil/Visual na esteira de borracha (cf. Figura 1).
    3. No grupo cego e Blindfold, peça ao participante para fazer um punho usando as duas mãos e colocar seus punhos em cima dos cartões de imagem tátil/Visual apresentados, orientando-os se necessário. Coloque a mão esquerda em cima dos punhos do participante.
    4. Peça ao participante que explore as duas formas táteis/visuais, o grupo cego e Blindfold pelo toque e a visão-grupo pela visão, quando a mão em cima de seus punhos (cego e Blindfold-grupo)/a placa da caixa ou placa de espuma (grupo de visão) é removida, e dizer ' Sim ' quando eles terminaram a sua exploração.
    5. Retire a mão esquerda dos punhos do participante (no grupo cego e Blindfold)/a placa da caixa ou placa de espuma (no grupo de visão).
    6. Assim que o participante disser "Sim", cubra os cartões de imagem tátil/Visual.
    7. Reproduza o áudio do leitor de MP3.
      Nota: reproduza as informações auditivas do leitor de MP3 apenas uma vez e não repita-a de volta oralmente para os participantes.
    8. Peça ao participante para sinalizar qual forma tátil/visual que eles associam com o áudio, por exemplo, dizendo ' esquerda/direita, ' ' curvilínea/angular ' ou ' flor/estrela ', e anote a forma dada. Não responda à resposta do participante.
    9. Marcar se a resposta do participante está correta ou incorreta.
      Nota: repita 4.5.2 – 4.5.9 para todos os oito ensaios.
  6. Realizar experimento 2
    1. Explique que um cartão de imagem, que imagina uma forma tátil/Visual, será apresentado no tapete de borracha e que algum áudio será reproduzido a partir do leitor de MP3. Em seguida, explique que o áudio será reproduzido uma vez por cartão de imagem, assim que o participante começar a explorar a forma tátil/Visual.
      Nota: não informe os participantes sobre os dois tipos de Bouba/Kiki tátil/Visual (preenchido e delineado), o único tipo de Bouba/Kiki auditiva (som) e os dois tipos de congruência (congruência e incongruência).
    2. Coloque o cartão de imagem tátil/Visual na esteira de borracha.
    3. No grupo cego e Blindfold, peça ao participante para fazer um punho usando as duas mãos e colocar seus punhos em cima do cartão de imagem tátil/Visual apresentado, orientando-os se necessário. Coloque a mão esquerda em cima dos punhos do participante.
    4. Peça ao participante para explorar a forma tátil/Visual, o grupo cego e Blindfold pelo toque e o grupo de visão por visão, quando a mão em cima de seus punhos (cego e Blindfold-grupo)/a placa da caixa ou placa de espuma (grupo de visão) é removida, e para ouvir o áudio. Em seguida, peça-lhes para nomear a forma tátil/visual e o áudio como ' Bouba ' ou ' Kiki ': um nome apenas23,24,25, quando eles terminaram sua exploração.
    5. Retire a mão esquerda dos punhos do participante (no grupo cego e Blindfold)/a placa da caixa ou placa de espuma (no grupo de visão) e reproduza o áudio do leitor de MP3.
      Nota: reproduza as informações auditivas do leitor de MP3 apenas uma vez e não repita-a de volta oralmente para os participantes.
    6. Assim que o participante nomeia a forma tátil/visual e o áudio, cubra o cartão de imagem e anote o nome dado. Não responda à resposta do participante.
    7. Marcar se a resposta do participante está correta ou incorreta.
      Nota: repita 4.6.2 – 4.6.7 para todas as oito tentativas.
    8. Através dos ensaios congruous e incongruente, conte um participante como "correto" quando eles reconheceram ≥ 75% das formas tátil/Visual Bouba e Kiki.
  7. Realizar experimento 3:
    1. Explique que algum papel de cópia/película de gravação plástica será coloc sobre a esteira de borracha, em vez do cartão tátil/visual do retrato, e que o participante estará pedido para desenhar nele. No cego e Blindfold-grupo, convide o participante a experimentar os diferentes equipamentos de desenho e decidir por si mesmos que eles preferem: o papel de cópia ou filme de gravação de plástico e caneta Rollerball ou estilo Saddleback. Em seguida, explique que algum áudio será reproduzido a partir do MP3 Player e que o participante estará desenhando a forma tátil/visual que eles associam com este áudio, uma forma por segmento de áudio quando perguntado.
      Nota: não informe os participantes sobre as informações auditivas (Bouba e Kiki), nem os dois tipos de Bouba/Kiki auditiva (som e palavra).
    2. Coloc o papel de cópia/película de gravação plástica na esteira de borracha.
    3. Em todos os três grupos experimentais (cego; Blindfold; visão), peça ao participante para fazer um punho usando ambas as mãos, segurando o Rollerball Pen/estilo Saddleback e colocar seus punhos em cima do papel de cópia/filme de gravação de plástico, orientando-os se necessário. Coloque a mão esquerda em cima dos punhos do participante.
    4. Peça ao participante para desenhar a forma que eles associam com o áudio apresentado quando a mão em cima de seus punhos é removida. No grupo cego e Blindfold, peça ao participante para desenhar uma forma tátil; e no grupo de visão, uma forma visual. Peça ao participante que diga "Sim" quando terminar o desenho.
    5. Retire a mão esquerda dos punhos do participante.
    6. Reproduza o áudio do leitor de MP3.
      Nota: reproduza as informações auditivas do leitor de MP3 apenas uma vez e não repita-a de volta oralmente para os participantes.
    7. Assim que o participante diz "Sim", retire o seu desenho tátil/Visual da esteira de borracha e rotulá-lo no canto inferior direito com o número de teste correto. Não responda ou forneça comentários sobre a forma de resposta/desenhada do participante.
      Nota: repita 4.7.2 – 4.7.7 para todos os quatro ensaios.
    8. Digitalize todos os desenhos táteis/visuais (tamanho 1:1) no formato jpg imediatamente após cada sessão de teste.
      Nota: o experimento 3 é marcado por um grupo de marcadores depois que todos os dados de desenho foram coletados.
    9. Produzir um questionário para marcar os dados do desenho (cf. Figura 2):
      1. Dimensione todos os desenhos digitalizados para incluir 12 imagens por página no formato A4 da paisagem.
      2. Atribua aleatoriamente ensaios de Bouba/Kiki, testes de som/palavra e gavetas cegas/Blindfold/visão.
      3. Adicione o número experimental no canto superior esquerdo de cada imagem.
      4. Adicione ' Bouba ' e ' Kiki, ' e ' cego ', ' blindfolded ' e ' avistado ' cada imagem.
    10. Recrutar um artilheiro de grupo, acima dos 18 anos de idade; com normal/corrigida para audição e visão normal; sem atraso cognitivo ou comprometimento, nem deficiências físicas; que são todos ingênuos para este estudo, e que mostram uma forma visual-impresso palavra Bouba/Kiki-Effect.
    11. Peça aos artilheiros que respondam a duas perguntas de múltipla escolha por imagem no questionário:
      (1) ' é a forma retratada "Bouba" ou "Kiki;" ' e (2) ' é a forma retratada desenhada por alguém que é cego (desde o nascimento), de olhos vendados, ou totalmente avistado? ' a 17.
    12. Dependendo do número de imagens no questionário, peça a metade do grupo de marcadores para marcar metade do questionário, e a outra metade para marcar o resto.
    13. Para cada julgamento, Count ' corresponder, ' ' não corresponder, ' e ' inconclusivo ', isto é:
      1. ' Correspondem ' quando (i) ≥ 75% dos marcadores concordaram em qual forma tátil/Visual (Bouba ou Kiki) foi retratada, e (II) esta forma correspondeu à Bouba/Kiki auditiva apresentada neste ensaio.
      2. ' Não correspondem ' quando (i) ≥ 75% dos marcadores concordaram em qual forma tátil/Visual (Bouba ou Kiki) foi retratada, e (II) esta forma não correspondeu à Bouba/Kiki auditiva apresentada neste ensaio.
      3. "Inconclusivo" quando < 75% dos marcadores concordaram em qual forma tátil/Visual (Bouba ou Kiki) foi retratada. Remova as imagens ' inconclusivas '/desenhos dos participantes das análises estatísticas.
    14. Em todos os ensaios, conte um participante como ' corresponder ' quando ≥ 75% de suas imagens mentais desenhadas: ou seja, que as formas táteis/visuais correspondem ao Bouba/Kiki auditivo apresentado.
    15. Para cada teste, conte ' reconhecido, ' ' não reconhecido ' e ' inconclusivo ', ou seja:
      1. ' Reconhecido ' quando (i) ≥ 66,6% dos artilheiros concordaram em qual grupo experimental (cego, olhos vendados ou visão) tinha desenhado a forma da imagem, e (II) isso estava correto neste julgamento.
      2. "Não reconhecido" quando (i) ≥ 66,6% dos marcadores concordaram em qual grupo experimental (cego, olhos vendados ou visão) tinha desenhado a forma da imagem, e (II) isso não estava correto neste julgamento.
      3. "Inconclusivo" quando < 66,6% dos marcadores concordaram em qual grupo experimental (cego, olhos vendados ou visão) tinha desenhado a forma da imagem. Exclua os reconhecimentos de participante "inconclusivos" das análises estatísticas.
    16. Em ensaios (e com reconhecimentos de participante "inconclusivos" removidos), conte um participante como "reconhecido" quando reconhecido em ≥ 75% de todos os ensaios.

Figure 2
Figura 2: exemplos do questionário para marcar os dados do desenho Por favor clique aqui para ver uma versão maior desta figura.

Representative Results

O efeito Bouba/Kiki

Seis dos 12 participantes que eram congenitamente cegos (50%), nove dos 12 que foram vendados (75%), e 10 dos 12 que foram avistadas inteiramente (~ 83%) mostraram um efeito tátil/Visual-auditivo instantâneo de Bouba/Kiki: ou seja, tanto a venda quanto o grupo visão foram significativamente superiores ao nível de chance (de 50%):χ2(1. N = 12) = 3, 0, p = 0, 8 eχ2(1. N = 12) = 5,33, p = 0, 2 (experimento 1, ensaio 1)17. Não foi encontrada diferença significativa pelo teste exato de Fisher entre os três grupos experimentais (experimento 1, pré-teste)17. (Cf. tabela 1.)

Quando se trata de longo prazo tátil/Visual-auditivo Bouba/Kiki-efeito: na primeira medida dentro do grupo repetido, nove dos participantes que foram congenitais cegos mostraram o Bouba/Kiki-Effect, juntamente com nove que foram totalmente avistados e sete que foram blindfolded: o cego e o visão-grupo significativamente acima do nível da possibilidade (de 50%):χ2(1. N = 12) = 3, 0, p = 0, 8 eχ2(1. N = 12) = 3, 0, p = 0, 8 (experimento 1, ensaio 4)17. Na segunda medida repetida dentro do grupo, 11 participantes do grupo cego e de visão mostraram o efeito tátil/Visual-auditivo Bouba/Kiki-Effect: ambos os grupos experimentais foram novamente significativamente acima do nível de chance (de 50%):χ2(1. N = 12) = 8,33, p = 0, 0 eχ2(1. N = 12) = 8,33, p = 0, 0; e sete no grupo Blindfold (experimento 1, ensaio 5)17. Finalmente, na terceira medida repetida dentro do grupo e pós-teste, nove dos 12 participantes que eram congenitais cegos (75%), seis dos 12 que estavam vendados (50%), e todos os 12 participantes que foram totalmente avistadas (100%) mostrou o efeito tátil/Visual-auditivo Bouba/Kiki-Effect; o cego e o grupo de visão estiveram outra vez significativamente acima do nível da possibilidade (de 50%):χ2(1. N = 12) = 3, 0, p = 0, 8 eχ2(1. N = 12) = 12, 0, p = 0, 0 (experimento 1, ensaio 8)17. O teste exato de Fisher encontrou diferença significativa entre a venda e o grupo-visão [p = 0, 1. (Experimento 1, pós-teste)] 17. (cf. quadro 1.)

Grupo participante Instant Bouba/Kiki-efeito Longo prazo Bouba/Kiki-efeito
Pré-teste Medida repetida 1 Medida repetida 2 Medida repetida 3/Post-Test
Cego 50,0% de 75,0% de 91,7% de 75,0% de
Venda 75,0% de 58,3% de 58,3% de 50,0% de
Visão 83,3% de 75,0% de 91,7% de 100,0% de

Tabela 1: o instante e longo prazo Bouba/Kiki-efeito

O reconhecimento das formas Bouba e Kiki

Onze dos 12 participantes que eram congenitamente cegos (~ 92%), nove dos 12 que foram vendados (75%), e todos os 12 que foram avistado inteiramente (100%) reconheceu instantaneamente o congruous tátil/visual e auditivo Bouba/Kiki; todos os três grupos experimentais foram significativamente acima do nível de chance (de 50%):χ2(1. N = 12) = 8,33, p = 0, 0,χ2(1. N = 12) = 3, 0, p = 0, 8 eχ2(1. N = 12) = 12, 0, p = 0, 0 (experimento 2, ensaio 1)17. (Cf. tabela 2.)

A longo prazo, 11 participantes no grupo cego reconheceram as formas táteis Bouba/Kiki juntamente com áudio congruous e 10 participantes com áudio incongruante: ambos os tipos de congruência reconhecida significativamente acima do nível de chance (de 50%):χ2( 1. N = 12) = 8,33, p = 0, 0 eχ2(1. N = 12) = 5,33, p = 0, 2 (experimento 2, ensaio 1-8)17. Nove participantes do grupo de vendas reconheceram as formas táteis, juntamente com áudio congruante e oito participantes, juntamente com áudio incongruante; em outras palavras, a forma e o áudio congruous eram significativamente acima do nível da possibilidade (de 50%):χ2(1. N = 12) = 3, 0, p = 0, 8 (experimento 2, ensaio 1-8)17. Todos os 12 participantes no grupo-visão reconheceram as formas visuais de Bouba/Kiki junto com o áudio congruous e os seis participants com áudio incongruente: a forma e o áudio congruous reconheceram significativamente acima do nível da possibilidade (de 50%):χ2(1. N = 12) = 12, 0, p = 0, 0 (experimento 2, ensaio 1-8)17. (Cf. tabela 2.)

Grupo participante Reconhecimento imediato da forma de Bouba/Kiki Reconhecimento a longo prazo de formas Bouba e Kiki
Forma e áudio congruous Forma e áudio congruous Forma incongruous e áudio
Cego 91,7% de 91,7% de 83,3% de
Venda 75,0% de 75,0% de 66,7% de
Visão 100,0% de 100% de 50,0% de

Tabela 2: o reconhecimento instantâneo e a longo prazo das formas Bouba e Kiki

As imagens mentais de Bouba e Kiki

Oito dos 12 participantes que eram congénitos cegos [~ 73% (com um "inconclusivo" desenho participante removido)], oito dos 12 que foram vendados [~ 89% (com três ' inconclusivos ' desenhos participantes removidos)], e oito dos 12 que foram totalmente avistado [80% (com dois desenhos de participante "inconclusivos" removidos)] imediatamente desenhou uma imagem mental: uma forma tátil/visual que correspondia ao Bouba/Kiki auditivo apresentado (experimento 3, ensaio 1)17. Ambos os olhos vendados e grupo de visão foram significativamente acima do nível de chance (de 50%):χ2(1. N = 9) = 5,44, p = 0, 2 eχ2(1. N = 10) = 3,60, p = 0, 6 (experimento 3, ensaio 1)17. (Cf. tabela 3.)

Em relação às imagens mentais de longo prazo de Bouba e Kiki: 11 participantes no grupo cego, oito no grupo de venda, e 12 no grupo-visão desenharam formas táteis/visuais de Bouba/Kiki que correspondiam à Bouba/Kiki auditiva apresentada (experimento 3, Ensaio 1-4)17. O cego e o grupo de visão estavam significativamente acima do nível de chance (de 50%):χ2(1. N = 12) = 8,33, p = 0, 0 eχ2(1. N = 12) = 12, 0, p = 0, 0 (experimento 3, ensaio 1-4)17. O teste exato de Fisher encontrou diferença significativa entre o grupo de venda e o grupo-visão [p = 0, 9 (experimento 3, ensaio 1-4)]17. (Cf. tabela 3.)

Grupo participante Imagem mental instantânea de Bouba/Kiki Imagens mentais a longo prazo de Bouba e de Kiki
Cego 72,7% de 91,7% de
Venda 88,9% de 66,7% de
Visão 80,0% de 100,0% de

Tabela 3: as imagens mentais instantâneas e a longo prazo de Bouba e Kiki

Além disso. ~ 83% de todos os desenhos dos participantes incluíam a característica de forma mais característica das formas global de Bouba e Kiki: curva e ângulo, respectivamente (experimento 3, ensaio 1-4)17. Os desenhos dos participantes diferiram na quantidade de curvas/ângulos (por exemplo, um e cinco ângulos para a palavra Kiki: cf. Figura 2, ensaios 1, 6 e 9), e na direção das curvas/ângulos [i.e. horizontal, vertical ou diagonal: cf. Figura 2, Os ensaios 2, 5 e 8 (som Bouba)], mas tipicamente não incluem a forma Bouba/Kiki global [experimento 3, ensaio 1-4 (cf. Figura 1; Figura 2)]17. Finalmente, o grupo experimental foi reconhecido em ~ 43% das respostas dos escores: cinco participantes no grupo cego, três no grupo de venda, e cinco no grupo-visão; nenhum grupo experimental estava significativamente acima do nível de chance [de 33,3% (experimento 3, ensaio 1-4)]17.

O efeito das imagens visuais e da aprendizagem

O protocolo apresentado sucedeu em investigar o papel da imaginação visual no Bouba/Kiki-efeito, se treinar em notar o Bouba tátil/Visual-auditivo e as regularidades de Kiki afetaram o Bouba/Kiki-efeito e o reconhecimento do tátil individual /Bouba visual e formas Kiki, e, finalmente, o que imagens mentais estas regularidades forma-áudio produzidos17. Ao incluir um grupo experimental sem experiência visual (ou seja, o grupo cego) e dois grupos experimentais com experiência visual (ou seja, a venda e o grupo de visão), foi possível testar o efeito da imagética Visual; e ao incluir um grupo experimental sem experiência visual e extensa experiência tátil (ou seja, o grupo cego) e um grupo experimental com extensa experiência visual e sem experiência tátil (ou seja, o grupo de venda), foi possível testar o efeito do treinamento na percepção de regularidades tátil-auditivas. Os resultados sugerem claramente que o grupo Blindfold desenhou imagens visuais para resolver novos problemas tátil-auditivos, mas não a longo prazo (experimento 1 – 3); que a formação em perceber Bouba/Kiki forma-regularidades de áudio afetou o tátil/Visual-auditivo Bouba/Kiki-Effect (experimento 1) e o reconhecimento de individual tátil/Visual Bouba e Kiki formas [ou seja, juntamente com congruous áudio (experimento 2)] , mas diferentemente em cada grupo experimental (experimento 1-2), e que todos os grupos experimentais criaram imagens mentais da característica tátil/Visual-auditiva de forma mais característica de Bouba (curva) e Kiki [(ângulo) experimento 3. Cf. quadro 1; Tabela 2; Tabela 3]17. Além disso, ao incluir medidas repetidas dentro do grupo de efeito instantâneo e de longo prazo (experimento 1-3), foi possível testar quando o efeito da imagética visual e da aprendizagem de forma-regularidades de áudio realmente ocorreram; e por incluir três tarefas diferentes (isto é o Bouba/Kiki-efeito tátil/Visual-auditivo no experimento 1, reconhecendo formas individuais de Bouba/Kiki tátil/Visual junto com áudio congruous e incongruente no experimento 2, e desenhando imagens mentais de o áudio Bouba/Kiki no experimento 3), para testar o quão robusto esses efeitos foram. Os resultados sugerem claramente que o efeito da imagética Visual não foi robusto a longo prazo dentro de cada tarefa, especialmente quando se utiliza toque tátil [cf. o grupo Blindfold (experimento 1-3)]; Considerando que o efeito da aprendizagem das regularidades áudio-forma foi, mas não entre as tarefas [cf. o cego e o grupo de visão (experimento 1-3). Cf. quadro 1; Tabela 2; Tabela 3.] 17 anos de

Discussion

O protocolo apresentado é apropriado para investigar o efeito da imagética visual e da aprendizagem da forma-regularidades de áudio, quando eles ocorrem e como eles são robustos; em indivíduos e grupos de indivíduos específicos.

Este protocolo seria apropriado para testar não somente a exatidão mas igualmente o tempo da exploração: de quando o experimentador remove sua mão esquerda dos punhos do participante (no cego e no Blindfold-grupo)/a placa da caixa ou a placa da espuma (no grupo de visão) quando o participante diz "Sim". Nas análises estatísticas, o maior tempo de exploração por experimento por grupo experimental seria dividido em quatro e o número de participantes "rápidos", "médios" e "lentos" em cada grupo experimental contava: ' Fast ' usando ≤ 25% desse tempo de exploração, ' Médio ' usando 26-75%, e ' lento ' usando ≥ 75%. Nos ensaios, os participantes seriam contados como no experimento 2: ou seja, como ' rápido ' se contado como ' rápido ' em ≥ 66,6% de todos os ensaios, como ' médio ' se contado como ' médio ' em ≥ 66,6% de todos os ensaios, e assim por diante. (Para ' inconclusivo ', ou seja, o participante não pode ser contado como "rápido", "médio" ou "lento", cf. experimento 3.) Seria possível testar o tempo de exploração para respostas corretas e incorretas separadamente, dependendo do tamanho da amostra e/ou do número de respostas corretas e incorretas. Se a exatidão do teste, o tempo de exploração ou ambos, há umas etapas críticas do protocolo que devem ser seguidas: os três experimentos devem ser conduzidos em ordem fixa, e seus ensaios apresentados em ordem fixa, para todos os participantes. Os participantes não devem estar cientes de que os materiais de teste em todos os três experimentos incluem Bouba e Kiki. Além disso, a informação auditiva do leitor de MP3 deve ser jogado apenas uma vez e não repetido de volta por via oral para os participantes (todos os três experimentos). No experimento 1 e experimento 2, o Bouba tátil/visual e a Kiki devem ser apresentados na mesma posição e orientação. Para o grupo de visão (em todos os três experimentos), os materiais de teste devem ser configurados atrás de uma placa de papelão/placa de espuma. Finalmente, no grupo de venda, os participantes não devem remover sua venda até que o experimento 3 tenha sido concluído. Estas etapas são assegurar-se de que a quantidade e o tipo de informação sobre o tátil/visual e o Bouba e o Kiki auditivos estejam mantidos o controle através de todos os grupos experimentais. Além disso, é crucial no experimento 2 apresentar o Bouba/Kiki auditivo assim que o participante começar a explorar o Bouba/Kiki tátil/Visual. Isto assegurará que a informação multimodal (congruous ou incongruous) esteja apresentada. Além disso, este protocolo também seria adequado para testar outros grupos de indivíduos. Para integrá-los, tais grupos participantes poderiam ser adicionados como grupos experimentais separados: por exemplo, um grupo de percepção de cor e um grupo de percepção de forma; 22 um grupo de perda de visão súbita e um grupo de perda de visão progressiva; 20 anos de , 21 e/ou grupos específicos de indivíduos com deficiência auditiva e/ou transtorno do espectro do autismo13 poderiam ser adicionados.

Com este protocolo, seria possível estabelecer uma norma de grupo (para precisão e/ou tempo de exploração) para grupos específicos em cada efeito instantâneo e a longo prazo, incluindo cada medida repetida dentro do grupo, e/ou tarefa; Então para testar indivíduos de encontro a sua norma do Grupo: se algum indivíduo particular ou o grupo inteiro estão na necessidade de uma formação mais adicional em observar as regularidades forma-Audio. Uma norma de grupo para cada efeito instantâneo e de longo prazo, incluindo cada medida repetida dentro do grupo, e/ou tarefa também tornaria possível determinar que tipo de treinamento é necessário para notar a forma-regularidades de áudio: por exemplo, mais ensaios com o tátil/ Bouba/Kiki-efeito visual-auditivo (experimento 1) e/ou mais ensaios com forma tátil/Visual congruous e incongruente e áudio (experimento 2). Na verdade, seria possível aumentar tanto o número de ensaios quanto o número de medidas repetidas dentro do grupo em cada tarefa, bem como alterar o tempo entre eles, permitindo assim um treinamento e testes mais individualizados.

No entanto, este protocolo seria necessário modificar se o teste que tipo de materiais (por exemplo, Bouba ou Kiki, preenchido ou delineado tátil/forma visual, e/ou som auditivo ou palavra) melhor garante a aprendizagem de forma-regularidades de áudio. Uma maneira possível de modificar este protocolo poderia envolver a apresentação dos diferentes materiais em blocos: por exemplo, formas táteis/visuais preenchidas e som auditivo e/ou formas táteis/visuais delineadas e palavra auditiva (experimento 1). Esses blocos podem ser apresentados em ordem aleatória a todos os participantes de um grupo experimental; ou, alternativamente, cada um dos quatro blocos para separar grupos experimentais (experimento 1). Esse protocolo também precisaria modificar se o teste ainda mais a robustez das imagens visuais e/ou as regularidades de áudio de forma aprendida dentro e entre tarefas. A modificação pode envolver a adição de medidas repetidas dentro do grupo com diferentes formas tátil/visual e/ou áudio do que as incluídas no treinamento; por exemplo, com o som auditivo para ' Maa-Boo-Maa ' e ' tuh-Kee-tee ' após treinamento com formas táteis/visuais de Bouba e Kiki e palavras auditivas (experimento 1)1,3,4,10, 11 anos de , 12 anos de , 13 anos de , 14 anos de , 15 anos de , 16. outra opção poderia envolver a apresentação de uma terceira forma tátil/Visual, que não é principalmente curvada/angular, juntamente com as formas tátil/Visual Bouba e Kiki no experimento 110,11,12 ,13,14,15,16. Uma palavra de absurdo auditivo e um som poderiam ser criados para esta forma tátil/Visual para produzir um terceiro par de palavras de forma14,15,16 e um terceiro par de som de forma17 (experimento 1). O par de forma-som pode ser incluído no experimento 2 como catch-Trials; ou alternativamente como ensaios congruous regulares e com ensaios incongruente correspondentes. Finalmente, o som (do experimento 2 e experimento 1) e/ou a palavra de absurdo (do experimento 1) poderiam ser apresentados no experimento 3. Uma terceira opção poderia envolver não realizar experimento 2 e experimento 3 em tudo, mas, em vez disso, incluindo-os como tarefas nas medidas repetidas dentro do grupo no experimento 1, em ordem aleatória.

O protocolo apresentado é único, pois mantém controle tanto as imagens visuais quanto as informações sensoriais durante o treinamento e o teste. É flexível: amostras grandes e pequenas e indivíduos específicos podem ser testados contra si mesmos (cf. os testes dentro do grupo) e/ou outros grupos de indivíduos (cf. os testes entre grupos). É possível testar a precisão e o tempo de exploração, alterar o número de ensaios e medidas repetidas dentro do grupo em cada experimento e o tempo entre eles, e alterar ou até mesmo recolher a ordem dos ensaios e/ou experimentos.

Disclosures

Os autores não têm nada a revelar.

Acknowledgments

Financiadores:
Este trabalho foi financiado pelo programa de investigação e inovação do Horizonte 2020 da União Europeia, no âmbito das ações Marie Sklodowska-Curie (acordo de subvenção número 657440) e da Associação Norueguesa de cegos e parcialmente avistados.

Composição da película:
Maquiadora Rachael Parrey.

Materials

Name Company Catalog Number Comments
Bouba/kiki filled 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki outlined 30 mm horizontal, 23 mm Vertical and 0.5 mm thickness m vertical, and 0.5 mm line height, and 0.5 mm embossed embossed height
Bouba/kiki sound (sine wave)
Bouba/kiki word (human voice)
Carton plate/foam board for covering bouba/kiki (white) Ryman 230461860 297 mm horizontal x 210 vertical 0 mm vertical
Copy paper [white (80 g/m2 )] Ryman 250030000 210 mm horizontal x 148 mm vertical
Foam board for bouba/kiki picture cards [white (5 mm thick)] Ryman 230461860 50 mm horizontal x 50 mm vertical
MP3-player (smartphone with the VLC app for iOS installed) Carphone Warehouse
Plastic embossing film RNIB Shop ZM04 210 mm horizontal x 148 mm vertical
Rollerball pen [black (1.0 mm tip)] Ryman 827134001
Rubber mat RNIB Shop LC177 230 mm horizontal x 150 mm vertical
Saddleback style RNIB Shop B511
Swell paper Zychem Ltd Zytex2 paper 50 mm horizontal x 50 mm vertical

DOWNLOAD MATERIALS LIST

References

  1. Ramachandran, V. S., Hubbard, E. M. Synaesthesia - A Window Into Perception, Thought and Language. Journal of Consciousness Studies. 8 (12), 3-34 (2001).
  2. Bremner, A. J., Caparos, S., Davidoff, J., de Fockert, J., Linnell, K. J., Spence, C. Bouba’’and ‘‘Kiki’’ in Namibia? A remote culture make similar sound-shape matches, but different taste-shape matches to Westerners. Cognition. 126 (2), 165-172 (2013).
  3. Davis, R. The fitness of names to drawings. A cross-cultural study in Tanganyika. British Journal of Psychology. 52 (3), 259-268 (1961).
  4. Maurer, D., Pathman, T., Mondloch, C. J. The shape of boubas: sound-shape correspondences in toddlers and adults. Developmental Science. 9 (3), 316-322 (2006).
  5. Ozturk, O., Krehm, M., Vouloumanos, A. Sound-symbolism in infancy: Evidence for sound-Shape cross-modal correspondences in 4-months-olds. Journal of Experimental Child Psychology. 114 (2), 173-186 (2013).
  6. Bar, M., Neta, M. Humans Prefer Curved Visual Objects. Psychological Science. 17 (8), 645-648 (2006).
  7. Bertamini, M., Palumbo, L., Gheorghes, T. N., Galatsidas, M. Do observers like curvature or do they dislike angularity? British Journal of Psychology. 107 (1), 154-178 (2016).
  8. Quinn, P. C., Brown, C. R., Streppa, M. L. Perceptual Organization of Complex Visual Configurations by Young Infants. Infant Behavior and Development. 20 (1), 35-46 (1997).
  9. Silvia, P. J., Barona, C. M. Do people prefer curved objects? Angularity, expertise, and aesthetic preference. Empirical Studies of the Arts. 27 (1), 25-42 (2009).
  10. Nielsen, A., Rendall, D. The Sound of Round: Evaluating the Sound-Symbolic Role of Consonants in the Classic Takete-Maluma Phenomenon. Canadian Journal of Experimental Psychology. 65 (2), 115-124 (2011).
  11. D’Onofrio, A. Phonetic Detail and Dimensionality in Sound-shape Correspondences: Refining the Bouba-Kiki Paradigm. Language and Speech. 57 (3), 367-393 (2014).
  12. Westbury, C., Hollis, G., Sidhu, D. M., Pexman, P. M. Weighing up the evidence for sound symbolism: Distributional properties predict cue strength. Journal of Memory and Language. 99, 122-150 (2018).
  13. Oberman, L. M., Ramachandran, V. S. Preliminary evidence for deficits in multisensory integration in autism spectrum disorders: The mirror neuron hypothesis. Social Neuroscience. 3 (3-4), 348-355 (2008).
  14. Köhler, W. Gestalt psychology. , Liveright. New York, NY. (1929).
  15. Monaghan, P., Mattock, K., Walker, P. The Role of Sound Symbolism in Language Learning. Journal of Experimental Psychology: Learning, Memory, and Cognition. 38 (5), 1152-1164 (2012).
  16. Fort, M., Martin, A., Peperkamp, S. Consonants are More Important than Vowels in the Bouba-kiki Effect. Language and Speech. 58 (2), 247-266 (2015).
  17. Graven, T., Desebrock, C. Bouba or kiki with and without vision: Shape-audio regularities and mental images. Acta Psychologica. 188, 200-212 (2018).
  18. Fryer, L., Freeman, J., Pring, L. Touching words is not enough: How visual experience influences haptic-auditory associations in the “Bouba-Kiki” effect. Cognition. 132 (2), 164-173 (2014).
  19. Fontana, F. Association of Haptic Trajectories to Takete and Maluma. Lecture Notes in Computer Science. 7989, 60-68 (2013).
  20. Graven, T. How blind individuals discriminate braille characters: An identification and comparison of three discrimination strategies. British Journal of Visual Impairment. 33 (2), 80-95 (2015).
  21. Graven, T. How attention is allocated when using haptic touch: Shape feature distinction and discrimination strategy. EuroHaptics 2016, Part 1. Bello, F., Kajimoto, H., Visell, Y. , Springer International Publishing AG. Switzerland, Heidelberg. Part of the Lecture Notes in Computer Science book series (LNCS, volume 9774) 380-393 (2016).
  22. WHO. ICD-10 version: 2016 (International Statistical Classification of Diseases and Related Health Problems 10th revision). Chapter VII Diseases of the eye and adnexa (H00-H59). , Available from: http://apps.who.int/classifications/icd10/browse/2016/en#/H53-H54 (2019).
  23. Heller, M. A., Calcaterra, J. A., Burson, L. L., Tyler, L. A. Tactual picture identification by blind and sighted people: Effects of providing categorical information. Perception & Psychophysics. 58 (2), 310-323 (1996).
  24. Heller, M. A., Gentaz, E. Psychology of Touch and Blindness. , Psychology Press. New York, NY and Hove, East Sussex. (2014).
  25. Pathak, K., Pring, L. Tactual picture recognition in congenitally blind and sighted children. Applied Cognitive Psychology. 3 (4), 337-350 (1989).

Tags

Comportamento Bouba/Kiki-efeito crossmodal toque Haptic audição efeito de aprendizagem imagem mental multimodal regularidades sensoriais reconhecimento de forma regularidades forma-áudio visão imagens visuais
Investigando o efeito de imagens visuais e aprendizagem forma-regularidades de áudio em Bouba e Kiki
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Graven, T., Desebrock, C.… More

Graven, T., Desebrock, C. Investigating the Effect of Visual Imagery and Learning Shape-Audio Regularities on Bouba and Kiki. J. Vis. Exp. (151), e59954, doi:10.3791/59954 (2019).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter