Summary
Aqui, apresentamos um método misto original, combinando uma quantitativa e uma abordagem qualitativa para examinar com precisão as experiências dos participantes durante o teste de Stress Social de Trier e o teste de esforço Social de Trier para grupos.
Abstract
O teste de Stress Social de Trier único (TSST) e o TSST para grupos (TSST-G) são os protocolos mais utilizados para induzir experimentalmente estresse psicossocial. Estes testes são baseados em uncontrollability e ameaça social-avaliativa, induzindo as consequências psicológicas e fisiológicas (por exemplo, ansiedade, Estados emocionais, cortisol salivar aumenta). Muitos estudos experimentais quantitativos têm investigado estes indutores de stress e estas consequências. Mas, tanto quanto sabemos, este estudo é o primeiro a fornecer uma análise qualitativa para acessar as vozes dos participantes a fim de compreender a dinâmica de sua experiência durante todo o TSST e o TSST-G. Este artigo descreve uma abordagem mista de métodos para o TSST. Esta abordagem pode ajudar a maximizar a informação que pode ser adquirida a partir do TSST, que os pesquisadores utilizam muitas vezes sem olhar mais de perto para qualitativamente passa psicologicamente para os participantes durante o estressor em si. Desta forma, este protocolo é um exemplo de métodos mistos, mostrando o valor acrescentado da usando a abordagem fenomenológica enactive para analisar protocolos experimentais mais profundamente. Este tipo de métodos mistos é útil para acessar a experiência, para entender ponto de vista do ator e analisar em profundidade a dinâmica dos processos cognitivos, como intenções, percepções, promulgado conhecimento e emoção. A seção de discussão mostra os diferentes usos de um protocolo de métodos mistos, explorando a abordagem fenomenológica enactive para analisar um protocolo ou dar uma visão transversal do mesmo assunto de pesquisa. Esta seção lida com diferentes aplicações existentes, apontando alguns passos críticos neste misturado a abordagem de métodos.
Introduction
Métodos mistos dar várias vantagens ao tentar compreender um fenômeno1,2,3,4,5. Greene et al . 6 os definem como protocolos que incluem um método quantitativo para analisar números e um método qualitativo para analisar palavras. Esta abordagem visa superar o paradigma guerras ou conflitos entre pesquisas qualitativas e quantitativas. O objetivo é aumentar os pontos fortes dos estudos e diminuir os pontos fracos de estudos único3; assim, ele funciona como um terceiro paradigma de pesquisa. Combinar diferentes tipos de análises sobre o mesmo objeto torna possível ter diferentes pontos de vista. Este trabalho apresenta uma forma particular de métodos mistos, combinando um protocolo experimental com experienciais dados usando o único TSST7e o TSST-G8. O TSST é o protocolo mais utilizado para realizar experimentalmente estresse psicossocial investigações9,10. Estes testes são baseados em uncontrollability e ameaça social-avaliativa, ligados com consequências fisiológicas e psicológicas. Diferentes empírica, teórica, ou meta-análise de estudos11 mostraram que o TSST e o TSST-G provocam efeitos psicológicos e ativar o eixo HPA, conduzindo, por exemplo, Estados emocionais negativos, ansiedade auto-relatados e cortisol Levante-se. Muitos estudos experimentais investigaram estes marcadores de estresse, suas relações e suas influências12. No entanto, apenas um abordagem qualitativa foi realizado13 para entender experiências vividas dos participantes durante estes testes.
O presente protocolo desenvolve a abordagem de métodos mistos original usada principalmente em um anterior publicação13. A originalidade de mentiras de pesquisa este métodos mistos na abordagem qualitativa com base em um quadro fenomenológico enactive13,14,15,16 , para examinar com precisão dos participantes experiências, quando confrontados com o TSST e o TSST-G. Investigações qualitativas podem ser heurística porque tornam possível caracterizar e analisar o que está acontecendo psicologicamente para os participantes em uma situação particular de17. Por último, a abordagem fenomenológica enactive permite que os pesquisadores a entender os pontos dos participantes de visualização e, assim, para analisar o stress e a emoção de19,18,20. Seguindo esta abordagem, os participantes podem descrever, comentar e mostrar passo a passo a sua experiência vivida. Este quadro fenomenológico enactive tem dois principais premissas16,21. Em primeiro lugar, ação e situação são acopladas22,23 (i.e., a dinâmica da ação emerge dentro de um contexto específico). Esta suposição fornece acesso para a dinâmica da experiência do participante, confrontada com o TSST e o TSST-G e identificar componentes específicos do contexto para o ator. Em segundo lugar, cada ação traz significações para o ator23,24. Essa abordagem fornece acesso para construção de significação do ator da experiência durante a ação, graças a um rigoroso método originários das entrevistas fenomenológicas e nomeado entrevistas enactive16,25. Experiência do ator pode ser caracterizada em suas dimensões emocionais, perceptiva e situacional26. Diferentes tipos de métodos mistos baseiam-se nesta enactive fenomenológica abordagem, que já produziu resultados heurísticos em diferentes áreas, nomeadamente desporto14,15,18,27 ,28de doping, trabalho e educação30,31,3229.
Os métodos mistos aqui apresentados visam dar confirmação e compreensão aos achados na literatura TSST: confirmação através de uma comparação do efeito do TSST e o TSST-G sobre indicadores fisiológicos (como o cortisol), sobre indicadores de auto-relato ( como ansiedade e estados emocionais) e em indicadores experienciais (como as vozes dos participantes) e compreensão através do método qualitativo acessando a dinâmica dos participantes da ação como emergem nestes protocolos estressantes. Esta é uma maneira original de acesso em profundidade a dinâmica de estresse psicossocial e compreender as vozes dos participantes sobre o momento estressante do TSST e o TSST-G. Este protocolo é, portanto, um exemplo de metodologia mista, mostrando o valor acrescentado da usando a abordagem fenomenológica enactive para analisar o protocolo experimental mais profundamente.
Subscription Required. Please recommend JoVE to your librarian.
Protocol
O Conselho de revisão institucional da Universidade aprovado esta pesquisa.
Nota: Um exemplo de métodos mistos usando o protocolo enactive fenomenológico.
1. a exclusão de critérios
- Use um questionário antes do experimento, a fim de excluir alguns participantes, conforme necessário, os seguintes critérios: fumar (mais de cinco cigarros por dia), beber (mais de dois copos de álcool por dia), remédios, uso de drogas, tendo um sistema endócrino problema, experimentando crônica estresse (por exemplo, conforme determinado pela versão francesa da escala de estresse percebido [ESP])33e experimentando a tensão psicológica (por exemplo, conforme determinado pela versão francesa da saúde geral Questionário [GHQ-12])34.
2. instruções
Nota: As seguintes instruções preliminares precisam ser dada 1 dia antes da experimentação.
- Diga aos participantes para não tomar qualquer medicação, realizar exercícios físicos ou consumir álcool no dia antes do teste.
- Diga aos participantes a acordar pelo menos 3h antes do teste.
- Diga aos participantes para não beber ou comer qualquer coisa, fumaça ou escovar os dentes 1 h antes do teste.
3. pré-teste medições
Nota: O protocolo apresentado nesta seção foi usado na publicação anterior mencionada na introdução13. Prestress medições podem ser feitas depois de uma espera inativa de 45 min.10; também, o primeiro ponto de medida pode ser feito 20 min antes do TSST35.
-
Primeira coleção de saliva
Nota: O cortisol salivar é comumente usado como um marcador fisiológico de estresse com o TSST9,36.- Use o método de Baba passiva: pedir o participante a inclinar a cabeça para a frente para permitir que a saliva para piscina na sua boca e instrua-os a guiá-lo em um pequeno tubo de polipropileno.
- Congelar o tubo imediatamente a-20 ° C.
-
Primeira coleção de questionário
- Medir a ansiedade do participante. Peça-lhes para preencher o questionário de37 inventário estado-traço de ansiedade (STAI).
Nota: STAI é um exemplo de um questionário que pode ser usado para medir a ansiedade. É uma escala de Likert com uma gama de quatro opções (1 = nada, 4 = muito); usando esta escala, os participantes foram convidados a responder a 12 itens (por exemplo, "Sinto-me tensa"). Uma variável composta foi construída com a pontuação de todos os itens. - Medir o estado emocional do participante. Peça-lhes para preencher o questionário de38 manequim de autoavaliação (SAM).
Nota: SAM é uma escala de Likert que usa uma técnica não-verbal e pictórica com nove números para avaliar o prazer, excitação e dominância. Os participantes terão que dar meia uma figura para cada item. - Em seguida, trazer o participante para a sala TSST.
- Medir a ansiedade do participante. Peça-lhes para preencher o questionário de37 inventário estado-traço de ansiedade (STAI).
4. desempenho do TSST ou o TSST-G
Nota: Os diferentes aspectos do TSST já descritos em outros artigos de JoVE10,12,39.
-
Contexto do protocolo
- Posicione o participante na sala de protocolo em uma cruz vermelha desenhada no chão.
- Questione os participantes um a um para o TSST.
- Use um grupo de participantes (por exemplo, seis participantes separados por paredes pouco para limitar a interação social e visual13) para o TSST-G.
- Certifique-se que os experimentadores (dois ou três) são neutros e olhem como os cientistas com jalecos brancos.
- Explica que os membros do Comité são especialistas em análise do comportamento não-verbal, e todas as ações são filmadas para análise futura.
-
Entrevista de emprego simulada
- Pergunta o participante a imaginar um trabalho de sua escolha.
- Dê o participante 3 min de tempo de preparação (10 min para o TSST-G).
- Especifica que as notas de preparação não podem ser usadas durante a entrevista.
- Dê o participante 5 min de tempo de apresentação (2 min para o TSST-G, executada em ordem aleatória) na frente do Comitê para explicar por que eles são o melhor candidato para este trabalho.
- Diga o participante para continuar quando param de falar, dizendo "Você ainda tem tempo restante".
- Ficar em silêncio durante 20 s quando esse participante para de falar pela segunda vez.
- Perguntas padronizadas se o participante não continuar falando (por exemplo, "Por favor, Liste seus pontos fracos.").
-
Tarefa de aritmética mental
- Pergunta o participante a contagem regressiva a partir de 2023 em passos de 17 em voz alta. Para o TSST-G, os números são diferentes para cada participante.
- Explica o participante que devem calcular como rapidamente e corretamente possível.
- Assinalar cada erro e diz o participante a começar tudo de novo.
- Certifique-se de que a tarefa dura 5 min (80 s pelo TSST-G, executadas em ordem aleatória).
5. depois do teste medições
Nota: Em seguida, recolher uma segunda amostra de saliva e deixa os participantes completos questionários em outra sala (mesmo processo como os primeiros coleções, descritas no capítulo 3 do presente protocolo).
-
Segunda coleta de saliva
Nota: A medição dos níveis de cortisol é repetida (6 a 9 vezes) para analisar a resposta de cortisol.- Seguindo o método de Baba passiva, colete saliva do participante em um pequeno tubo de polipropileno, conforme descrito anteriormente (etapa 3.1.1).
- Congelar o tubo imediatamente a-20 ° C.
-
Segunda coleção de questionário
- Medir a ansiedade. Pergunta o participante a preencher o questionário de37 STAI.
Nota: STAI é uma escala de Likert com um intervalo de quatro itens (1 = nada, 4 = muito); usando esta escala, os participantes responderam a 12 itens (por exemplo, "Sinto-me tensa"). Uma variável composta foi construída com a pontuação de todos os itens. - Medir os Estados emocionais. Pergunta o participante a preencher o questionário de38 de SAM.
Nota: SAM é uma escala de Likert que usa uma técnica não-verbal e pictórica com nove números para avaliar o prazer, excitação e dominância. Os participantes terão que dar meia uma figura para cada item.
- Medir a ansiedade. Pergunta o participante a preencher o questionário de37 STAI.
6. qualitativas investigações
- Use uma câmera grande-angular para registrar o comportamento do participante e sua interação durante o TSST ou o TSST-G.
- Realizar entrevistas enactive para acessar a experiência do participante.
- Realizar a entrevista, logo que possível após a realização do TSST ou o TSST-G para garantir o participante ainda se lembra (de preferência no prazo de 48 h).
- Explicar que o participante deve reviver as atividades passadas, ajudadas por seu próprio registro audiovisual do TSST ou o TSST-G. Evite afirmando o objetivo exato da experiência para o participante.
- Selecione um avaliador experiente que é usado para realização de entrevistas enactive.
- Confronta o participante com a sua própria gravação para ajudá-los a reviver a experiência tão próximo quanto possível.
- A directiva perguntas para ajudar a re-emergência do passado a experiência. Por exemplo, apontar para uma imagem do vídeo e perguntar: "Que fazes aqui?"
- Ajudar o participante a recordar com perguntas focadas no vídeo para permitir-lhes descrever, comentar e mostrar sua experiência vivida passo a passo: "O que está acontecendo no vídeo?"
- Investigar os componentes da experiência como intenções e percepções perguntando: "Quais foram suas intenções aqui?", "Qual a sua opinião neste momento?"
- Parar o participante se eles usam o discurso global, análise a posteriori ou generalização, ou quando eles divagar a partir do momento que está sendo discutido, como sugerido por pesquisa fenomenológica40.
- Fazer perguntas com base na resposta do participante. Por exemplo, quando o participante diz: "Estou fora", perguntar "o que quer dizer 'Estou fora'?" e, em seguida, continuar a investigar o que acontece do participante ponto de vista.
- Respeitar a sequência de tempo do vídeo e evite alterar o fluxo do tempo para acessar a dinâmica da experiência passo a passo.
- Permitir que o participante a pausar o vídeo quando eles querem para descrever sua própria experiência.
7. análise de dados
- Realizar uma análise de saliva.
- Determine o nível de cortisol do participante através da técnica de ensaio (ELISA) enzima-lig da imunoabsorção usando kits de ensaio (ver Tabela de materiais).
- Medir a concentração relacionada com a absorvância a 450 nm com um Espectrofotômetro de microplacas de 96 poços (ver Tabela de materiais).
- Calcule a precisão intraensaio com o valor médio de variabilidade individual para todos os duplicados dentro de cada microplaca.
- Obter as concentrações das amostras desconhecidas (nmol/L) com uma curva de regressão não-linear de quatro-parâmetro caber, seguindo as recomendações do protocolo kit ELISA, com base em normas de cortisol (82.77 27,59, 9.19, 3,06, 1,02, 0.33 nmol/L).
- Realizar uma análise estatística utilizando medidas repetidas ANOVA com um nível de significância em p < 0,05.
- Calcule os tamanhos do efeito com um eta parcial ao quadrado.
Nota: Eta ao quadrado é uma medida estatística de tamanho de efeito para o uso em ANOVA. - Realizar uma análise fenomenológica.
- Transcrever todas as entrevistas enactive com o máximo de detalhes, tais como desordem verbal, demonstração, hesitação, etc.
- Construa uma tabela de duas partes que descreve o fluxo de tempo, transcrição e um relatório dos comportamentos e discussão ajudada a pelas gravações (tabela 1).
- Identifica componentes da experiência, começando com as unidades elementares do significado correspondente as menores unidades de atividade significativa para um participante.
- Identifica a percepção, analisando a significativa sensação, sentimento e aspectos informativos (visuais, acústicos ou cinestésicas) da situação.
- Identifica a intenção, analisando a preocupação do participante da situação.
- Categorize as sequências por agrupamento de unidades de significado relacionado com a mesma história.
- Para cada participante, identificar sua experiência típica descritivamente, estatisticamente, generatively e significativamente21 (por exemplo, ação típica, intenção típica e percepção típica).
- Identifica as experiências típicas de todos os participantes, encontrando semelhanças entre cada experiência típica.
- Construir tabelas de experiência típica para todos os participantes, usando os seguintes valores: cronograma, sequências típicas, típicas percepções, ações típicas e intenções típicas.
- Normalize a formulação de cada categoria usando um grupo de palavras para expressar a sequência típica, um "ing" para a ação típica e um verbo infinitivo para a intenção típica.
- Compare o TSST e o TSST-G usando as duas tabelas de típica experiência vivida.
- Apresente os aspectos comuns da experiência durante ambos os protocolos.
- Apresente os aspectos singulares da experiência durante cada protocolo.
- Realizar uma análise de estudo de caso para entender os processos locais, por exemplo, os quatro respondentes de cortisol mais baixos e mais altos.
- Identificar os componentes da experiência (Veja o protocolo anterior).
- Reconstrua a experiência significativa para cada participante após o TSST ou as etapas de TSST-G.
- Compare os métodos mistos.
- Compare os resultados quantitativos e qualitativos realizando análises e interpretação separadamente (cortisol, estado de ansiedade, Estados emocionais, dados de experiência).
- Verifica se os resultados de análise quantitativa da dinâmica stress são semelhantes da análise qualitativa.
- Analise se o que aconteceu em experiências dos participantes pode ajudar na compreensão variação quantitativa de stress.
Subscription Required. Please recommend JoVE to your librarian.
Representative Results
Os resultados mostrados aqui anda de uma revisão de literatura (para o cortisol)8 e dois estudos feito em nosso laboratório (para o estado de ansiedade, a reação afetiva e a abordagem qualitativa) de estresse13,,41. Os resultados aqui apresentados são representativos do que pode ser encontrado, usando o protocolo, sobre os níveis de cortisol salivar (1), ansiedade de estado (2), (3) prazer, excitação e domínio e (4) significativa experiência.
Em primeiro lugar, os resultados abaixo são um exemplo de uma análise quantitativa do estresse com cortisol salivar como marcador fisiológico8. Eles mostram que a dinâmica do cortisol salivar sobe para um grupo, confrontado com o TSST e um grupo controle (Figura 1).
Em segundo lugar, os resultados abaixo são um exemplo de uma análise quantitativa das consequências do stress, com a escala STAI como um indicador de ansiedade stress, um marcador psicológico do stress41. Eles mostram a dinâmica da ansiedade de estado durante o TSST e o placebo-TSST com quatro pontos de medida (linha de base, t-2 min antes o TSST, t + 2 min após o TSST e t + 20 min após o TSST) (Figura 2). O Placebo-TSST é um protocolo semelhante do TSST sem causar stress para os participantes de42.
Em terceiro lugar, os resultados abaixo são um exemplo de uma análise quantitativa do estresse com a escala de38 SAM como indicador de 'reação afetiva', um marcador psicológico do stress41. Eles mostram a dinâmica do prazer, excitação e dominância durante o TSST e o placebo-TSST (Figura 3).
Quatro, os resultados abaixo são um exemplo de uma abordagem qualitativa de estresse vivida com base em um quadro fenomenológico enactive13. Além disso, a experiência típica dos participantes pode ser descrita durante o TSST (tabela 2) e o TSST-G (tabela 3).
Esta abordagem particular métodos mistos tem funções diferentes aqui: confirmação, compreensão e desenvolvimento. Os resultados mostram uma confirmação do aumento do estresse medido com indicadores fisiológicos (como o cortisol), com indicadores de auto-relato (como ansiedade e estados emocionais) e com indicadores experienciais (como as vozes dos participantes).
Métodos mistos permitem a compreensão das manifestações de estresse durante o TSST e o TSST-G, acessando a dinâmica dos participantes da ação. Por exemplo, os resultados quantitativos mostram um nível semelhante de estresse entre o TSST e os participantes TSST-G. Os resultados qualitativos mostram experiências vividas comuns, tais como a cada participante que começa com uma investigação exploratória, em que eles afirmam que são surpreendidos pelo ambiente incomum. Sequências comuns aparecem na entrevista de emprego simulada (recitação, expandindo-se em ideias, pressão de tempo, perda de controle, libertação paradoxal) e na aritmética mental a tarefa (cálculo perturbado, espiral negativa, buscando soluções, abandono-demissão Libertação paradoxal), dando detalhes sobre a percepção, ação e intenção dos participantes para cada fase. O nível de compreensão permitida pelos métodos mistos mais profundo com as diferentes experiências típicas singular. Os métodos quantitativos não mostram diferenças entre o TSST e o TSST-G, mas os métodos qualitativos mostram algumas experiências singulares entre esses protocolos estressantes. Por exemplo, a flutuação de tensão, temporalidade e a presença de pares não são experientes da mesma forma no TSST e o TSST-G. Esta "visão global"3 pode ser tomado com estudos de caso de alto e baixo cortisol respondentes43.
Finalmente, a abordagem de métodos mistos aqui apresentada tem uma função de desenvolvimento para a pesquisa, em que os resultados fornecem um método pode ser usado para modificar os outros6. Por exemplo, métodos qualitativos mostram alguns momentos importantes na dinâmica das ações do participante. Pode ser interessante medir o nível de estresse com métodos quantitativos nesses momentos específicos.
Figura 1 : Reatividade de cortisol ao TSST-g Quer dizer os níveis de cortisol salivar antes, durante (área sombreada) e depois um estressor psicossocial padronizado em um formato de grupo (Trier Social Stress Test para grupos [TSST-G]) e uma condição de controle. As barras de erro são os SEM8. Esta figura foi modificada de Von Dawans et al . 8. clique aqui para ver uma versão maior desta figura.
Figura 2 : Reação de ansiedade para o TSST. O estado de ansiedade dos participantes expostos para os dois tratamentos (TSST e placebo-TSST) medidos com o STAI41. Esta figura foi modificada de Mascret et al . 41. clique aqui para ver uma versão maior desta figura.
Figura 3 : Reação afetiva para o TSST. Prazer, excitação e dominância dos participantes expostos para os dois tratamentos (TSST e placebo-TSST) medidos com o SAM,41. Esta figura foi modificada de Mascret et al . 41. clique aqui para ver uma versão maior desta figura.
| Tempo | Descrição da acção e comunicação | Textual de enactive entrevista |
| 5 min | François entra na sala experimental. Ele está olhando ao redor, ficando quieto. | François: Oh, sim, no momento... er... (ele aponta para a imagem no vídeo) Eu estou pensando, onde eu estou... aiai... isso é estranho. Pesquisador: que fazes aqui? François: Eu estou esperando, digo a mesmo 'que tenho eu me meti aqui?' Não pensei que seria assim. Estou fora do meu... zona de conforto (ele toca com a cabeça, olhando perdido). "O que vai acontecer?... Estou em uma fase de observação... é estranho... Uma situação muito estranha para mim. Não gosto de ser desestabilizado. Eu gosto de ter coisas anunciadas com antecedência. |
Tabela 1: Exemplo de tabela de duas partes.
| Situação | SEQUÊNCIAS DE | Percepções | Ações | Intenções | |
| Tarefa de entrevista de emprego | Entrando no quarto Explicação das instruções |
Investigação exploratória | Surpresa Geralmente o clima tenso |
Eu estou ouvindo Estou observando |
Tente entender |
| Fase de preparação 3 minutos |
Preparação | Pressão de tempo Preparando-se |
Estou organizando minha apresentação | Localizar e selecionadas ideias Manter-se dentro do tempo |
|
| Fase de entrevista 5 minutos |
1) recitação | Tranquilizou-se para fazer o que é planejado | Estou recitando | Repita a introdução preparada | |
| 2) expandir em ideias | Salientado por hesitações e lapsos de memória | Estou a expandir sobre as ideias que eu planejei | Recuperar e afirmar as ideias que eu preparei Convencer o Comité |
||
| 3) pressão do tempo | Ansiedade em ver quanto tempo falta | Estou assistindo a contagem regressiva | Sabe quanto eu tenho | ||
| 4) perda de controle: Nada mais a dizer |
Sentir-se observado, julgado Desconfortáveis com o que vier na minha cabeça a dizer Tempo, percebido como interminável |
Não consigo pensar em mais nada Estou procurando caoticamente Estou a hesitar, eu estou gaguejando, eu estou deixando lacunas Eu estou constantemente olhando para o tempo restante |
Preencher o tempo Evitar lacunas Procurar apoio |
||
| 5) abandono, renúncia | Sentimento de incompetência Sentido de incompetente procurando |
Eu estou perdendo o controle Não estou fazendo nada, vou ficar quieto |
Esperar para tudo acabar | ||
| 6) desapego | Sei que não é importante | Estou a rir Estou rindo de mim mesmo |
Tentar tranquilizar-me | ||
| 7) paradoxal libertação | Ouvir o sinal sonoro no final da contagem regressiva Alívio Sentimento de fracasso |
Estou relaxando Vou ficar concentrado para a segunda tarefa |
Autoavaliação Se preocupe com o que a Comissão vai pensar em mim |
Tabela 2: Experiência típica dos participantes TSST. Esta tabela foi modificada de Vors et al 13.
| Situação | SEQUÊNCIAS DE | Percepções | Ações | Intenções | |
| Tarefa de aritmética mental | Explicação das instruções | Investigação exploratória | Aumentando a pressão Sentido de relativa facilidade |
Estou a ouvir as instruções | Tente entender |
| Fase de cálculo 5 minutos |
1) cálculo perturbado | Sob pressão de tempo Vergonha de cometer erros em uma tarefa fácil |
Estou indo rápido, mas eu estou a fazer montes de erros Estou ficando perdido: Eu sou recalculando várias vezes |
Não cometer erros Seja rápido |
|
| 2) negativa | Sinto tudo ficando misturados na minha cabeça Ciente de meus pensamentos negativos |
Não posso contar mais nada Estou fazendo erros repetidos |
Não parecer incompetente | ||
| 3) buscando soluções | Resguardar-auto | Estou à procura de estratégias | Encontrar soluções Não perder a cabeça. |
||
| 4) abandono, renúncia | De saco cheio, estou farto disto Percebo que é demais para mim |
Não tenho mais nada a dizer Estou dizendo o que vier à cabeça |
Fazer o tempo passar | ||
| 2') repetidos sucessos | Pensando apenas os números | Estou me concentrando Estou a dar uma resposta correta após o outro |
Não cometer um erro e tem que voltar para o início | ||
| 3) paradoxal libertação | Ouvir o sinal sonoro no final da contagem regressiva Alívio Sentimento de fracasso |
Estou relaxando | Autoavaliação Deixar |
Tabela 3: Experiência típica dos participantes TSST. Esta tabela foi modificada de Vors et al 13.
| Situação | SEQUÊNCIAS DE | Percepções | Ações | Intenções | |
| Tarefa de entrevista de emprego | Entrando no quarto Instruções explicadas |
Investigação exploratória | Surpresa Geralmente o clima tenso Envergonhado de ter que falar na presença de outros |
Estou ouvindo Estou observando |
Tente entender Preocupo-me com o que os outros vai pensar de mim |
| Fase de preparação 3 minutos |
Preparação | Pressão de tempo Tranquilizou-se preparar |
Estou organizando minha apresentação | Localizar e selecionar ideias convincentes | |
| Realização de outros | Alternância -Fases de escuta exploratória -Fases de isolamento |
Estressado por muito tempo imprevisível esperar minha vez Desestabilizado ou tranquilizados dos outros desempenhos |
Estou a ouvir as partes dos discursos Ponho-me na minha bolha para repetir meu discurso |
Localizar e selecionadas ideias Manter-se dentro do tempo |
|
| Fase de entrevista 2 minutos |
Pico de pressão | Ouvir meu número Tensão de pico: não lembro de nada |
Eu estou olhando para meu número Eu sou reposicionamento |
Não fazer um tolo de mim | |
| 1) recitação | Tranquilizou-se estar fazendo o que foi planejado. | Estou recitando | Repita a introdução preparada | ||
| 2) expandir em ideias | Salientado por hesitações e coisas esquecidas | Estou a expandir sobre as ideias que eu planejei | Recuperar e afirmar as ideias que eu preparei Convencer o Comité |
||
| 3) pressão do tempo | Ansioso por ver o tempo | Estou assistindo a contagem regressiva | Sabe quanto eu tenho | ||
| 4) perda de controle: Nada mais a dizer |
Desconfortável em dizer o que vier à cabeça Sentir-se observado, julgado |
Não consigo pensar em mais nada Estou procurando caoticamente Estou a hesitar, eu estou a gaguejar, vou deixar silêncios Eu estou constantemente olhando para o tempo restante |
Preencher o tempo Evitar lacunas Procurar apoio |
||
| 5) paradoxal libertação | Ouvir o sinal sonoro no final da contagem regressiva Alívio Sentimento de fracasso |
Estou relaxando Vou ficar concentrado para a segunda tarefa |
Autoavaliação Preocupo-me com o que os outros vai pensar de mim |
||
| Realização de outros | Alternância -Fases de escuta empática, comparativo -Fases de relaxamento |
Relaxamento Sentindo um "nó no estômago" |
Estou a comparar o que está sendo dito com meu próprio desempenho Eu estou simpatizando com meus colegas luta Eu estou alegre Estou pensando em outra coisa |
Comparar-me, para tentar tranquilizar-me Relaxar um pouco |
Tabela 4: Experiência típica dos participantes TSST-G. Esta tabela foi modificada de Vors et al 13.
| Situação | SEQUÊNCIAS DE | Percepções | Ações | Intenções | |
| Tarefa de aritmética mental | Explicação das instruções | Investigação exploratória | Pressão subindo Sentido de relativa facilidade Estressado por ter que calcular na frente de todos |
Estou a ouvir as instruções | Tente entender |
| Realização de outros | Formação | Salientado pelo imprevisível esperar minha vez Desestabilizado por outro ' performances |
Estou a tentar fazer as somas Estou avaliando a dificuldade da tarefa |
Prepare-se para minha vez | |
| Fase de cálculo 80 segundos |
Pico de pressão | Ouvir meu número Pico de stress |
Eu estou olhando para meu número Eu sou reposicionamento |
Não fazer um tolo de mim | |
| 1) cálculo perturbado | Sob pressão de tempo Vergonha de cometer erros em uma tarefa fácil |
Estou indo rápido, mas eu estou fazendo um monte de erros Estou ficando perdido: Eu sou recalculando várias vezes |
Não cometer erros Seja rápido |
||
| 2) negativa | Sinto tudo ficando misturados na minha cabeça Ciente de meus pensamentos negativos |
Não posso contar mais nada Eu estou cometendo erros repetidos |
Não parecer incompetente | ||
| 2') repetidos sucessos | Pensando apenas os números | Estou me concentrando Estou a dar uma resposta correta após o outro |
Não cometer um erro e tem que voltar para o início | ||
| 3) paradoxal libertação | Ouvir o sinal sonoro no final da contagem regressiva Alívio Sentimento de fracasso |
Estou relaxando | Autoavaliação Deixar |
||
| Realização de outros | Alternância -Fases de escuta empática, comparativo -Fases de relaxamento |
Relaxamento Sentindo um "nó no estômago" |
Estou a comparar o que está sendo dito com o meu desempenho Eu estou com pena de meus colegas luta Eu estou alegre Estou pensando em outra coisa |
Comparar-me, para tentar tranquilizar-me Relaxar um pouco |
|
| Final da tarefa | Aliviado, mas tensa e desapontado | Estou relaxando | Deixar |
Tabela 5: Experiência típica dos participantes TSST-G. Esta tabela foi modificada de Vors et al 13.
Subscription Required. Please recommend JoVE to your librarian.
Discussion
Neste artigo, apresentamos uma abordagem de métodos mistos original, combinando um protocolo experimental com a abordagem fenomenológica enactive. Este tipo de métodos mistos é útil para acessar a experiência, para entender pontos de vista dos participantes e analisar em profundidade a dinâmica dos processos cognitivos, como intenções, percepções, emoções e conhecimento promulgado.
Métodos mistos podem ser usados de maneiras diferentes. Et al . verde 6 apresentar cinco funções: triangulação, complementaridade, iniciação, desenvolvimento e expansão. Um protocolo explorando a abordagem fenomenológica enactive pode ser heurística nessas funções. Triangulação e complementaridade aproximam-se os efeitos da confirmação e da compreensão já apresentado neste trabalho. Triangulação busca a convergência dos resultados de vários métodos para aumentar a validade da investigação. Por exemplo, os resultados aqui apresentados mostram uma confirmação do aumento do estresse medido com indicadores fisiológicos, com indicadores de auto-relato e com indicadores experienciais. Complementaridade busca um aprimoramento dos resultados e o esclarecimento de um método para o outro, para aumentar a relevância da investigação. Por exemplo, resultados qualitativos dar esclarecimentos sobre métodos quantitativos entre dois pontos de medida, mostrando a dinâmica da experiência dos participantes em diferentes sequências e sua percepção típica, ação e ilustrações de e intenção durante sequências experienciais. Como foi visto acima, o desenvolvimento é outra função de métodos mistos, utilizando os resultados de um método para modificar uma parte do outro como decisão de amostragem, implementação e/ou medição, para obter um método mais forte. Por exemplo, os resultados apresentados, os métodos qualitativos dar um novo desenvolvimento dos quantitativos, convidando a multiplicação dos pontos quantitativos de medida em vários momentos experientes como importante pelos participantes.
Então, a iniciação é usada para encontrar novas perspectivas sobre ou contradições entre os dois métodos para aumentar o alcance dos resultados. Por exemplo, abordagens experienciais e biomecânicas são combinadas para analisar um dispositivo técnico para formação de elite em natação44,,45. Os resultados mostram uma diferença entre os resultados quantitativos e qualitativos. Os participantes não percebem as mesmas coisas que os resultados biomecânicos. Esses achados abrem novas perspectivas para adaptar o dispositivo técnico, de acordo com a velocidade de natação. Por exemplo, no início, é recomendável usar uma velocidade "média" para que os participantes mais facilmente podem ajustar o dispositivo. Nosso laboratório está também a desenvolver este tipo de métodos mistos com realidade virtual, para entender o ponto de vista do participante neste contexto virtual específico e para melhorar os protocolos. Desta forma, métodos mistos usando uma abordagem fenomenológica enactive poderiam ser heurística para analisar um protocolo ou um dispositivo. O protocolo pode ser melhorado pela experiência dos participantes e a sua dinâmica. Estudos de caso ajudam a entender o que acontece com os participantes particulares. Assim, este tipo de métodos mistos é útil para ajustar um protocolo como o TSST-G; tendo tempo para selecionar o próximo participante durante a tarefa aumenta a sensação de uncontrollability13.
Finalmente, a expansão é outra função dos métodos mistos. Expansão é usado para selecionar o método mais apropriado de vários componentes de inquérito para alargar o âmbito de aplicação dos resultados. Por exemplo, a abordagem fenomenológica enactive dá uma expansão para análise de controle motor para investigar a percepção e ação durante46de escalada no gelo. Os resultados quantitativos mostram uma ampla gama de padrões de coordenação de membro para especialistas do que para os escaladores de iniciante. Os resultados qualitativos aumentam o âmbito do inquérito, mostrando que esses padrões de coordenação diferentes estão ligadas à percepção de buracos na cascata de gelo.
No entanto, esses tipos de métodos mistos têm algumas limitações e exigem vigilância. O poder de enactive entrevista é limitado a um determinado nível de consciência. Esta entrevista permite que os pesquisadores acessar o prereflexive nível de consciência,47. Este nível é o "franja da consciência"48 (ou seja, na interface de processos conscientes e inconscientes). Então, não podem ser estudados diferentes dados como reflexos ou comportamentos inconscientes. Além disso, essa entrevista enactive é um passo crítico no protocolo, devido à dificuldade de se realizar. O avaliador deve ter ampla experiência para ajudar a re-emergência da atividade passada através de perguntas sobre o vídeo e evitar global discurso e a posteriori análise40 (cf. secção 6 do protocolo). Por último, esta entrevista específica e sua análise são demorados e limitam o número de participantes nos métodos mistos; estudos com a estrutura fenomenológica enactive geralmente têm um número de participantes entre 4 e 1314,15,18,19,20,27 , 49 , 50 , 51. esta particularidade da pesquisa qualitativa em profundidade, com estudos de caso levanta a questão da generalização dos resultados. Assim, é mais interessante atravessar essa abordagem qualitativa, com abordagem quantitativa.
Finalmente, inquéritos de métodos mistos representam problemas na articulação de dados e na congruência entre quadros. A combinação de métodos pode assumir formas diferentes. Não é fácil comparar métodos quantitativos e qualitativos, para misturar a palavra e número. Alguns estudos tentam quantificar dados qualitativos para ajudar a comparação3,6. Existem três tipos de método misto de análise6. Pesquisa de métodos mais mista usa primeiro, análises e interpretação realizada separadamente, como o protocolo aqui apresentado. Em segundo lugar, estudos apresentam análises separadas com alguma integração ocorrendo durante a interpretação. Em terceiro lugar, uma minoria de estudos integrar as análises e interpretação (9%)6. A congruência entre quadros quantitativas e qualitativas é um grande debate entre os puristas, as situacionistas e os pragmáticos. Os pragmáticos considerem método misto como uma nova forma de compreender o mundo, como um terceiro paradigma que ajuda a superar a separação entre métodos qualitativos e quantitativos52. Existem diferentes relações entre quadros. De um lado, existem pesquisadores que estudam diferentes paradigmas afetantes para dar dois pontos de vista diferentes sobre o mesmo fenômeno. Por exemplo, em um estudo sobre o papel do árbitro em educação física32, os pesquisadores utilizam duas estruturas separadas extraídas da motivação e da fenomenologia enactive. Por outro lado, outros estudos mantenham uma "ênfase do paradigma"53,54 entre quadros. Por exemplo, no desempenho de remo, o paradigma de Action é usado para conectar enactive fenomenológica com abordagens biomecânicas27. Os dados fenomenológicos serve para identificar categorias de traços de remo de acordo com ponto de vista dos remadores. Os dados biomecânicos tornam possível determinar as assinaturas mecânicas que são correlacionadas com cada categoria fenomenológica. Este tipo de método misto está perto de uma abordagem combinada. Além disso, Johnson e Onwuegbuzie3 definir métodos mistos como uma mistura ou uma combinação de abordagens, conceitos, técnicas, métodos ou linguagem de pesquisa quantitativa e qualitativa em um inquérito específico. Nesta base, abordagens combinadas usando métodos qualitativos e quantitativos são um tipo de método misto. Por exemplo, um recente artigo resume as combinações complexas de dados usando dados heterogêneos com uma comum paradigma55. Esse estudo investigou duas maneiras de coletar e analisar as interações entre os corredores da trilha e seus equipamentos de fóruns on-line e de protocolo de teste. Dados quantitativos (por exemplo, indicadores de mensagens no fórum) foram combinados com dados qualitativos (por exemplo, conteúdo de discussão ou enactive entrevistas) dentro da mesma perspectiva enactive. Os resultados desse estudo sugerem um método que designers podem adequado para analisar os dados experienciais, que podem então ser integrados no processo de concepção.
Este livro fornece a base para futuras pesquisas que utilizam métodos mistos, com abordagem qualitativa, para melhorar um protocolo, avaliar um dispositivo ou dar uma visão transversal do mesmo assunto pesquisa.
Subscription Required. Please recommend JoVE to your librarian.
Disclosures
Os autores não têm nada para divulgar.
Acknowledgments
Os autores agradecer Labeaume Perrine e Fanny Vieu por sua ajuda.
Materials
| Name | Company | Catalog Number | Comments |
| Enzyme-linked immunosorbent assay (ELISA) | Salimetrics, UK | Kit-- N° No. 1-3002 | Expanded Range High Sensitivity Salivary Cortisol Enzyme Immunoassay |
| Spectrophotometer | Thermo Fisher, Germany | Multiska FC Microplate Photometer |
References
- Creswell, J. W. A Concise Introduction to Mixed Methods Research. , Sage Publications. New York, NY. (2015).
- Greene, J. C. Mixed Methods in Social Inquiry. , John Wiley & Sons. San Francisco, CA. (2007).
- Johnson, R. B., Onwuegbuzie, A. J. Mixed Methods Research: A Research Paradigm Whose Time Has Come, Mixed Methods Research: A Research Paradigm Whose Time Has Come. Educational Researcher. 33 (7), 14-26 (2004).
- Arora, R., Stoner, C. A mixed method approach to understanding brand personality. Journal of Product & Brand Management. 18 (4), 272-283 (2009).
- Dunning, H., Williams, A., Abonyi, S., Crooks, V. A mixed method approach to quality of life research: A case study approach. Social Indicators Research. 85 (1), 145-158 (2008).
- Greene, J. C., Caracelli, V. J., Graham, W. F. Toward a Conceptual Framework for Mixed-Method Evaluation Designs. Educational Evaluation and Policy Analysis. 11 (3), 255-274 (1989).
- Kirschbaum, C., Pirke, K. -M., Hellhammer, D. H. The 'Trier Social Stress Test'-a tool for investigating psychobiological stress responses in a laboratory setting. Neuropsychobiology. 28 (1-2), 76-81 (1993).
- Von Dawans, B., Kirschbaum, C., Heinrichs, M. The Trier Social Stress Test for Groups (TSST-G): A new research tool for controlled simultaneous social stress exposure in a group format. Psychoneuroendocrinology. 36 (4), 514-522 (2011).
- Allen, A. P., Kennedy, P. J., Cryan, J. F., Dinan, T. G., Clarke, G. Biological and psychological markers of stress in humans: focus on the Trier Social Stress Test. Neuroscience & Biobehavioral Reviews. 38, 94-124 (2014).
- Birkett, M. A. The Trier Social Stress Test Protocol for Inducing Psychological Stress. Journal of Visualized Experiments. (56), e3238 (2011).
- Dickerson, S. S., Kemeny, M. E. Acute stressors and cortisol responses: a theoretical integration and synthesis of laboratory research. Psychological Bulletin. 130 (3), 355-391 (2004).
- Johnson, M. M., et al. A Modified Trier Social Stress Test for Vulnerable Mexican American Adolescents. Journal of Visualized Experiments. (125), e55393 (2017).
- Vors, O., Marqueste, T., Mascret, N. The Trier Social Stress Test and the Trier Social Stress Test for groups: Qualitative investigations. PLoS ONE. 13 (4), 0195722 (2018).
- Rochat, N., Hauw, D., Antonini Philippe, R., von Roten, F. C., Seifert, L. Comparison of vitality states of finishers and withdrawers in trail running: An enactive and phenomenological perspective. PLoS ONE. 12 (3), 0173667 (2017).
- Seifert, L., et al. Interpersonal Coordination and Individual Organization Combined with Shared Phenomenological Experience in Rowing Performance: Two Case Studies. Frontiers in Psychology. 8, 75 (2017).
- Theureau, J. Le Cours D'action: L'enaction & L'expérience. , Octarès. Toulouse, France. (2015).
- Keegan, R. J., Harwood, C. G., Spray, C. M., Lavallee, D. A qualitative investigation of the motivational climate in elite sport. Psychology of Sport and Exercise. 15 (1), 97-107 (2014).
- Doron, J., Bourbousson, J. How stressors are dynamically appraised within a team during a game: An exploratory study in basketball. Scandinavian Journal of Medicine & Science in Sports. 27 (12), 2080-2090 (2016).
- Ria, L., Sève, C., Saury, J., Theureau, J., Durand, M. Beginning teachers' situated emotions: A study of first classroom experiences. Journal of Education for Teaching. 29 (3), 219-234 (2003).
- Sève, C., Ria, L., Poizat, G., Saury, J., Durand, M. Performance-induced emotions experienced during high-stakes table tennis matches. Psychology of Sport and Exercise. 8 (1), 25-46 (2007).
- Durand, M. Activité humaine, pratiques sociales, et éducation des adultes. Un Dialogue Entre Concepts et Réalité. Friedrich, J., Pita, J. , Edition Raison & Passions. Dijon, France. 13-37 (2014).
- Thompson, E. Sensorimotor subjectivity and the enactive approach to experience. Phenomenology and the cognitive sciences. 4 (4), 407-427 (2005).
- Varela, F., Rosch, E., Thompson, E. The Embodied Mind: Cognitive Science and Human Experience. , MIT Press. Cambridge, MA. (1992).
- Froese, T., Di Paolo, E. A. The enactive approach: Theoretical sketches from cell to society. Pragmatics & Cognition. 19 (1), 1-36 (2011).
- Theureau, J. Course-of-action analysis and course-of-action centered design. Handbook of Cognitive Task Design. Hollnagel, E. , CRC Press. Boca Raton, FL. 55-81 (2003).
- De Jaegher, H., Di Paolo, E. Participatory sense-making. Phenomenology and the Cognitive Sciences. 6 (4), 485-507 (2007).
- R'Kiouak, M., Saury, J., Durand, M., Bourbousson, J. Joint Action of a Pair of Rowers in a Race: Shared Experiences of Effectiveness Are Shaped by Interpersonal Mechanical States. Frontiers in Psychology. 7, (2016).
- Hauw, D. Antidoping education using a lifelong situated activity-based approach: evidence, conception, and challenges. Quest. 69 (2), 256-275 (2017).
- Horcik, Z., Savoldelli, G., Poizat, G., Durand, M. A Phenomenological Approach to Novice Nurse Anesthetists' Experience During Simulation-Based Training Sessions. Simulation in Healthcare - Journal of the Society for Simulation in Healthcare. 9 (2), 94-101 (2014).
- Vors, O., Gal-Petitfaux, N. Relation between students' involvement and teacher management strategies in French "difficult" classrooms. Physical Education and Sport Pedagogy. 20 (6), 647-669 (2015).
- Vors, O., Gal-Petitfaux, N., Potdevin, F. A successful form of trade-off in compensatory policy classrooms: Processes of ostentation and masking. A case study in French physical education. European Physical Education Review. 21 (3), 340-361 (2015).
- Adé, D., Ganière, C., Louvet, B. The role of the referee in physical education lessons: student experience and motivation. Physical Education and Sport Pedagogy. 23 (4), 418-430 (2018).
- Lesage, F. -X., Berjot, S., Deschamps, F. Psychometric properties of the French versions of the Perceived Stress Scale. International Journal of Occupational Medicine and Environmental Health. 25 (2), 178-184 (2012).
- Salama-Younes, M., Montazeri, A., Ismaïl, A., Roncin, C. Factor structure and internal consistency of the 12-item General Health Questionnaire (GHQ-12) and the Subjective Vitality Scale (VS), and the relationship between them: a study from France. Health and Quality of life Outcomes. 7 (1), 22 (2009).
- Goodman, W. K., Janson, J., Wolf, J. M. Meta-analytical assessment of the effects of protocol variations on cortisol responses to the Trier Social Stress Test. Psychoneuroendocrinology. 80, 26-35 (2017).
- Allen, A. P., et al. The Trier Social Stress test: principles and practice. Neurobiology of Stress. 6, 113-126 (2017).
- Spielberger, C. D., Gorsuch, R. L., Lushene, R. E. Manual for the State-Trait Anxiety Inventory (Self-evaluation Questionnaire). , Palo Alto, CA. (1970).
- Bradley, M. M., Lang, P. J. Measuring emotion: the self-assessment manikin and the semantic differential. Journal of Behavior Therapy and Experimental Psychiatry. 25 (1), 49-59 (1994).
- Frisch, J. U., Häusser, J. A., van Dick, R., Mojzisch, A. The Social Dimension of Stress: Experimental Manipulations of Social Support and Social Identity in the Trier Social Stress Test. Journal of Visualized Experiments. (105), e53101 (2015).
- Starks, H., Brown Trinidad, S. Choose your method: A comparison of phenomenology, discourse analysis, and grounded theory. Qualitative Health Research. 17 (10), 1372-1380 (2007).
- Mascret, N., et al. The Influence of the "Trier Social Stress Test" on Free Throw Performance in Basketball: An Interdisciplinary Study. PLoS ONE. 11 (6), 0157215 (2016).
- Het, S., Rohleder, N., Schoofs, D., Kirschbaum, C., Wolf, O. T. Neuroendocrine and psychometric evaluation of a placebo version of the 'Trier Social Stress Test.'. Psychoneuroendocrinology. 34 (7), 1075-1086 (2009).
- Nater, U. M., et al. Performance on a declarative memory task is better in high than low cortisol responders to psychosocial stress. Psychoneuroendocrinology. 32 (6), 758-763 (2007).
- Adé, D., Poizat, G., Gal-Petitfaux, N., Toussaint, H., Seifert, L. Analysis of elite swimmers' activity during an instrumented protocol. Journal of Sports Sciences. 27 (10), 1043-1050 (2009).
- Poizat, G., Adé, D., Seifert, L., Toussaint, H., Gal-Petitfaux, N. Evaluation of the Measuring Active Drag system usability: An important step for its integration into training sessions. International Journal of Performance Analysis in Sport. 2 (10), 170-186 (2010).
- Seifert, L., et al. Neurobiological degeneracy and affordance perception support functional intra-individual variability of inter-limb coordination during ice climbing. PLoS ONE. 9 (2), 89865 (2014).
- Legrand, D. Pre-reflective self-as-subject from experiential and empirical perspectives. Consciousness and Cognition. 16 (3), 583-599 (2007).
- Mangan, B. Taking Phenomenology Seriously: The "Fringe" and Its Implications for Cognitive Research. Consciousness and Cognition. 2 (2), 89-108 (1993).
- Mohamed, S., Favrod, V., Antonini Philippe, R., Hauw, D. The Situated Management of Safety during Risky Sport: Learning from Skydivers' Courses of Experience. Journal of Sports Science and Medicine. 14 (2), 340-346 (2015).
- Mottet, M., Eccles, D. W., Saury, J. Navigation in outdoor environments as an embodied, social, cultural, and situated experience: An empirical study of orienteering. Spatial Cognition & Computation. 16 (3), 220-243 (2016).
- Antonini Philippe, R., Rochat, N., Vauthier, M., Hauw, D. The story of withdrawals during an ultra-trail running race: A qualitative investigation of runners' Courses of experience. The Sport Psychologist. 30 (4), 361-375 (2016).
- Onwuegbuzie, A. J., Leech, N. L. On becoming a pragmatic researcher: The importance of combining quantitative and qualitative research methodologies. International Journal of Social Research Methodology. 8 (5), 375-387 (2005).
- Morgan, D. L. Practical strategies for combining qualitative and quantitative methods: Applications to health research. Qualitative Health Research. 8 (3), 362-376 (1998).
- Morse, J. M. Approaches to qualitative-quantitative methodological triangulation. Nursing Research. 40 (2), 120-123 (1991).
- Rochat, N., Hauw, D., Seifert, L. Enactments and the design of trail running equipment: An example of carrying systems. Applied Ergonomics. , (2018).
