1.15: Confiabilidade e Validade

Reliability and Validity
JoVE Core
Social Psychology
A subscription to JoVE is required to view this content.  Sign in or start your free trial.
JoVE Core Social Psychology
Reliability and Validity

12,708 Views

01:29 min
February 12, 2020

Overview

Confiabilidade e validade são duas considerações importantes que devem ser feitas com qualquer tipo de coleta de dados. Confiabilidade refere-se à capacidade de produzir consistentemente um determinado resultado. No contexto da pesquisa psicológica, isso significaria que quaisquer instrumentos ou ferramentas usados para coletar dados o fazem de maneira consistente e reprodutível.

Infelizmente, ser consistente na medição não significa necessariamente que você mediu algo corretamente. Para ilustrar esse conceito, considere uma balança de cozinha que seria usada para medir o peso do cereal que você come pela manhã. Se a balança não estiver calibrada corretamente, ela pode subestimar ou superestimar consistentemente a quantidade de cereal que está sendo medida. Embora a balança seja altamente confiável na produção de resultados consistentes (por exemplo, a mesma quantidade de cereal derramada na balança produz a mesma leitura todas as vezes), esses resultados estão incorretos. É aqui que a validade entra em jogo. A validade refere-se à medida em que um determinado instrumento ou ferramenta mede com precisão o que deve medir. Embora qualquer medida válida seja necessariamente confiável, o inverso não é necessariamente verdadeiro. Os pesquisadores se esforçam para usar instrumentos altamente confiáveis e válidos.

Quão válido é o SAT?

Testes padronizados como o SAT devem medir a aptidão de um indivíduo para uma educação universitária, mas quão confiáveis e válidos são esses testes? A pesquisa conduzida pelo College Board sugere que as pontuações no SAT têm alta validade preditiva para o GPA dos estudantes universitários do primeiro ano (Kobrin, Patterson, Shaw, Mattern e Barbuti, 2008). Nesse contexto, a validade preditiva refere-se à capacidade do teste de prever efetivamente o GPA de calouros universitários. Dado que muitas instituições de ensino superior exigem o SAT para admissão, esse alto grau de validade preditiva pode ser reconfortante.

No entanto, a ênfase colocada nas pontuações do SAT nas admissões universitárias gerou alguma controvérsia em várias frentes. Por um lado, alguns pesquisadores afirmam que o SAT é um teste tendencioso que coloca os alunos de minorias em desvantagem e reduz injustamente a probabilidade de serem admitidos em uma faculdade (Santelices & Wilson, 2010). Além disso, algumas pesquisas sugeriram que a validade preditiva do SAT é grosseiramente exagerada em quão bem ele é capaz de prever o GPA de estudantes universitários do primeiro ano. De fato, foi sugerido que a validade preditiva do SAT pode ser superestimada em até 150% (Rothstein, 2004). Muitas instituições de ensino superior estão começando a considerar a desênfase da importância das pontuações do SAT na tomada de decisões de admissão (Rimer, 2008).

Em 2014, o presidente do College Board, David Coleman, expressou sua consciência desses problemas, reconhecendo que o sucesso na faculdade é previsto com mais precisão pelas notas do ensino médio do que pelas pontuações do SAT. Para resolver essas preocupações, ele pediu mudanças significativas no exame SAT (Lewin, 2014).

 

Este texto foi adaptado de OpenStax, Psicologia. OpenStax CNX.

Transcript

Em um ambiente científico, suponha que um pesquisador queira criar um teste para medir a compatibilidade de parceiros em potencial em um site de namoro online. Eles devem considerar dois fatores importantes para gerar resultados bem-sucedidos.

Uma é a confiabilidade, que se refere à capacidade de um teste – ou outro instrumento de pesquisa – de fornecer resultados consistentes e, portanto, reprodutíveis em circunstâncias semelhantes.

Nesse contexto, o teste de compatibilidade seria considerado confiável se as mesmas pessoas fizessem o teste duas vezes e tivessem um desempenho semelhante a cada vez. Essa situação também é conhecida como confiabilidade teste-reteste.

No entanto, obter resultados consistentes não garante que um teste seja preciso. Agora, o segundo fator, a validade – até que ponto um teste mede ou prevê com precisão o que se propôs a medir – deve ser refletido.

Eles realmente vão gostar de passar um tempo juntos em um encontro?

Se o par teve uma pontuação baixa em compatibilidade de namoro e ainda saiu para jantar juntos, talvez eles tenham se divertido muito. Nesse caso, o teste tinha alta validade preditiva – ele previa o comportamento.

No final, os pesquisadores buscam reprodutibilidade e precisão: aqui, o teste é bem-sucedido se outros casais incompatíveis continuarem na miséria, enquanto aqueles que compartilham interesses comuns desfrutam de momentos fantásticos juntos.

Key Terms and definitions​

  • Reliability - Refers to the ability to consistently produce a given result in context of psychological research.
  • Validity - The extent to which a given instrument or tool accurately measures what it's supposed to measure.
  • Predictive Validity - Refers to the test's ability to effectively predict certain outcomes, like the GPA of college freshmen.
  • High Reliability - A measure of the consistency or reproducibility of the results of a study or experiment.
  • Standardized Tests - Tests like the SAT that aim to measure an individual’s aptitude for a college education.

Learning Objectives

  • Define Reliability - Understand the meaning and importance of consistent, reproducible results (e.g., reliability).
  • Contrast High reliability vs Validity - Grasp the key differences between consistency and accuracy in measurement (e.g., reliability vs validity).
  • Explore Examples of Reliability and Validity in Standardized Testing - Examine the SAT case (e.g., SAT Predictive Validity)
  • Explain the Importance of Valid and Reliable Data - Understand why researchers strive for tools and tests that are both highly reliable and valid.
  • Apply in Context of Psychological Research - Recognize how these concepts apply in real-world research scenarios.

Questions that this video will help you answer

  • What does reliability refer to in the context of psychological research?
  • How does validity differ from high reliability in data collection?
  • What is the predictive validity of the SAT and why is it controversial?

This video is also useful for

  • Students - Gain a deeper understanding of key research concepts like reliability and validity
  • Educators - Provides a clear framework for explaining and teaching these complex research concepts
  • Researchers - Understand the crucial role of reliable and valid data in scientific study.
  • Psychology Enthusiasts - Help foster a broader interest and curiosity about how psychological research is conducted and interpreted.