A validade baseada nas consequências da testagem é uma das cinco fontes de validade dos testes segundo os Standards da AERA, APA e NCME (2014).
Embora as consequências ou o uso dos escores de um teste não pareçam ter a ver com a validade do instrumento, é importante notar que a maioria dos testes tem um propósito de avaliação que poderá resultar em impactos na vida do sujeito avaliado. Assim, torna-se importante avaliar as consequências pretendidas e os efeitos colaterais indesejados dos usos feitos a partir dos testes.
Por exemplo:
Imaginemos que temos uma medida de depressão para idosos. Se a medida está sendo usada para rastrear ou descrever os níveis de depressão na população em geral, é preciso considerar as consequências sociais intencionais e não intencionais de encontrar um número muito pequeno ou muito grande de idosos deprimidos. Precisamos considerar como tais descobertas podem impactar, por exemplo, o financiamento de programas comunitários de saúde mental para a terceira idade, diagnósticos médicos e o impacto na cobertura e nas taxas de planos de saúde, etc.
Outro exemplo, se um teste X for usado com um grupo cultural diferente do que a amostra de desenvolvimento do teste original (por exemplo, povos aborígines, grupos de imigrantes), devemos nos perguntar: se o significado das pontuações é o mesmo com este grupo? Se as pontuações são relevantes e úteis para este grupo? Qual será o impacto das pontuações obtidas para esse grupo? Quais serão as consequências decorrentes do uso desse teste nesse grupo específico?
Se, intencionalmente ou não, o uso do teste puder impactar negativamente algum aspecto da vida da população-alvo, as consequências da testagem serão consideradas adversas, e a testagem poderá ser interrompida.
Precauções a serem tomadas para salvaguardar a validade baseada na consequência da testagem
Embora um teste possa ser utilizado para várias situações ou atividades, nenhum teste é adequado para todas as situações e atividades do ser humano. Assim, o teste deveria ser elaborado para situações ou atividades específicas, do que resulta que, no final das contas, se deveria elaborar um teste diferente para cada situação ou atividade. Considerando que impor a tarefa de coletar evidência para as consequências de uso dos escores para cada situação de aplicação do teste é uma tarefa impossível, é responsabilidade do desenvolvedor do teste explicitar para que situações ou atividades o teste produz escores adequados para a tomada de decisões com base nele.
Por outro lado, quando as decisões são tomadas a partir da aplicação de um teste e não se trata apenas de descrever ou interpretar sem haver ações que dele decorram, deve-se pensar nas consequências da aplicação do referido instrumento. Isto posto, testes devem ser usados quando as consequências positivas (benefícios) são maximizadas e as consequências negativas (custos) derivadas de sua aplicação são minimizadas.
Importante:
Cizek, Bowen e Church (2010), no seu artigo Sources of validity evidence for educational and psychological tests: A follow-up study, afirmam que as consequências da testagem como fonte de evidência de validade simplesmente não existem na literatura profissional. Assim, embora a AERA, APA e NCME (2014) já tenham postulado sobre a sua importância e necessidade, ainda é escasso ver esse tipo de discussão sendo realizado na prática.
Gostou desse conteúdo? Precisa aprender Análise de dados? Faça parte da Psicometria Online Academy: a maior formação de pesquisadores quantitativos da América Latina. Conheça toda nossa estrutura aqui e nunca mais passe trabalho sozinho(a).
Referências
American Educational Research Association, American Psychological Association, & National Council on Measurement in Education. (2014). Standards for educational and psychological testing. Washington, DC: American Educational Research Association.
Cizek, G. J., Bowen, D., & Church, K. (2010). Sources of validity evidence for educational and psychological tests: A follow-up study. Educational and Psychological Measurement, 70(5), 732-743.
Como citar este post
Damásio, B. (2021, 9 de maio). Validade baseada nas consequências da testagem. Blog Psicometria Online. https://www.blog.psicometriaonline.com.br/validade-baseada-nas-consequencias-da-testagem/
