¿Cómo se toma una decisión entre diferentes pruebas cognitivas para el mismo constructo?

Hay formas sistemáticas de comparar pruebas similares y determinar qué prueba se adapta mejor a sus necesidades.

Definición de constructo Identifique los constructos (en este caso, rasgos o habilidades) que le interesan y defina claramente el significado de cada constructo. El rendimiento cognitivo puede abarcar muchos dominios, incluida la memoria, la velocidad de procesamiento, el funcionamiento psicomotor y varios aspectos de la inteligencia (incluida la inteligencia social). Una vez que haya identificado qué componentes considera que son clave para el "procesamiento cognitivo máximo", use la literatura en su campo para desarrollar definiciones operacionalizadas aceptadas o basadas en la teoría para cada constructo, de modo que tenga un estándar con el que pueda comparar diferentes pruebas.

Identificación de pruebas Identificar posibles pruebas; por lo general, su título o breve descripción le permitirá identificar las pruebas que evalúan constructos de interés. Sin embargo, al comparar pruebas, hay varias cosas que se deben considerar para 1) asegurarse de que la prueba realmente mida su construcción de interés, 2) comparar tipos similares de pruebas y 3) seleccionar la prueba que mejor se adapte a sus necesidades.

Validez Evaluar varios aspectos de la validez de la prueba para cada prueba. Validez de constructoevalúa si la prueba mide el constructo de interés; una forma rápida (aunque no exhaustiva) de evaluar la validez del constructo es comparar la definición o teoría que usan los desarrolladores de la prueba con la definición que usted ha creado. Si ha definido "depresión" en términos cognitivos (dificultad para pensar, distracción, pensamientos rumiantes) y la prueba que está evaluando la ha definido en términos emocionales o somáticos (tristeza, desesperanza, problemas para dormir, pérdida de apetito), entonces eso La prueba no coincidiría con su definición de depresión y es posible que no capture el constructo que le interesa. Le aconsejo usar estas definiciones como punto de partida, para que se sienta seguro de que la prueba es apropiada para sus propósitos. Sin embargo, también debe considerar otros tipos de validez. Validez de contenidoevalúa si captura parte de un constructo (como el conocimiento fáctico) o el constructo completo (como el conocimiento fáctico y la aplicación de ese conocimiento). La validez de criterio/predictiva es si la prueba ha demostrado predecir ciertos resultados medidos en un momento posterior; un ejemplo es ver si una prueba de lectura predice las calificaciones de fin de año en lectura. La validez de criterio se usa con mayor frecuencia en pruebas de rendimiento o de empleo y puede no ser relevante para su trabajo.

Otras propiedades psicométricas Evalúe las propiedades psicométricas adicionales de cada medida. ¿Existe evidencia de validez convergente (está positivamente correlacionada con variables similares) y divergente (existe una correlación negativa o nula con variables diferentes)? ¿Se ha establecido la confiabilidad test-retest o entre evaluadores? ¿Las escalas tienen buena consistencia interna (alfa de Cronbach)? ¿Se conoce la sensibilidad (número de verdaderos positivos identificados) y la especificidad (número de verdaderos negativos)?

Normas y desarrollo Piense en qué grupos se ha utilizado y desarrollado la prueba. ¿Se desarrolló solo en base a muestras de estudiantes universitarios? ¿Ha sido validado en diversos grupos? Algunas de las baterías más conocidas pueden ser pruebas "normadas", que le permiten comparar puntajes con una muestra de referencia bien definida. Sin embargo, si esa muestra es drásticamente diferente de la población con la que trabaja, puede que no sea útil hacer esa comparación.

La carga de la prueba y la evaluación de las características secundarias También deberá decidir si existen ciertos factores que podrían complicar el uso de una prueba, como una extensión excesiva o un alto nivel de lectura o dificultad. Finalmente, cuando se haya decidido por una evaluación válida, confiable y de longitud adecuada que coincida con su construcción de interés, revise la medida y esté al tanto de cualquier contaminación de la construcción .asuntos. Un ejemplo es una prueba de memoria de trabajo (quizás haciendo que alguien resuelva problemas de historias orales en su cabeza) que también está cronometrada. En este caso, si se penaliza a la persona por no trabajar lo suficientemente rápido, es posible que esté detectando deficiencias en la velocidad de procesamiento en lugar de la memoria de trabajo. De manera similar, si está utilizando la prueba para evaluar las habilidades matemáticas, es posible que esté capturando problemas de memoria de trabajo en lugar de una evaluación precisa de la habilidad matemática; la persona puede completar correctamente los problemas de matemáticas en papel y lápiz si no se le pide que recuerde el problema mientras lo resuelve. Es posible que pueda contrarrestar los efectos de la contaminación midiendo la misma habilidad (matemáticas) de varias maneras (tanto oralmente como en papel, tanto cronometradas como no cronometradas).

Resumen para identificar y comparar evaluaciones:

1. Asegúrese de que la prueba evalúe el constructo de interés utilizando la definición operativa que tiene en mente.
2. Evaluar la confiabilidad y la validez (incluidas las normas, la sensibilidad y la especificidad)
3. Asegúrese de que la longitud, el idioma, etc. sean prácticos para sus propósitos
4. Tenga en cuenta la posible contaminación de la construcción

Referencias

Groth-Marnat, G. (2009). Manual de evaluación psicológica. (5ª Edición). Hoboken, Nueva Jersey: John Wiley & Sons, Inc.

Furr, RM y Bacharach, VR (2008). Psicometría: una introducción. Thousand Oaks, CA: Sage Publications, Inc.