Pruebas cognitivas previas

La preevaluación cognitiva , o entrevista cognitiva , es un método de investigación de campo en el que se recopilan datos sobre cómo el sujeto responde a las preguntas de la entrevista. Consiste en la evaluación de una prueba o cuestionario antes de su administración. ^{[ 1 ]} Permite a los investigadores de encuestas recopilar retroalimentación sobre las respuestas y se utiliza para evaluar si la pregunta mide el constructo que el investigador pretende. Los datos recopilados se utilizan posteriormente para ajustar las preguntas problemáticas del cuestionario antes de aplicar la encuesta a la muestra completa de personas. ^{[ 2 ] [ 3 ] [ 4 ] [ 5 ] [ 6 ]}

Las entrevistas cognitivas suelen recopilar la siguiente información de los participantes: evaluaciones sobre cómo el sujeto construyó sus respuestas; explicaciones sobre lo que el sujeto interpreta que significan las preguntas; informes de cualquier dificultad que el sujeto haya tenido al responder las preguntas; y cualquier otra cosa que revele las circunstancias de las respuestas del sujeto.

Las pruebas cognitivas previas se consideran esenciales para comprobar la validez de una entrevista, prueba o cuestionario. ^{[ 7 ]}

El propósito de estas pruebas preliminares es:

• Asegúrese de que la prueba o entrevista sea comprensible.
• abordar cualquier problema que los participantes hayan podido tener con la prueba
• medir la atención y la curiosidad de los participantes hacia las preguntas
• medir la escala de respuestas (Ej.: ¿se está utilizando toda la escala o las respuestas varían demasiado?)
• evaluar el orden de las preguntas y otros efectos del contexto
• problemas con los entrevistadores
• Solucione cualquier problema técnico con la prueba (por ejemplo, fallos técnicos o errores gramaticales).
• y cuánto tiempo lleva realizar la prueba o la entrevista. ^{[ 1 ] [ 4 ] [ 6 ]}

En general, existen muchos métodos que se practican al realizar una prueba cognitiva preliminar. Entre ellos se incluyen: pruebas preliminares convencionales, entrevistas cognitivas, codificación del comportamiento, análisis posterior a la participación, discusión grupal, revisión por expertos, seguimiento ocular y sondeo web. ^{[ 1 ]}

Pruebas previas convencionales : Se trata de un ensayo que intenta imitar y simular cómo será la prueba o entrevista real. Es una simulación que se realiza antes de la prueba o entrevista real. En este método de pruebas previas se debe utilizar el mismo método que en la entrevista o prueba real. ^{[ 1 ] [ 8 ]}

Pruebas cognitivas previas (entrevistas cognitivas) : muy similares a las pruebas previas convencionales. Sin embargo, se les pregunta activamente a los participantes sobre las preguntas mientras realizan la prueba. Se lleva a cabo durante la entrevista o la prueba. ^{[ 1 ] [ 6 ]}

También pueden presentarse de múltiples maneras diferentes, incluyendo: encuestas escritas, encuestas orales, encuestas electrónicas ^{[ 4 ].}

Existen ciertas técnicas que el entrevistador implementa en las pruebas cognitivas preliminares para extraer la información necesaria para garantizar una buena entrevista o cuestionario.

La técnica de pensamiento en voz alta: Consiste en que el entrevistador le pide al entrevistado que verbalice sus pensamientos y cómo llegó a su respuesta. Esto puede hacerse de forma simultánea (durante) o retrospectiva (después) de la entrevista. ^{[ 1 ] [ 2 ]}

Técnica de sondeo : Consiste en que el entrevistador formula al entrevistado una o más preguntas de seguimiento. Estas preguntas indagan sobre las preguntas formuladas, la terminología utilizada o incluso las respuestas. ^{[ 1 ] [ 2 ]} Los sondeos pueden ser concurrentes (durante la tarea, pero sin interrumpirla) o retrospectivos (después de la tarea). ^{[ 9 ]}

Parafraseo: Esto ocurre cuando el entrevistador le pide al entrevistado que repita la pregunta con sus propias palabras. Esto sirve para comprobar que las preguntas sean comprensibles. ^{[ 1 ]}

Nivel de confianza : esto ocurre cuando el entrevistador pregunta al entrevistado sobre su confianza en la precisión de sus respuestas a la pregunta. ^{[ 1 ]}

Clasificación o ordenación de tarjetas : esto ocurre cuando el entrevistador le pregunta al entrevistado o intenta comprender cómo el entrevistado categoriza ciertas situaciones o incluso términos. ^{[ 1 ] [ 9 ]}

Viñetas : Son descripciones breves de uno o más personajes hipotéticos (similares a las viñetas utilizadas en experimentos psicológicos y sociológicos o a las viñetas de anclaje en la investigación cuantitativa mediante encuestas) y se utilizan para investigar el procesamiento cognitivo del encuestado con respecto a sus decisiones relacionadas con la encuesta. ^{[ 9 ] [ 10 ]}

Sondeo web: Esta técnica implementa técnicas de sondeo de entrevista cognitiva en encuestas web. Sus ventajas incluyen la estandarización, el anonimato y una amplia y rápida cobertura, ya que se administra a través de la web. Sin embargo, el sondeo web solo puede llegar a grupos de población en línea, existe la posibilidad de no respuesta a las preguntas y no se puede dar seguimiento a las respuestas insuficientes desde una perspectiva de contenido. ^{[ 11 ] [ 12 ]}

El tamaño de la muestra es un tema muy importante en las pruebas piloto. Es común utilizar muestras pequeñas de 5 a 15 participantes. Si bien algunos investigadores sugieren que lo ideal es que el tamaño de la muestra sea de al menos 30 personas, y que cuanto mayor sea, mejor ^{[ 13 ],} la práctica recomendada actualmente es diseñar la investigación en rondas para volver a probar los cambios. Por ejemplo, al realizar una prueba piloto de un cuestionario, es más útil llevar a cabo 3 rondas de 9 participantes que 1 ronda de 27 ^{[ 9 ].}

Existen dos métodos diferentes para informar a los participantes sobre el cuestionario: pruebas previas participativas y pruebas previas no declaradas. ^{[ 4 ]}

• Las pruebas previas participativas garantizan que los participantes sepan que la prueba que están realizando es solo una práctica. Esto se utiliza principalmente en la técnica de sondeo y pensamiento en voz alta, o en las pruebas previas cognitivas y las entrevistas ^{[ 4 ].}
• Las pruebas previas no declaradas son aquellas en las que los participantes desconocen que se trata de una prueba de práctica. Son muy similares a las pruebas previas convencionales. Si se realizan varias pruebas previas en un estudio, se recomienda que la prueba previa para participantes se realice primero, seguida de la no declarada. ^{[ 4 ] [ 6 ]}

Las entrevistas cognitivas son una práctica habitual en agencias federales de EE. UU., como la Oficina del Censo , ^{[ 19 ] [ 20 ]} el Centro Nacional de Estadísticas de Salud (NCHS), ^{[ 21 ]} y la Oficina de Estadísticas Laborales . ^{[ 22 ]} El NCHS mantiene una base de datos de agencias estadounidenses e internacionales que han llevado a cabo proyectos de entrevistas cognitivas y han contribuido con informes a su repositorio, como la Fundación Nacional de Ciencias y GESIS – Instituto Leibniz de Ciencias Sociales . ^{[ 23 ]}

La entrevista cognitiva transcultural se practica para evaluar la equivalencia de las preguntas de la encuesta y las fuentes de dificultades, así como para corregir problemas relacionados con la traducción. ^{[ 24 ] [ 25 ]} Debido a las diferencias en los estilos de comunicación y las normas culturales, se necesitan adaptaciones en la configuración del protocolo ^{[ 26 ]} y el diseño, ^{[ 27 ]} el uso de viñetas, ^{[ 10 ]} y la indagación verbal. ^{[ 28 ]}