Estudios psicológicos que requieren recolectar datos, cada vez más frecuentemente usan alguna forma de recolección de éstos en línea. La pregunta natural es ¿se afecta significativamente la confiabilidad al recolectar datos en encuestas o en experimentos online?

Además de usar métodos estadísticos para determinar y comparar la confiabilidad de las encuestas en línea, es importante medir el comportamiento del participante al realizar tales encuestas o experimentos.

Un trabajo reciente de Stieger y Reips (2010) aborda la cuestión y presentan una herramienta que puede ayudar a comprender mejor cómo se responden los cuestionarios en línea.

Un formulario típico en HTML o PHP no permite saber qué hizo realmente el participante cuándo respondió una encuesta. Sin embargo, la herramienta UserActionTracer de Stieger y Reips permite recolectar información del comportamiento de los participantes, por ejemplo el proceso de responder preguntas, tiempos, correcciones, forma de avance, regreso, clicks, recorridos del cursor, etc. En un trabajo empírico con 1046 participantes encontraron que el 10.5% de estos mostraban conductas individuales que influían negativamente en la calidad de los datos del cuestionario.

Desde el punto de vista de la medición psicológica la herramienta puede ser de mucha utilidad. Por ejemplo, el solo tiempo de reacción puede ser una variable interesante que quizá pueda ser predictor de otros comportamientos. Puede ser que personas con X rasgos se tarden más o menos en tales o cuales preguntas. Un referente de lo anterior puede ser el Test de Asociaciones Implícitas.

Fuente:
Stieger, S., & Reips, U. (2010). What are participants doing while filling in an online questionnaire: A paradata collection tool and an empirical study. Computers in Human Behavior, 26(6), 1488-1495. doi:10.1016/j.chb.2010.05.013