Detección del funcionamiento diferencial del ítem en Test Adaptativos Informatizados

Resumen

En cualquier proceso de evaluación psicológica es importante estudiar que las puntuaciones obtenidas por las personas en un test no tienen sesgo. El sesgo se entiende como un error sistemático relacionado con la pertenencia del sujeto a un determinado grupo demográfico. Una estrategia para evaluar la presencia de sesgo es estudiar el funcionamiento diferencial de los ítems (DIF). Existen muchos métodos para el análisis del DIF en test convencionales, pero algunos de ellos no están suficientemente adaptados a las características de los test adaptativos informatizados (TAIs), cada vez más frecuentes pues permiten optimizar el proceso de evaluación. En el presente trabajo de tesis doctoral se propone un nuevo procedimiento de detección del DIF en TAIs, inspirado en la calibración online, denominado método de Calibración con Parámetros Fijos (CPF). En concreto, nuestro objetivo es obtener una adaptación válida del Test de Razón de Verosimilitudes de la TRI (IRT LRT) que permita realizar el análisis del DIF tanto en ítems pretest, como en ítems operativos. Se realizaron dos estudios de simulación. En el estudio 1 se analiza el DIF en un contexto de calibración online, valorando la eficacia de las técnicas en la detección del DIF en ítems nuevos (pretest), durante la fase de actualización del banco de ítems. Se aplicaron tres métodos de CPF, aquellos en los que se actualizan las distribuciones de la habilidad, y se compararon con la propuesta de imputación de Lei (Lei, et al., 2006). En el estudio 2 se estudian los métodos de detección del DIF en ítems operativos, durante la fase de mantenimiento del banco. El mejor método CPF, según los resultados del estudio 1, se compara con el método CATSIB (Nandakumar y Roussos, 2001, 2004). Los resultados obtenidos en ambos estudios sugieren que la propuesta de aplicar IRT LRT, conjuntamente con un método CPF, puede resultar un procedimiento más adecuado que imputar las respuestas (estudio 1) o aplicar CATSIB (estudio 2). Finalmente, en la discusión general se exponen los principales resultados, las limitaciones de los estudios realizados y las futuras líneas de investigación. Palabras clave: funcionamiento diferencial del ítem, calibración con parámetros fijos, calibración online, test adaptativos informatizados, test de razón de verosimilitudes de la TRI, CATSIB