Development, psychometric properties and new validity evidences of the web-based computerized adaptive test of English eCat
PDF

Palabras clave

Test adaptativo informatizado
tests por internet
evaluación del inglés
selección de personal
Computerized adaptive testing
testing by the Internet
English assessment
erecruitment.

Cómo citar

Olea, J., Abad, F. J., Ponsoda, V., Aguado, D., & Díaz, J. (2012). Development, psychometric properties and new validity evidences of the web-based computerized adaptive test of English eCat. R.E.M.A. Revista electrónica De metodología Aplicada, 16(1), 50–65. https://doi.org/10.17811/rema.16.1.2011.50-65

Resumen

Se describe la construcción del test eCat y se informa de las consecuencias que su
funcionamiento ha tenido en sus propiedades psicométricas. Los resultados obtenidos en una
muestra de 3224 estudiantes mostraron que el banco tiene una adecuada fiabilidad y validez
convergente en relación a los autoinformes de dominio del inglés. Las simulaciones
realizadas mostraron que las estimaciones carecían de sesgo y que el test ha de tener al menos
15 ítems para alcanzar una precisión razonable. A partir de las 7254 aplicaciones del test
disponibles, se han vuelto a obtener las propiedades psicométricas y se han comparado con las
previstas antes de la aplicación. Se aportan nuevas evidencias de validez.

 

This paper describes the process of constructing the eCat test and provides information
on the effects its normal operation had on its psychometric properties. Results obtained from
3224 students revealed that the 225 item pool has adequate reliability and good convergent
validity with respect to self-reported English proficiency. Simulations showed that ability
estimations are essentially unbiased and that a stopping criterion of over 15 items is required
to achieve a reasonable level of precision. From 7254 eCat administrations the test
psychometric properties have been computed again and compared with those of the
preoperational eCat. Additional validity evidences are also presented.

https://doi.org/10.17811/rema.16.1.2011.50-65
PDF

Descargas

Los datos de descargas todavía no están disponibles.