Estrategias de selección de ítems en un test adaptativo informatizado para la evaluación de inglés escrito

• Autores: Julio Olea Díaz, Francisco José Abad García, Vicente Ponsoda Gil, Juan Ramón Barrada González
• Localización: Psicothema, ISSN-e 1886-144X, ISSN 0214-9915, Vol. 18, Nº. 4, 2006, págs. 828-834
• Idioma: español
• Enlaces
  • Texto completo
• Resumen

  • e-CAT es un Test Adaptativo Informatizado para la evaluación del nivel de conocimiento del inglés escrito, que implementa la regla de selección de ítems más comúnmente empleada: el criterio de máxima información de Fisher. Algunos de los problemas asociados a este criterio de selección repercuten negativamente en la precisión de las estimaciones y en la seguridad del banco de ítems. En el presente trabajo se compara mediante simulación el rendimiento de esta regla con otras dos: la selección del ítem con máxima información de Fisher por intervalo de Veerkamp y Berger (1997) y una nueva regla, denominada como «máxima información de Fisher por intervalo con media geométrica». En general, este nuevo criterio de selección de ítems proporciona menor error de medida y menores tasas de solapamiento de ítems. Parece, pues, recomendable, al permitir obtener mejoras simultáneas en la calidad de las estimaciones y en el mantenimiento de la seguridad del banco de ítems en que se sustenta e-CAT.

• Referencias bibliográficas
  • Barrada, J.R., Mazuela, P., y Olea, J. (2006). Maximum information stratification method for controlling item exposure in computerized adaptive...
  • Barrada, J.R., Olea, J., y Ponsoda, V. (2004). Reglas de selección de ítems en tests adaptativos informatizados. Metodología de las Ciencias...
  • Chang, H.H., y Ying, Z. (1996). A global information approach to computerized adaptive testing. Applied Psychological Measurement, 20, 213-229.
  • Chang, H.H., y Ying, Z. (1999). a-Stratified multistage computerized adaptive testing. Applied Psychological Measurement, 23, 211-222.
  • Chang, H.H., y Ying, Z. (2002, abril). To weight or not to weight - balancing influence of initial and later items in CAT. Paper presented...
  • Chang, S.W., y Ansley, T.N. (2003). A comparative study of item exposure control methods in computerized adaptive testing. Journal of Educational...
  • Chen, S.Y., Ankenmann, R.D., y Chang, H.H. (2000). A comparison of item selection rules at the early stages of computerized adaptive testing....
  • Chen, S.Y., Ankenmann, R.D., y Spray, J.A. (2003). The relationship between item exposure and test overlap in computerized adaptive testing....
  • Chen, S.Y., y Lei, P.W. (2005). Controlling ítem exposure and test overlap in computerized adaptive testing. Applied Psychological Measurement,...
  • Dodd, B.G. (1990). The effect of ítem selection procedure and stepsize on computerized adaptive attitude measurement using the rating scale...
  • Lord, F.M. (1977). A broad-range tailored test of verbal ability. Applied Psychological Measurement, 1, 95-100.
  • Muñiz, J. (1997). Introducción a la Teoría de Respuesta a los Ítems. Madrid. Pirámide.
  • Olea, J., Abad, F.J., y Ponsoda, V. (2002). Elaboración de un banco de ítems, predicción de la dificultad y diseño de anclaje. Metodología...
  • Olea, J., Abad, F.J., Ponsoda, V., y Ximénez, M.C. (2004). Un test adaptativo informatizado para evaluar el conocimiento de inglés escrito:...
  • Olea, J., y Ponsoda, V. (2003). Tests adaptativos informatizados. Madrid: UNED.
  • Ponsoda, V,. y Olea, J. (2003). Adaptive and tailored testing (including IRT and non-IRT application). En R. Fernández-Ballesteros (ed.):...
  • Rubio, V., y Santacreu, J. (2004). TRAS-I: Test adaptativo informatizado para la evaluación del razonamiento secuencial y la inducción. Madrid:...
  • Stocking, M.L., y Lewis, C.L. (2000). Methods of controlling the exposure of items in CAT. En W.J. van der Linden y C.A.W. Glas (eds.): Computerized...
  • Sympson, J.B., y Hetter, R.D. (1985, octubre). Controlling ítem exposure rates in computerized adaptive testing. Proceedings of the 27th annual...
  • van der Linden, W.J., y Veldkamp, B.P. (2004). Constraining item exposure in computerized adaptive testing with shadow tests. Journal of Educational...
  • Veerkamp, W.J.J., y Berger, M.P.F. (1997). Some new ítem selection criteria for adaptive testing. Journal of Educational and Behavioral Statistics,...
  • Way, W.D. (1998). Protecting the integrity of computerized testing item pools. Educational Measurement: Issues and Practice, 17, 17-27.