Un test adaptativo informatizado para evaluar el conocimiento de inglés escrito: diseño y comprobaciones psicométricas

• Autores: Carmen Ximénez Gómez, Julio Olea Díaz, Vicente Ponsoda Gil, Francisco José Abad García
• Localización: Psicothema, ISSN-e 1886-144X, ISSN 0214-9915, Vol. 16, Nº. 3, 2004, págs. 519-525
• Idioma: español
• Enlaces
  • Texto completo (pdf)
• Dialnet Métricas: 18 Citas
• Resumen
  • español

    El presente artículo muestra el trabajo desarrollado para diseñar un test adaptativo informatizado que evalúa el nivel de conocimientos de inglés escrito en castellano-parlantes. Se describe el proceso seguido para la elaboración del banco de ítems, la comprobación de sus propiedades psicométricas, el ajuste obtenido al modelo logístico de tres parámetros y las principales características del algoritmo adaptativo. Se aportan algunos resultados iniciales sobre la validez de los niveles de rasgo estimados. Se comentan los resultados obtenidos en un estudio de simulación, cuyo objetivo es comprobar algunas propiedades de los niveles de inglés estimados (precisión y sesgo). Los primeros estudios de fiabilidad y validez han dado resultados satisfactorios

  • English

    A computerized adaptive test for the assessment of written English: Design and psychometric properties. This article describes the development of a computer adaptive test to assess the written English level of Spanish speakers. A short description is given of the steps followed for the elaboration of the item bank, the evaluation of its psychometric properties, the fit to the 3-parameter logistic model and the main characteristics of the adaptive algorithm. Some initial results on the validity of estimated ability measures are provided. The article includes the results of a simulation study which aims to obtain information on precision and bias of English level estimates. First results on reliability and validity are encouraging

• Referencias bibliográficas
  • Abad, F.J., Olea, J., Ponsoda, V., Ximénez, M.C. y Mazuela, P. Efecto de las omisiones en la calibración de un test adaptativo informatizado....
  • Chang, H.H. y Ying, Z. (1999). a-stratified multistage computerized adaptive testing. Applied Psychological Measurement, 20, 213-229.
  • Dodd, B.G. (1990). The effect of item selection procedures and stepsize on computerized adaptive attitude measurement using the rating scale...
  • Drasgow, F. y Olson-Buchanan, J.B. (1999). Innovations in computerized assessment. Mahwah, NJ: Erlbaum.
  • Fraser, C. (1988). NOHARM: A computer program for fitting both unidimensional and multidimensional normal ogive models of latent trait theory....
  • García Morín, J.R. y Revuelta, J. (2003). Métodos para controlar la sobre- exposición e infrautilización de ítems en tests adaptativos informatizados....
  • Hanson, B.A. y Beguin, A.A. (2002). Obtaining a common scale for IRT item parameters using separate versus concurrent estimation in the common-item...
  • Hornke, L.F. (2000). Item response times in computerized adaptive testing. Psicológica, 21, 175-189.
  • Lord, F.M. (1970). Some test theory for tailored testing. En W.H. Holtzman (Ed.), Computer assisted instruction, testing and guidance. (pp....
  • Lord, F.M. (1980). Applications of Item Response Theory to practical testing problems. Hillsdale, NJ: LEA.
  • McBride, J.R. y Martin, J.T. (1983). Reliability and validity of adaptive ability tests in a military setting. En D.J. Weiss (Ed.), New horizons...
  • McDonald, R.P. (1999). Test theory: a unified treatment. Mahwah, NJ: LEA.
  • Mislevy, R.J. y Bock, R.D. (1990). BILOG 3: Item analysis and test scoring with binary logistic models [computer program]. Chicago: Scientific...
  • Muthen, B. (1984). A general structural equation model with dichotomous ordered categorical and continuos latent variables indicators. Psychometrika,...
  • Olea, J., Abad, F.J. y Ponsoda, V. (2002). Elaboración de un banco de ítems, predicción de la dificultad y diseño de anclaje. Metodología...
  • Olea, J. y Ponsoda, V. (2003). Tests adaptativos informatizados. Madrid: UNED, Colección Aula Abierta.
  • Ponsoda, V., Olea, J., Abad, F.J., Aguado, D., López, F. y Díaz, J. (2003). eCat. Computerized Adaptive Test para la evaluación del nivel...
  • Ramsay, J.O. (1991). Kernel smoothing approaches to nonparametric item characteristic curve estimation. Psychometrika, 56, 611-630.
  • Ramsay, J.O. (2000). TestGraf 98: A program for the graphical analysis of multiple choice test and questionnaire data. Descargable en la siguiente...
  • Revuelta, J. y Ponsoda, V. (1998). A comparison of item exposure control methods in computerized adaptive testing. Journal of Educational...
  • Rojas, A. (2001). Pasado, presente y futuro de los tests adaptativos informatizados: entrevista con Issac Bejar. Psicothema, 13, 685-690.
  • Wainer, H. (2000). Computer Adaptive Tests: Whither and whence. Psicológica, 21, 121-133.
  • Weiss, D.J. (1974). Strategies of adaptive ability measurement. Research report 74-5. Dep. Of Psychology, University of Minnesota.