Sistema de ayuda para la calibración de ítems por el procedimiento basado en el juicio de expertos

By Concepcion Presedo, Anaje Armendariz, Javier López-Cuadrado and Tomás A. Pérez.

Published by Revista Internacional de Tecnologias en el Aprendizaje

Format Price
Article: Print $US10.00
Article: Electronic $US5.00

La evaluación es un aspecto esencial del aprendizaje, siendo los bancos de ítems un recurso común para realizar este tipo de quehaceres. La evaluación profesional utiliza bancos calibrados, siendo la calibración un proceso para la estimación de parámetros de dichos ítems, por ejemplo, la dificultad.
Una opción para la calibración de ítems es el proceso basado en utilizar un panel de expertos para recabar sus valoraciones y determinar a partir de ellas los parámetros. Este artículo describe CALLIE-PRO: un sistema que personaliza y automatiza el proceso de calibración de ítems basado en el juicio de expertos. El sistema guía al usuario recomendando una opción para cada decisión que hay que tomar, adaptándose a alteraciones en la especificación y avisando de decisiones no recomendables o incorrectas. Además, a partir de la especificación del proceso, genera un paquete de contenidos de e-learning que se puede incluir en un sistema de gestión del aprendizaje (LMS) como, por ejemplo, Moodle. El paquete se encarga de recopilar los juicios de expertos a través de la red y finalmente, genera un workflow ejecutable con las actividades que se deben realizar utilizando los datos recopilados, generalmente estudios y cálculos, para estimar la dificultad de los ítems.

Keywords: ítems, calibración, expertos, moodle

Revista Internacional de Tecnologias en la Educacion, Volume 2, Issue 1, 2015, pp.1-15. Article: Print (Spiral Bound). Article: Electronic (PDF File; 1.612MB).

Concepcion Presedo

Profesor, Lenguajes y Sistemas Informáticos, Universidad del País Vasco / Euskal Herriko Unibertsitatea, Bilbao, Bizkaia, Spain

Profesora del departamento Lenguajes y Sistemas informáticos. Actualmente imparte clase en segundo curso del Grado de Ingeniería Informática de Gestión y Sistemas Informáticos y primer curso del Grado de Ingeniería Industrial en la Escuela Universitaria de Ingeniería Técnica Industrial de Bilbao. Su investigación se centra en informática educativa, concretamente en la calibración de ítems para su posterior utilización en test adaptativos informatizados. Ha sido partícipe del desarrollo de un sistema que ayuda a usuarios poco expertos en estadística, informática y psicometría a llevar a cabo calibraciones de bancos de ítems, para lo que se han utilizado métodos de desarrollo dirigidos por modelos y workflows.

Anaje Armendariz

Profesor, Lenguajes y Sistemas Informáticos, Universidad del País Vasco / Euskal Herriko Unibertsitatea, Bilbao, Bizkaia, Spain

Profesora del departamento Lenguajes y Sistemas informáticos. Actualmente imparte clases en segundo y tercer curso del Grado de Ingeniería Informática de Gestión y Sistemas Informáticos en la Escuela Universitaria de Ingeniería Técnica Industrial de Bilbao. Su investigación se centra en informática educativa, concretamente en la calibración de ítems para su posterior utilización en test adaptativos informatizados. Ha sido partícipe del desarrollo de un sistema que ayuda a usuarios poco expertos en estadística, informática y psicometría a llevar a cabo calibraciones de bancos de ítems, para lo que se han utilizado métodos de desarrollo dirigidos por modelos y workflows.

Javier López-Cuadrado

Profesor, Lenguajes y Sistemas Informáticos, Universidad del País Vasco / Euskal Herriko Unibertsitatea, Bilbao, Bizkaia, Spain

Profesor doctor del departamento Lenguajes y Sistemas informáticos. Actualmente imparte clase en primero del Grado de Ingeniería Informática de Gestión y Sistemas Informáticos en la Escuela Universitaria de Ingeniería Técnica Industrial de Bilbao. Su investigación se centra en informática educativa, concretamente en la calibración de ítems para su posterior utilización en test adaptativos informatizados. Ha dirigido el desarrollo de un sistema que ayuda a usuarios poco expertos en estadística, informática y psicometría a llevar a cabo calibraciones de bancos de ítems, para lo que se han utilizado métodos de desarrollo dirigidos por modelos y workflows.

Tomás A. Pérez

Profesor, Lenguajes y Sistemas Informáticos, Universidad del País Vasco / Euskal Herriko Unibertsitatea, Donostia, Gipuzkoa, Spain

Profesor doctor del departamento Lenguajes y Sistemas informáticos. Actualmente imparte clase en segundo y tercero del Grado de Ingeniería Informática de la Facultad de Informática de San Sebastián. Su investigación se centra en informática educativa, concretamente en la calibración de ítems para su posterior utilización en test adaptativos informatizados. Ha dirigido el desarrollo de un sistema que ayuda a usuarios poco expertos en estadística, informática y psicometría a llevar a cabo calibraciones de bancos de ítems, para lo que se han utilizado métodos de desarrollo dirigidos por modelos y workflows.