Validación de una prueba estandarizada de desempeño para la selección de estudiantes de Arquitectura con el Modelo de Rasch de Facetas Múltiples

En una evaluación del desempeño se crea un producto o se desarrolla un proceso, que es evaluado por varios calificadores. El Modelo de Rasch de Facetas Múltiples (MRFM), extensión del modelo de Rasch, cuantifica diversos atributos asociados a la calidad de la medición en tales evaluaciones, incluye...

Full description

Bibliographic Details
Main Authors: Olman Hernández-Ureña, Eiliana Montero-Rojas
Format: Article
Language:English
Published: Universidad Católica de Colombia 2023-01-01
Series:Revista de Arquitectura (Bogotá)
Subjects:
Online Access:https://revistadearquitectura.ucatolica.edu.co/article/view/4040
_version_ 1797943280628924416
author Olman Hernández-Ureña
Eiliana Montero-Rojas
author_facet Olman Hernández-Ureña
Eiliana Montero-Rojas
author_sort Olman Hernández-Ureña
collection DOAJ
description En una evaluación del desempeño se crea un producto o se desarrolla un proceso, que es evaluado por varios calificadores. El Modelo de Rasch de Facetas Múltiples (MRFM), extensión del modelo de Rasch, cuantifica diversos atributos asociados a la calidad de la medición en tales evaluaciones, incluyendo la concordancia entre calificadores, cualidad esencial para la validez. Los datos provienen de una prueba de desempeño aplicada con propósitos de selección en la Escuela de Arquitectura de la Universidad de Costa Rica (UCR). Se analizaron las aplicaciones de la prueba del 2015 al 2018, cada una tenía entre 600 y 800 examinados. Cada producto fue evaluado por tres calificadores, y los equipos de calificadores tenían entre 12 y 15 miembros. Los tres primeros años mostraron alto grado de variabilidad entre las severidades de los calificadores, dispersándose más de 2 logits, en la escala de Rasch. En 2018 se introdujeron modificaciones para mejorar la concordancia entre los calificadores, y los análisis correspondientes mostraron una disminución relevante en la dispersión de las severidades, con un rango de 1.09 logits. El estudio ilustra los beneficios de este modelo para analizar y mejorar la calidad técnica de una evaluación del desempeño de alto impacto.
first_indexed 2024-04-10T20:20:38Z
format Article
id doaj.art-1271f7b78a2c45a1a1030bdb5f7710b4
institution Directory Open Access Journal
issn 1657-0308
2357-626X
language English
last_indexed 2024-04-10T20:20:38Z
publishDate 2023-01-01
publisher Universidad Católica de Colombia
record_format Article
series Revista de Arquitectura (Bogotá)
spelling doaj.art-1271f7b78a2c45a1a1030bdb5f7710b42023-01-25T20:30:16ZengUniversidad Católica de ColombiaRevista de Arquitectura (Bogotá)1657-03082357-626X2023-01-0125110.14718/RevArq.2023.25.4040Validación de una prueba estandarizada de desempeño para la selección de estudiantes de Arquitectura con el Modelo de Rasch de Facetas MúltiplesOlman Hernández-Ureña0Eiliana Montero-Rojas1Universidad de Costa Rica, San José (Costa Rica) Facultad de Ingeniería, Escuela de ArquitecturaUniversidad de Costa Rica, San José (Costa Rica) Instituto de Investigaciones Psicológicas En una evaluación del desempeño se crea un producto o se desarrolla un proceso, que es evaluado por varios calificadores. El Modelo de Rasch de Facetas Múltiples (MRFM), extensión del modelo de Rasch, cuantifica diversos atributos asociados a la calidad de la medición en tales evaluaciones, incluyendo la concordancia entre calificadores, cualidad esencial para la validez. Los datos provienen de una prueba de desempeño aplicada con propósitos de selección en la Escuela de Arquitectura de la Universidad de Costa Rica (UCR). Se analizaron las aplicaciones de la prueba del 2015 al 2018, cada una tenía entre 600 y 800 examinados. Cada producto fue evaluado por tres calificadores, y los equipos de calificadores tenían entre 12 y 15 miembros. Los tres primeros años mostraron alto grado de variabilidad entre las severidades de los calificadores, dispersándose más de 2 logits, en la escala de Rasch. En 2018 se introdujeron modificaciones para mejorar la concordancia entre los calificadores, y los análisis correspondientes mostraron una disminución relevante en la dispersión de las severidades, con un rango de 1.09 logits. El estudio ilustra los beneficios de este modelo para analizar y mejorar la calidad técnica de una evaluación del desempeño de alto impacto. https://revistadearquitectura.ucatolica.edu.co/article/view/4040arquitecturacalibraciónevaluaciónevaluación de desempeñométodo de evaluaciónmodelo de Rasch
spellingShingle Olman Hernández-Ureña
Eiliana Montero-Rojas
Validación de una prueba estandarizada de desempeño para la selección de estudiantes de Arquitectura con el Modelo de Rasch de Facetas Múltiples
Revista de Arquitectura (Bogotá)
arquitectura
calibración
evaluación
evaluación de desempeño
método de evaluación
modelo de Rasch
title Validación de una prueba estandarizada de desempeño para la selección de estudiantes de Arquitectura con el Modelo de Rasch de Facetas Múltiples
title_full Validación de una prueba estandarizada de desempeño para la selección de estudiantes de Arquitectura con el Modelo de Rasch de Facetas Múltiples
title_fullStr Validación de una prueba estandarizada de desempeño para la selección de estudiantes de Arquitectura con el Modelo de Rasch de Facetas Múltiples
title_full_unstemmed Validación de una prueba estandarizada de desempeño para la selección de estudiantes de Arquitectura con el Modelo de Rasch de Facetas Múltiples
title_short Validación de una prueba estandarizada de desempeño para la selección de estudiantes de Arquitectura con el Modelo de Rasch de Facetas Múltiples
title_sort validacion de una prueba estandarizada de desempeno para la seleccion de estudiantes de arquitectura con el modelo de rasch de facetas multiples
topic arquitectura
calibración
evaluación
evaluación de desempeño
método de evaluación
modelo de Rasch
url https://revistadearquitectura.ucatolica.edu.co/article/view/4040
work_keys_str_mv AT olmanhernandezurena validaciondeunapruebaestandarizadadedesempenoparalaselecciondeestudiantesdearquitecturaconelmodeloderaschdefacetasmultiples
AT eilianamonterorojas validaciondeunapruebaestandarizadadedesempenoparalaselecciondeestudiantesdearquitecturaconelmodeloderaschdefacetasmultiples