Please enable JavaScript.
Coggle requires JavaScript to display documents.
Evaluación de Competencias - Coggle Diagram
Evaluación de Competencias
Modelos de medida, discriminación y comparabilidad de las puntuaciones
Describe cómo las respuestas observadas están relacionadas con esas
inferencias sobre el desempeño
Modelo estadístico/ de medida
Permite estimar y asignar valores numéricos a la competencia que se quiere medir
Modelo basado en la Teoría de Respuesta del Ítem (TRI)
Se desarrollan inicialmente
para ítems de opción múltiple (con respuestas dicotómicas)
Se han desarrollado modelos de TRI politómicos para ítems de respuesta construida
Unidimensionalidad
Que sea una única habilidad la que se mida en cada tarea de evaluación o test
Multidimensionalidad
Procedimiento en el que se requiere que el
estudiante complete tareas o procesos en los que se demuestre su habilidad para aplicar conocimiento y destrezas o aplicar conocimientos en situaciones simuladas similares a la vida real
Características
La medida de una competencia pasa por la comprobación del grado de ejecución y dominio de esa competencia
Definición del constructo.
Supone el dominio de contenidos propios del constructo evaluado
Competencia = saber hacer
Stigins et al, 1987-1998: definen las evaluaciones de competencias como un sistema que incluye:
Propósito de la evaluación
Conjunto de tareas que emulan el desempeño
Una respuesta del examinado que define su desempeño
Un conjunto sistemático de métodos parea codificar y ordenar los distintos niveles de competencias
Berk en1986, señala que las pruebas deben incluir observación directa de la conducta de interés como estrategia opuesta a las respuestas escritas de lápiz y papel
La medida de las competencias en educación
Performance Assessment = Evaluación del desempeño
Surge por la necesidad de mejora en las medidas del logro académico e implantación de evaluaciones internacionales a gran escala (proyecto PISA de la OCDE)
Hay un cambio de estrategias: se pasa de la selección de una respuesta correcta a la construcción de una respuesta para un amplio conjunto de problemas o situaciones
El evaluado debe produzca algo en un periodo de tiempo y se evalúan los procesos/ productos con relación a criterios establecidos
Características psicométricas de la pruebas de competencia en evaluación
La evaluación es un proceso de razonamiento desde la evidencia que concluye en la emisión de juicio de valor sobre el nivel de desempeño del evaluado
Lo que el estudiante conoce y puede hacer no coincide fielmente con lo que demuestra en una situación de evaluación
Para que los datos/resultados de la evaluación se conviertan en evidencia de dominio se requiere:
Triángulo de la evaluación
Métodos de interpretación para la realización de inferencias
Conjunto de tareas o situaciones que permitan observar el desempeño de forma coherente con el modelo de representación definido
Métodos de interpretación para la realización de inferencias
Según Standards for educational and psycholgical test
(AERA et al., 1999) para la construcción de medidas de competencias:
Definición del constructo, que guía la representación del dominio
Selección de tareas
Criterios para establecer las puntuaciones
Detección de la posible varianza
Propósito de la evaluación
Definición de las inferencias que se hagan con las evaluaciones
Relevancia del constructo a medir
Fiabilidad o consistencia de las mediciones
Consistencia o replicabilidad
de las puntuaciones en la medida de un determinado atributo
Teoría Clásica de los Test
Teoría de la Generalizabilidad
Utiliza el Análisis de los Componentes de la Varianza para estimular simultáneamente los efectos de las distintas fuentes de variabilidad o error (facetas) sobre las puntuaciones
Capacidad de discriminación entre evaluados, ordenándose en función de las diferencias reales entre examinados en el constructo
Estandarización, para que se puedan comparar las puntuaciones ente individuos y en el tiempo
Validez de las medidas
Grado en que la evidencia y la teoría apoyan las
interpretaciones que se van a hacer de las puntuaciones obtenidas en las pruebas de medida
De contenido
Se centra en la relevancia y representatividad
del contenido de la evaluación
Sustantiva
Validez en los procesos de respuesta
Externa
Análisis de las relaciones de las puntuaciones de un test con variable externas
Para probar si las relaciones de las evaluaciones son consistentes con la teoría en la que se basa el constructo medido
Procesos de planificación y diseño de la evaluación de competencias
Deben basarse en trabajos colegiados
Competencia
Todos aquellos aspectos (habilidades, destrezas, actitudes) que debe poseer un profesional para desarrollar su labor eficazmente
Necesarias para
Realizar las tareas que demanda una
profesión
Resolver los problemas que surjan de
forma autónoma, libre y creativa
Colaborar en la organización del trabajo
y con su entorno sociolaboral
No puede desarrollarse únicamente en una disciplina o único nivel:
Graduaciones de dominio (escalación vertical)
Interrelación entre disciplinas/asignaturas (interrelación horizontal)
Estándar
Especificación u operativización de los niveles de calidad que deben mostrarse como dominio de una competencia
Alude al sistema de interpretación de puntuaciones
Sirven como
nexo de unión entre un concepto de calidad acerca de las competencias y la medida o evidencia que se haya observado como resultado del aprendizaje
Jessica Sarahí Flores Grajeda
Evaluación en Psicología Educativa
29/03/22