07/10/2013
1
Desarrollo y Uso de Rbricas para la Evaluacin
y Mejoramiento del Aprendizaje
Dra. Ingrid Kirschning
EvaluacinEn el quehacer acadmico continuamente se realizan evaluaciones y auto-evaluaciones:
Para acreditar programas e instituciones
Para revisiones curriculares, etc.
Se evalan (entre otros):
Estudiantes
Programas acadmicos
Procesos, etc.
Evaluacin de programas acadmicos
La evaluacin es un proceso continuo diseado para monitorear y mejorar el aprendizaje del estudiante.
La facultad debe: Definir explcitamente las competencias a lograr Verificar que el programa est enfocado a facilitar su
adquisicin / desarrollo Desarrollar un plan de evaluacin significativo, manejable
y sostenible. Recolectar evidencias del desempeo del estudiante Evaluar esta evidencia y sacar conclusiones Usar estos resultados para mejorar el proceso enseanza-
aprendizaje (cerrando el ciclo)
07/10/2013
2
Evaluando la Evidencia
Por lo general esta evaluacin involucra juicios subjetivos, relacionados a productos o conductas complejos. (ensayos, prcticas de laboratorio, etc.)
Las rbricas proporcionan los criterios para guiar estos juicios subjetivos, para determinar si se cumplen de manera satisfactoria o no.
Rbricas Las rbricas proporcionan los criterios para evaluar el
trabajo del estudiante.
Pueden ser usadas para evaluar casi cualquier producto o conducta, como son: ensayos, reportes de investigacin, portafolios, obras de arte, recitales, presentaciones orales, actuaciones y actividades por equipos.
Los juicios pueden ser autoevaluaciones o pueden ser realizados por otros: los maestros, otros estudiantes, supervisores de trabajo de campo, y revisores externos.
Tipos de Rbricas
Las rbricas pueden ser usadas para que el estudiantes entienda los que se espera de l, proveer retroalimentacin formativa, calificar a estudiantes, y/o evaluar cursos y programas.
Existen dos tipos o grupos de rbricas: Rbrica holstica - una rbrica global, da una
calificacin holstica para un producto o conducta
Rbrica analtica varias rbricas separadas, calificacin holstica de cada caracterstica especfica de un producto o conducta.
07/10/2013
3
Ejemplo de Rbrica (extracto)Comunicacin escrita: la escritura de los estudiantes muestra clara declaracin de tesis y conclusiones, con eficaz organizacin, voz,
fluidez de oraciones, vocabulario y convenciones de escritura.Nivel 4 Nivel 3 Nivel 2 Nivel 1
Formu-lacin
de tesis
La declaracin de tesis es clara, estrechamente relacionada con el desarrollo del ensayo, y muestra complejidad.
La declaracin de tesis es bastante clara, completa y relacionada con el desarrollo del ensayo.
La declaracin de tesis es vaga, poco clara, confusa o slo tenuemente relacionada con la tarea de escritura.
La declaracin de tesis no aparece o no tiene relacin con el desarrollo del ensayo.
Las rbricas tienen muchas fortalezas
Productos o conductas complejos pueden ser examinados eficientemente.
Desarrollar una rbrica ayuda a definir con precisin las expectativas de la facultad.
Revisores aplican los mismos criterios y estndares. Las rbricas se refieren a criterios, ms que a una
norma: La pregunta es:
cumple el estudiante con el criterio en un nivel X de la rbrica?
y no qu tan bien trabaja un estudiante comparado con otro?.
Ventaja del uso de rbricas
Lo anterior es ms compatible con ambientes de aprendizaje cooperativos y colaborativos que con esquemas de calificacin competitiva.
Es esencial para evaluar programas acadmicos, porque los que se busca es ver cmo los estudiantes estn logrado los estndares institucionales.
Pueden ser usadas por estudiantes para evaluar su propio trabajo, o el de otros; por ejemplo, evaluacin por pares, supervisores de trabajo de campo, o la facultad.
07/10/2013
4
Los cuatro niveles tpicos de una rbrica
1. Malo. El nivel de entendimiento demostrado por el estudiante claramente no rene las expectativas. Las ideas principales pueden haber sido omitidas, imprecisas, o irrelevantes para el trabajo.
2. Necesidad de mejora. El estudiante necesita demostrar un entendimiento profundo para reunir nuestras expectativas, pero eso demuestra algn entendimiento; el estudiante podra no desarrollar ideas completas o podra usar conceptos incorrectamente.
Los cuatro niveles tpicos de una rbrica
3. Rene las expectativas. El estudiante rene nuestras expectativas, desempea un nivel aceptable para graduarse, demuestra un buen entendimiento, etc.
4. Excede las expectativas. El estudiante excede nuestras expectativas, demuestra un nivel sofisticado, identifica matices sutiles, desarrolla ideas frescas, ideas integradas en formas creativas, etc.
Etiquetas usadas por categoraNivel mas bajo:
Nivel Mnimo Nivel Pasable Nivel mximo:
No rene las Expectativas
Necesita Mejorar
Rene las Expectativas
Excede las Expectativas
Abajo de las Expectativas
En desarrollo Aceptable Ejemplar
Novato Aprendiz Competente Experto
Emergente En desarrollo Competente Con visin
Abajo de lo bsico
Bsico Competente Avanzado
07/10/2013
5
Creando una Rbrica
1. Adaptar una rbrica ya existente.
2. Mtodo analtico: se recomienda crear un grupo de trabajo que tiene experiencia con el diseo de competencias y la imparticin de cursos para facilitar/fomentar las mismas.
Pregunta para disear la rbrica:
Por cada competencia: Cules son las caractersticas que distinguen al estudiante que tiene un desempeo aceptable del que no?
Diseando la Rbrica
Generalmente resulta ms fcil empezar en los extremos cuando se determina un criterio en una rbrica y despus definir los niveles intermedios.
Diseando la Rbrica Al comenzar en el nivel ms bajo y el ms alto, uno
se preguntara lo siguiente:
Cules son las caractersticas que hacen un producto inaceptable, el producto equivocado, un producto que resulta cuando el estudiante tiene una capacidad muy dbil en relacin al criterio sobre el cual es evaluado?
Cules son las caractersticas de un producto que podra ser ejemplar, que podra exceder las expectativas, que podra resultar cuando el estudiante es un experto en el criterio que esta siendo evaluado?
07/10/2013
6
Algunas palabras que pueden ser de utilidad:
(in) completo, (in) exacto, razonable, detallado, creativo, original, sutil, sofisticado, sintetizado, integrado, analizado, errores conceptuales menores y/o mayores, flexibilidad, adaptabilidad, complejidad de pensamiento, claridad, bien documentado, bien fundamentado, profesional, (des) organizado, profundo, superficial, (ir) relevante.
Criterios de la rbrica
Suponga que esta diseando una rbrica holstica para evaluar en el estudiante su nivel de dominio de gramtica bsica y puntuacin.
cul de los siguientes ejemplos prefiere?
por qu?
No rene las Expectativas
Necesita Mejorar
Rene las Expectativas
Excede las Expectativas
10 o ms errores 5-12 errores 2-7 errores 0-1 error1
10 o ms errores 5-9 errores 2-4 errores 0-1 error2
Menos que el 90% de los estud.
Entre 10% y 50%
Entre 51% y 90%
Entre el 10% mejor
3
Errores frecuentemente interfieren con la legibilidad del documento
Muchos errores, o errores ocasionales que complican la legibilidad
Pocos errores pero no afectan la legibilidad
Prcticamentesin errores
4
07/10/2013
7
No rene las Expectativas
Necesita Mejorar
Rene las Expectativas
Excede las Expectativas
10 o ms errores 5-12 errores 2-7 errores 0-1 error1
10 o ms errores 5-9 errores 2-4 errores 0-1 error2
Menos que el 90% de los estud.
Entre 10% y 50%
Entre 51% y 90%
Entre el 10% mejor
3
Errores frecuentemente interfieren con la legibilidad del documento
Muchos errores, o errores ocasionales que complican la legibilidad
Pocos errores pero no afectan la legibilidad
Prcticamentesin errores
4
No funciona, las categoras son mutuamente excluyentes
No es muy til, a veces 1 error es mas grave que 3 otros
No sirve para evaluar la calidad de lo aprendido, slo para calificar
con respecto a los dems
Es la mejor
!!
Evala diferencias cualitativas
Dos formas comunes de evaluar con rbricas
Dependiendo de las personas involucradas hay 2 formas de las cuales comnmente se evalan las competencias usando rbricas:
1) Evaluar al mismo tiempo que se califica
2) Recolectar las evidencias y evaluar posteriormente en una sesin de grupo
07/10/2013
8
Evaluar vs. Calificar
Rbricas para calificar pueden incluir criterios que no estn relacionados con los objetivos del aprendizaje que estn siendo evaluados. Estos criterios son tiles para calificar, pero son ignorados para la evaluacin.
Calificar requiere ms precisin que la evaluacin.
Calificar resulta en un puntaje o calificacin; las rbricas analticas resultan en mltiples puntajes que son examinados por separado.
Si toda la facultad usa la rbrica para calificar o evaluar, hay que considerar calibrarlos. Esto es importante sobre todo cuando se est haciendo la evaluacin.
Las Rbricas pueden: Agilizar el proceso de calificar Clarificar las expectativas a los estudiantes
especialmente para nuevos estudiantes, explicndoles la rbrica.
Reducir las quejas del estudiante por su calificacin.
Mejorar la confiabilidad y la validez de evaluac
