52
EVALUAR PARA MEJORAR Y RENDIR CUENTAS Eugeni Garcia-Alegre Cuenca, 9 de julio de 2014

UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

  • Upload
    others

  • View
    2

  • Download
    0

Embed Size (px)

Citation preview

Page 1: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

EVALUAR PARA MEJORAR Y RENDIR CUENTAS

Eugeni Garcia-Alegre Cuenca, 9 de julio de 2014

Page 2: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

TALLERES CONTENIDOS

T4

Evaluar para mejorar y rendir

cuentas� Seguimiento para la

toma de decisiones

� Autoevaluación

� Indicadores de

Definición de indicadores

Procedimiento de evaluación

de la aplicación del proyecto.T4 � Indicadores de

actividad

� Indicadores de

resultado

de la aplicación del proyecto.

2

Page 3: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

CICLO DE MEJORA CONTINUA

PENSAR

DECIDIR

“VISIÓN”

PLANIFICARRENDIR EVALUAR

3

PLANIFICAR

plan anual

APLICAR

acción

RENDIR CUENTAS

memoria

EVALUAR

Indicadores

Page 4: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

¿DE OPINAR A SABER?

“Sin datos, sólo eresotra persona con opinión”

Andreas Schleicher

4

Andreas Schleicher

Page 5: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

¿Dónde queremos llegar?

METAS

PLANIFICACIÓN

¿QUÉ NECESITAMOS SABER?

¿Hemos conseguido el objetivo?¿Hemos mejorado?

CUESTIONES

¿Dónde estamos?(diagnosis)

5

¿Cómo podemos conseguirlo?

ESTRATEGIAS

¿Qué necesitamos?

RECURSOS

METAS

¿Hemos hecholo que habíamos acordado?

¿Ha sido útilpara la consecución de los objetivos?

¿Hemos aplicadolo que hemos aprendido?

¿Hemos escogido y utilizadoadecuadamente los recursos?

¿han favorecidoel desarrollo de las estrategias?

Page 6: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

datos

procesamiento

¿PARA QUÉ EVALUAR?

“Una vida sin constante interrogación

no merece la pena de ser vivida” Sócrates

EVALUAR

CONOCIMIENTOaprendizaje

mensaje

aplicarRENDICIÓN DE CUENTAS

MEJORAR

6

CONOCIMIENTO

Page 7: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

1. IDENTIFICAR ÉXITOS Y FRACASOS:Fuentes internas y externas

2. DECIDIR MANTENER O REPENSAR

3. IMPLICAR A LOS AGENTES

¿QUÉ SIGNIFICA APLICAR?

3. IMPLICAR A LOS AGENTESEquipo directivoGrupo promotorEquipos docentesClaustroAlumnadoFamilias…7

Page 8: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

¿QUÉ ES UN INDICADOR?

Es una herramienta de medición de base cuantitativa o cualitativa

8

cuantitativa o cualitativa

Page 9: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

¿POR QUÉ HEMOS DE EVALUAR Y UTILIZAR INDICADORES?

Para…

� comprender mejor y con mayor profundidad

orientar y dar seguridad a la toma de decisiones

9

� orientar y dar seguridad a la toma de decisiones

� gestionar mejor

� aprender

Page 10: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

¿CÓMO CONCRETAR EL ÉXITO EDUCATIVO DE TODO EL ALUMNADO?

INEE (2013) Objetivos educativos Europeos y españoles. 2020

Page 11: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

¡Atención con las interpretaciones!

11

Page 12: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

¿Todos los países han de tener los mismos objetivos cuantitativos? ¿Por qué?

Page 13: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

¿Todas las CCAA han de tener el mismo objetivo cuantitativo? ¿Por qué?

Page 14: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

INDICADORES DE GESTIÓN PÚBLICA

Eficacia: Resultado / objetivo

Equidad: el acceso a los servicios o recursos, o el resultado de los menos favorecidos r / media

¿QUÉ TIPO DE INDICADORES?

menos favorecidos r / media

Eficiencia: Costo unitario obtenido / mínimo coste unitario observado o coste estándar

Economía: recursos utilizados / recursos previstos

Excelencia: resultado obtenido r / especificaciones o expectativas (mide la calidad)

Efectividad o impacto: mide el impacto / el efecto sobre la población afectada, mide la finalidad última

14

Page 15: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

TIPOS DE INDICADORES

� Indicadores de contexto

� Indicadores de recursos

15

� Indicadores de seguimiento de la aplicación del plan

( de proceso)

� Indicadores de cumplimiento de los objetivos

(de producto e impacto)

Page 16: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

¿CÓMO DEBEN SER LOS INDICADORES?

Que midan variables relevantes para el plan estratégico del centro:1. Grado de aplicación de las actividades2. Nivel de cumplimiento de los objetivos …

Que sean:a) pocos y relevantesb) sensibles a los cambios

16

b) sensibles a los cambiosc) de definición clara y comprensible d) fáciles de obtener, entender y utilizar e) consistentes f) comparablesg) que midan el trabajo y los logros de todos los agentes implicados (potenciación de la responsabilidad).h) que no haya incentivos a su manipulacióni) que se pueda disponer de ellos fácilmente a corto plazo

Page 17: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

Cuestionarios

Pruebas

Entrevistas

DISPOSITIVOS O HERRAMIENTAS

PARA OBTENER Y PROCESAR LA INFORMACIÓN

17

Observaciones

Grupos de discusión

Análisis documental

DAFO

Page 18: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

Ejemplo de ficha de indicador

INDICADOR: CEIP/IESTasa de alumnos que adquieren las competencias básicas del área/ámbito de lengua al final del ciclo…

FINALIDADConocer la proporción de alumnos evaluados que adquieren las Cb en el ámbito de lengua

FÓRMULANúmero de alumnos que adquieren las competencias/ Número de alumnos evaluados x 100

POBLACIÓN-MUESTRA

Alumnos evaluados en pruebas estándar en CI/CM/CS

FUENTE DE LOS DATOS

Resultados de las pruebas

FRECUENCIA DE RECOGIDA Anual

18

FRECUENCIA DE ANÁLISIS

Anual

RESPONSABLE DE LA RECOGIDA

A decidir por el centroEjemplo: Jefe de estudios / Coordinador pedagógico/ Orientador

DISTRIBUCIÓNComisión pedagógica, Claustro, Consejo escolar, Inspección educativa, destinatarios de la rendición de cuentas

CRITERIO REFERENCIAL

Intervalo de mejora, en función del punto de partida y de la complejidad del centro.

Page 19: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

USO DE LOS INDICADORES EN LA AUTOEVALUACIÓN

MEDICIÓN DEL LOGRO

19

Page 20: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

Fijación de metas�Las deseadas o acordadas �Realistas�Distribuidas en el tiempo

¿Cómo?

Fijación del punto de partida� ¿El último dato?�¿Una media de los últimos años?

20

�Distribuidas en el tiempo�Lo más concretas posibles�¿Un punto o un intervalo?

Las metas�Facilitan el compromiso�Cuando no se alcanzan habrá que analizar los motivos y emprender medidas correctoras

Page 21: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

Índice de progreso

Nos informa sobre cómo evoluciona un indicador en el tiempo.Por lo tanto, relaciona los resultados de cada momento con el puntotemporal de referencia.

Se calcula relacionando el resultado obtenido con el valor inicial de

21

Se calcula relacionando el resultado obtenido con el valor inicial dereferencia y responde a la fórmula:

(Ir/Ii)*100

Siendo Ir el valor resultado del indicador e Ii el valor inicial del indicador.Expresa la mejora respecto a la situación inicial.

Será superior a 100% si Ir>Ii, es decir, si mejoramos.

Page 22: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

RESULTADOS ACADÉMICOS

RESULTADOS (en %)x

cursoÍndice

Progreso

Media inicial de centro 2003/06 Ii 64 100

Ir 2006/07 68 106

Ir 2007/08 72 113

Ir 2008/09 78 122

Ir 2009/10 75 117

Media 2007/10 75 117

Un ejemplo numérico (Ir/Ii)*100

(68/ 64)*100

(78/ 64)*100

(72+ 78 + 75)/3(75/ 64)*100

(c03/04+ c04/05 + c05/06)/3

22

90

95

100

105

110

115

120

125

130

Media inicial de centro

Ir 2006/07

Ir 2007/08

Ir 2008/09

Ir 2009/10

Page 23: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

Establecer el índice de progreso anualLa media 2002-04 = punto de partida

Page 24: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

Nivel de eficacia

La eficacia se refiere al nivel de cumplimiento de un objetivo.

Se calcula relacionando el resultado obtenido con el objetivo, en términosde valor añadido:

[(Ir-Ii)/(Io-Ii)]*100 =

24

y expresa en qué medida el valor obtenido (Ir-Ii = resultado) seacerca al objetivo o meta (Io-Ii = objetivo=META) respecto a lasituación inicial (Ii)

Será superior a 100% cuando superemos el valor objetivo Io-Ii, esdecir, aquello que nos proponemos obtener.

¿ Y si la situación inicial es igual al objetivo? la aspiración serámantenernos

Page 25: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

Un ejemplo numérico

X Curso Objetivo Resultado Eficacia en %

RESULTADOS (en %) Resultado Objetivo Io-Ii Ir-Ii (Ir-Ii)/(Io-Ii)x100

Media inicial de centro Ii 64

(c03/04+ c04/05 + c05/06)/3

68-64

25

Ir 2006/07 68 68 4 4 100

Ir 2007/08 72 72 8 8 100

Ir 2008/09 78 76 12 14 117

Ir 2009/10 75 Io= 80 16 11 69

68-64

76-64

78-64

(14/12)*100

(11/16)*100

Page 26: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

Establecer el nivel de eficacia Objetivo 2010: 90%, la media 2002-04 = punto de partida

Page 27: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

USO DE LOS INDICADORES EN LA AUTOEVALUACIÓN

MEDICIÓN DE LAS ACTIVIDADES (APLICACIÓN Y LOGROS)

27

Page 28: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

a) Grado de aplicación

Por grado de aplicación debe entenderse el grado de implantación o desarrollo sistemático de una actividad. Como metodología para establecer el grado de aplicación de una actividad, se propone, en primer lugar, situar el grado de aplicación en uno de los cinco grandes niveles y, en una segunda valoración, matizar el % entre las cinco posibilidades de cada grado.

28

0% 25% 50% 75% 100%

NIVEL DE APLICACIÓN

Sin evidencias o anecdóticas

Aplicado en ¼ de

las áreas relevantes

Alguna evidencia

Implantado en la ½ de las áreas relevantes

Evidencias

Implantado en la ¾ de les áreas relevantes

Evidencies claras

Implantado en todas las áreas relevantes

Evidencia total

0 5 10 15 20 25 30 35 40 45 50 55 60 65 70 75 80 85 90 95 100

Page 29: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

b) Calidad de la ejecución

� Se trata de medir cómo se ha hecho la actividad, es decir, cuál ha sido la calidad de su ejecución. Por calidad de ejecución entendemos la percepción del ejecutor/a, su supervisor u otros referentes sobre la valoración del trabajo realizado en la aplicación de una actividad del plan.

� La evaluación de la calidad de ejecución puede tener en cuenta diferentes criterios, por ejemplo:

29

criterios, por ejemplo:

25% 25% 25% 25% 100%

NIVEL DE CALIDAD DE

LA EJECUCIÓN

Plazo de ejecución

Utilización de los recursos previstos

Adecuación metodoógica

Nivel de

cumplimiento de las personas implicadas

5 10 15 20 25 5 10 15 20 25 5 10 15 20 25 5 10 15 20 25

TOTAL CALIDAD DE EJECUCIÓN

Page 30: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

c) Grado de impacto o utilidad

� La idea es valorar el grado de impacto de la actividad sobre el logro del objetivo. Se trata de medir la utilidad de la actividad para conseguir el objetivo.

� En la práctica algunas actividades quedan lejos del objetivo y la valoración del impacto sobre el objetivo requiere de valoraciones en cascada que pueden llegar a cuestionar la validez de la misma valoración. Como criterio general, cuando son necesarias varias actividades encadenadas y ,por lo tanto, es necesario realizar dos o más valoraciones en cascada, se debe

30

tanto, es necesario realizar dos o más valoraciones en cascada, se debe considerar en cada actividad el grado de impacto o utilidad para la actividad siguiente.

Nivel de: 0% 25% 50% 75% 100%

NIVEL DE IMPACTO O UTILIDAD

Sin evidencias o anecdóticas

Alguna evidencia

Evidencias

Evidencies claras

Evidencia total

0 5 10 15 20 25 30 35 40 45 50 55 60 65 70 75 80 85 90 95 100

Page 31: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

ES MUY IMPORTANTE: LA PARTICIPACIÓN EN TODAS LAS FASES

Análisis de problemas

Fijación de objetivos

Definición de estrategias y actividades

Evaluación

31

Evaluación

Análisis de los resultados

Page 32: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

ES MUY IMPORTANTE OBJETIVAR

32

Page 33: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

APRENDIZAJE

ALUMNADODIRECCIÓN

FAMILIAS

CENTRO EDUCATIVOFACILITADORES INTERNOS

ES MUY IMPORTANTE APLICAR EL CONOCIMIENTO DE LA EVALUACIÓN

PARA MEJORAR

ENTORNOENTORNO

APRENDIZAJEEQUIPO DOCENTE

DIRECCIÓN

CLAUSTRO

CONSEJO ESCOLAR

DEPARTAMENTOS, ...

COLABORADORESSISTEMA EDUCATIVO

FACILITADORES EXTERNOS

los colegios profesionales del ámbito educativo, el asociacionismo educativo, las entidades deportivas escolares y los profesionales, empresas y entidades de ocio y de servicios educativos.

33

Page 34: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

-Rendir cuentas significa responsabilidad no en el sentido moral, sino en el social-jurídico de ser responsable de algo ante alguien; implica el sentido de información obligada (no opcional) y de información sobre el cumplimiento o incumplimiento de la

ES MUY IMPORTANTEUTILIZAR LA EVALUACIÓN PARA RENDIR CUENTAS

implica el sentido de información obligada (no opcional) y de información sobre el cumplimiento o incumplimiento de la

responsabilidad (Luis F. Aguilar_doctor en filosofía política).

-Es un concepto en construcción dado que no hay consenso.

34

Page 35: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

-La rendición de cuentas de una institución pública es el conjunto demecanismos que permiten explicar, justificadamente, sus objetivos yresultados respondiendo a las necesidades e intereses que le hanotorgado legitimidad. La rendición de cuentas debe permitirjustificar las actuaciones llevadas a cabo y los impactos o efectos que

ES MUY IMPORTANTEUTILIZAR LA EVALUACIÓN PARA RENDIR CUENTAS

justificar las actuaciones llevadas a cabo y los impactos o efectos queestas han tenido (Guía para el diagnóstico y la promoción de la rendición de cuentas en las políticas y

actuaciones de la Generalitat de Cataluña).

-En el ámbito público, los cargos y funcionarios son responsables desus decisiones y acciones y, por tanto, están obligados a explicar y ajustificarlas, deben someterse a control.

35

Page 36: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

-La rendición de cuentas se puede definir como la obligación de losagentes de informar y motivar, ante sus supervisores, los actos que

ES MUY IMPORTANTEUTILIZAR LA EVALUACIÓN PARA RENDIR CUENTAS

agentes de informar y motivar, ante sus supervisores, los actos quellevan a cabo y los resultados obtenidos derivados del ejercicio deuna responsabilidad, que se concreta mediante un contrato formal oinformal , y que puede implicar estímulos o sanciones.

36

Page 37: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

RAZONES PARA RENDIR CUENTAS (PARA CONTROLAR)

• Calidad democrática

• Necesidad de incrementar el control y legitimar las actuaciones de las instituciones, organismos, ..,

• Asegurar la lealtad al interés público de los agentes y el rendimiento transparente de la gestión pública.

• Es un elemento central de las sociedades democráticas

• Es también un proceso para la mejora del funcionamiento de las organizaciones públicas

• La transparencia reduce la corrupción

• La opacidad dificulta la mejora y evidencia las posibilidades perdidas de añadir valor público.

UTILIDAD

37

Page 38: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

Transparency International (2014) CORRUPTION PERCEPTIONS INDEX 2013. http://www.ey.com/Publication/vwLUAssets/EY-Transparency-International-Corruption-Perceptions-Index-2013/$FILE/EY-Transparency-International-Corruption-Perceptions-Index-2013.pdf

38

Page 39: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

TI(2013) Global corruption Report: Educationhttp://www.transparency.org/whatwedo/publications/doc/gcr/

Page 40: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

TI(2013) Global corruption Report: Educationhttp://www.transparency.org/whatwedo/publications/doc/gcr/

Page 41: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

ADMINISTRACIÓN EDUCATIVA

PLANES A MEDIO PLAZO(Contratos programa o de gestión)

PARA MEJORAR Y RENDIR CUENTAS

Acompañamiento, comisiones de seguimiento_ evaluación

USO DE LA AUTOEVALUACIÓN

ALUMNADO FAMILIAS

PROFESORADO

CENTRO EDUCATIVO

DIRECCIÓN

(Contratos programa o de gestión)

PLAN ANUAL DE CENTRO(acuerdo y compromiso interno de los

profesionales)

CARTA DE COMPROMISO EDUCATIVO

41

APRENDIZAJE

Reuniones de tutoría

Juntas de evaluación

Reuniones departamento

Reuniones con Dirección

Consejo Escolar

Page 42: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

Dirección

QUÉ EVALUAR,QUIÉN RINDE CUENTAS Y A QUIÉN

CREACIÓN DE VALOR PÚBLICO

Obligaciones formales Actividad Resultados

Horario y calendario del centro, oferta de enseñanzas,...Legislación y regulación interna

Liderazgo distribuido orientado al aprendizaje, aplicación del plan,...Acuerdo de corresposabilidad

Aprendizaje del alumnado, nivel de éxito, satisfacción familias,...Acuerdo de corresponsabilidad

Profesorado

Alumnado

interna

Horario, impartición de clases,...

Legislación y regulación interna

Asistencia a clase, ...

Legislación y regulación interna

Estrategias y metodologías aplicadas según el plan, autoavaluación, …Encargo de trabajo profesional de dirección, departamento,..

Participar activamente en las actividades de aprendizaje, estudiar,...Programa curricular y acuerdo de corresponsabilidad

Aprendizaje del alumnado, nivel de éxito, satisfacción alumnado y familias,...Encargo de trabajo profesional de dirección, departamento,...

Competencias, conocimiento, educación, satisfacción, ...

Programa curricular y acuerdo de corresponsabildad

42

Page 43: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

UTILIDAD DE LOS INDICADORES:EL CUADRO DE SEGUIMIENTO Y CONTROL

43

Page 44: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

INFORME DE LOS RESULTADOS DEL CONTRATO PROGRAMA 2002-05, ENTRE LA UPC Y LA GENERALITAT DE CATALUÑA

3.4

Page 45: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

ALGUNAS VENTAJAS

DEL ANÁLISIS CON UN CUADRO DE INDICADORES

�Ayuda y da soporte al proceso de planificación

�Detecta procesos o áreas con dificultades

45

�Posibilita la mejora

�Aporta transparencia

�Genera compromiso con los resultados

Page 46: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

EstrategiaEstrategia Estrategia Estrategia

PE ¿CÓMO PODEMOS LLEGAR?

Con el sistema de información y coordinación del PE

OBJETIVOS

EstrategiaEstrategia Estrategia Estrategia

ActividadesActividades ActividadesActividades ActividadesActividades

Indicadores de actividad

Indicadores de resultado

Aplicación

Calidad

Impacto

46

Page 47: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

¿PARA QUÉ SIRVE EL CUADRO?EVALUAR LA APLICACIÓN DEL PE, TOMAR DECISIONES PARA MEJORAR Y RENDIR CUENTAS

Las respuestas

APLICACIÓ DE LES ESTRATÈGIES I ACTIVITATS PER OBJECTIUS I CURSOS

CURS: 2006/07 CURS: 2007/08 CURS: 2008/09 CURS: 2009/10OBJECTIU

Graud’aplicació

Qualitatd’execució

Graud’impacte

Graud’aplicació

Qualitatd’execució

Graud’impacte

Graud’aplicació

Qualitatd’execució

Graud’impacte

Graud’aplicació

Qualitatd’execució

Graud’impacte

1. Millorar els resultats educatius 80,5 79,0 80,1 92,3 87,5 89,5 83,3 79,8 81,3 85,6 85,6 85,2

2. Millorar la cohesió social 90,2 90,5 90,7 100 96,0 98,1 95,0 95,5 95,1 95,5 95,0 95,1

3. Millorar el servei i la imatge del centre 90,8 70,7 80,5 95,1 85,3 90,7 90,6 80,1 85,0 90,3 80,3 85,7

GRAU DE COMPLIMENT DE L’APLICACIÓ 86,1 79,4 82,9 95 89 92 88,4 83,8 85,8 89,5 86,3 87,8

Codi de colors de la valoració global: (màxim 115%) MOLT SATISFACTORIA > 95%, SATISFACTORIA entre 95 i 75%

MILLORABLE < 75%

Grau de compliment

60

65

7075

8085

90

95

100

105

1. Millorar els result at s

educat ius

2. Mi llorar la cohesió

social

3. Millorar el servei i la

imat ge del cent re

Tot al Grau de

compliment

2007 2008 2009 2010media maxim minim

R E S U L T A T S P E R O B J E C T I U S I C U R S O S

C U R S : 2 0 0 6 / 0 7 CU R S : 2 0 0 7 / 0 8 C U R S : 2 0 0 8 / 0 9 CU R S : 2 0 0 9 /1 0 O b se r v a c io n s%P e s

O B JE C T IU

% C O = % d e co m p l im en t de l’ o b je c t iuÍn d e x (b a s e : 1 00 , s i tu a c ió in ic ia l )

% CO ÍN D E X % C O ÍN D EX % C O ÍN D EX % C O ÍN D E X

4 5 1 . M ill o r a r e ls re su l ta t s e d u c a ti u s 8 8 ,2 6 1 0 2 , 4 9 7 4 , 3 7 1 0 6 ,2 9 8 8 ,1 5 1 1 2 ,1 8 9 5 ,0 1 1 1 6 ,3 3

2 5 2 . M ill o r a r la c o h e s i ó s o c ia l 8 5 ,2 0 1 1 0 , 2 3 8 6 , 5 0 1 1 2 ,4 0 9 0 ,4 5 1 1 5 ,0 5 9 1 ,9 8 1 1 7 ,6 7

3 0 3 . M ill o r a r e l se r ve i i la im a tg e d e l c e n tr e 8 7 ,1 5 1 1 2 , 4 5 8 9 , 0 0 1 1 4 ,5 5 9 2 ,3 4 1 1 6 ,0 0 9 2 ,0 0 1 1 8 ,0 0

1 0 0 % G R A U D E C O M P LIM EN T G L O B A L 8 7 ,1 6 8 1 , 7 9 8 9 ,9 8 9 3 ,3 5

C o d i d e c o lo rs d e la v a lo ra c i ó g lo b a l: (m à x im 1 1 5 % ) M O L T S A T IS F A C T O R IA > 9 5 % , S A T IS F A C T O R IA e n tre 9 5 i 7 5 % M IL L O R A B L E < 7 5 %

Í ndex

80859095

100105110115120125130135140145150

Index inicial 2007 2008 2009 2010

M illorar els resultats educatiusM illo rar la cohesió socialM illo rar el servei i la imatge de centre

¿Dónde estamos?¿A dónde vamos?¿Avanzamos?¿Estamos haciendo lo que acordamos?¿Incide sobre los objetivos?

Dediquemos tiempo a replantear lo que estamos haciendo

APLICACIÓN

RESULTADOSMILLORABLE < 75%

Grau d ' impact e

6065707580859095

100105

1. M illorar elsresultatseducat ius

2. M illorar lacohesió social

3. M illorar elservei i laimatge del

centre

Total Graud'impacte

2007 2008 2009 2010media maxim minim

Qual i tat d ' execució

60657075

80859095

100105

1. M illorar elsresultats

educat ius

2. M illorar lacohesiósocial

3. M illorar elservei i laimatge del

cent re

TotalQualitat

d'execució

2007 2008 2009 2010media maxim minim

Grau d 'ap licació

6065

7075

8085

9095

100105

1. M illorarels resultats

educatius

2. M illo rar lacohesiósocial

3. M illorar elservei i laimatge del

centre

Total Graud'aplicació

2007 2008 2009 2010media maxim minim

ANALIZARClaustro, unidades organizativas...

Equipo directivo

grupo impulsor

decidir

On

En1 En2 En3..

A221 A222

PE

Consejo escolarComunidad educativa

rendir cuentas

Comisión deseguimiento del acuerdo.

RESULTADOS

Page 48: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

MEDIDA DE LA APLICACIÓN DE LAS ESTRATEGIAS Y ACTIVIDADES

A NIVEL DE CENTRO Y POR OBJETIVOS (1er nivel compromiso)

¿Estamos haciendo lo que dijimos?¿Incide sobre nuestros objetivos?

APLICACIO DE LES ESTRATÈGIES I ACTIVITATS DEL PLA

% pes OBJECTIUS

Grau d’aplicació

Qualitat d’execució

Grau d’impacte Grau d’aplicació

Qualitat d’execució

Grau d’impacte

Grau d’aplicació

Qualitat d’execució

Grau d’impacte

50 1. Millorar els resultats educatius 80 79 79,5 85 84,5 84,75 91,5 87,0 89,2

30 2. Millorar la cohesió social 90 90 90 95 95 95 100 96 98

20 5. Millorar el servei i la imatge del centre 90 70 80 90 80 85 95 85 90

C 2006/07 C2007/08 C2008/09

Grau d'aplicació

0

10

20

30

40

50

60

70

80

90

100

110

GRAU D’APLICACIÓ 1. Mil lorar els result at s educat ius 2. Mil lorar la cohesió social 5. Mil lorar el servei i la imatge del

cent re

C2006/07 C2007/08 C2008/09 Qualitat d'execució

0

10

20

30

40

50

60

70

80

90

100

110

QUALITAT D'EXECUCIÓ 1. Mi llorar els result at s educat ius 2. Mil lorar la cohesió social 5. Millorar el servei i la imat ge del

cent re

C2006/07 C2007/08 C2008/09Grau d'impacte

0

10

20

30

40

50

60

70

80

90

100

110

GRAU DE COM PLIM ENT DEL’APLICACIÓ

1. M illorar els resultatseducatius

2. M illorar la cohesió social 5. M illorar el servei i la imatgedel cent re

C2006/07 C2007/08 C2008/09

Valoració global: màxim 115% MOLT SATISFACTORIA > 95% SATISFACTORIA entre 95 i 75% MILLORABLE < 75%

20 5. Millorar el servei i la imatge del centre 90 70 80 90 80 85 95 85 90

100 GRAU DE COMPLIMENT DE L’APLICACIÓ DEL PLA DEL CENTRE

85 81 83 89 87 88 95 89 92

48

Page 49: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

MEDIDA DEL LOGRO DE LOS RESULTADOS

A NIVEL DE CENTRO Y POR OBJETIVOS (1er nivel de compromiso)

¿Avanzamos?

RESULTATS PER OBJECTIUS I CURSOS% CO Índex % CO Índex % CO Índex

1. Millorar els resultats educatiusr 74 107 90 115 95 122

2. Millorar la cohesió social 85 110 90 115 93 117

3. Millorar el servei i la imatge del centre 87 - 92 - 97 -

% GRAU DE COMPLIMENT GLOBAL 79,9 90,4 94,8

Curs 2006/07 Curs 2007/08 Curs 2008/09Observacions

% Compliment dels objectius

010

2030

4050

6070

8090

100110

% GRAU DECOM PLIM ENT GLOBAL

1. M illo rar els resultatseducatius

2. M illorar la cohesió social 3. M illorar el servei i laimatge del centre

Curs 2006/07 Curs 2007/08

Curs 2008/09Índex

70

80

90

100

110

120

130

Inicial Curs 2006/07 Curs 2007/08 Curs 2008/09

1. Millorar els resultats educatius2. Millorar la cohesió social

Valoració global: màxim 115% MOLT SATISFACTORIA > 95% SATISFACTORIA entre 95 i 75% MILLORABLE < 75%

49

Page 50: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

UN CASO DE ÉXITO: RESULTADOS PISA 2009

Características de INS: ne específicas 28%, inmigración 40%

50

NIVEL -1 1 2 3 4 5 6

Catalunya 1 13 24 35 23 4 0

España 1 19 35 33 18 3 0

OCDE 1 18 23 29 21 7 1

INS 9 22 39 17 13

¿Cómo hemos llegado aquí?

• PAC-06 (AGD inicial + planificación estratégica)

objetivos, proyecto compartido y proceso de mejora continua.

Estrategias:

– Dos profesores en el aula

– Proyecto de Competencia Lingüística

– Salidas y actividades orientadas a Cb

– Proyecto matemática (resolución de problemas)

– Proyecto de biblioteca

– Uso de las TIC

Comprensión lectora

Page 51: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

ALGUNOS EJEMPLOS DE INFORME DE ESCUELAS

Grant Elementary. Long Beach. California. USA (AN). Curs 2010-11.http://www.lbschools.net/Schools/SARCs/2010-2011/English/GRANT.pdf

Bellevue-Santa Fe Charter School. San Luis Obispo, CA (AN) Curs 2009-10http://s287034146.onlinehome.us/about/BSFCS_SARC.pdf

A A KINGSTON MIDDLE SCHOOL.NY. (AN/CAS) Curs 2009-10 https://reportcards.nysed.gov/files/2009-10/AOR-2010-512902060004.pdfhttps://reportcards.nysed.gov/files/2009-10/AOR-2010-512902060004.pdfhttps://reportcards.nysed.gov/translation/NYS_AOR_2010_spanish.pdfhttps://reportcards.nysed.gov/files/2009-10/CIR-2010-512902060004.pdfhttps://reportcards.nysed.gov/translation/NYS_CIR_2010_spanish.pdfhttps://reportcards.nysed.gov/schools.php?district=all&start=A&year=2010

Broadway School Profile. Birminghan. UK. 2010. Official school profilehttp://schoolsfinder.direct.gov.uk/_profiles/_pdf/3304227.pdfhttp://www.schoolsnet.com/uk-schools/best-state-secondary-school/top-uk-schools/16180339/0/1/-1.html

Ficha de escuela de Chilehttp://infoescuela.mineduc.cl/FichaEstablecimiento/Busqueda

51

Page 52: UIMP14 Evaluar para mejorar y rendir cuentas REVformacion.intef.es/pluginfile.php/56431/mod_resource...educativa, destinatarios de la rendición de cuentas CRITERIO REFERENCIAL Intervalo

" Una organización innovadora inicia su viaje con preguntas honestas sobrepor qué existe,a quién sirvey cómo sabrá si tiene éxito " (Light, Paul C. 1998)

“LA AMBICIÓN DE SABER MÁS PARA ACTUAR MEJOR”

Francesc Pedró, febrero 2013

Muchas gracias