View
139
Download
0
Category
Preview:
Citation preview
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 1/54
Memoria de grado Master en evaluación de programas y políticas públicas
I. INTRODUCCIÓN
En los últimos años, el tema de la “evaluación” de la cooperación al desarrollo, ha
estado cobrando relevancia en diferentes ambitos de actuación, importantes instituciones
como el Laboratorio de Acción Contra la Pobreza (J-PAL)1, del ámbito académico, o los responsables de la cooperación internacional como el Banco
Mundial (BM), el Banco Interamericano de Desarrollo (BID), dan cuenta sobre la
importancia de la evaluación en la gestión de intervenciones de cooperación.
En España, instituciones como la Agencia Española de Cooperación Internacional
al Desarrollo (AECID), Ayuntamiento de Madrid, y la Generalitat Valenciana (GV) entre
otros, promueven evaluaciones de sus actuaciones para ver hasta que punto los fondos
invertidos se utilizan adecuadamente y dan resultados esperados.
Este es el caso de la GV, que a través de la Organización No Gubernamental (ONG)
“Fundación CODESPA”, financia un proyecto denominado “Promoción rural a través de
la formación técnica de hijos de agricultores en el Perú” que deberá ser evaluado para
ver sus resultados.
Siguiendo la normativa de la GV, el proyecto debe pasar por una evaluación final,
para lo cual inicialmente se requiere contar con un diseño de evaluación. El presente
trabajo pretende cubrir este requerimiento desarrollando una propuesta de diseño para lo
cual se desarrolla el siguiente contenido:
El Capítulo I, presenta una breve introducción al trabajo. En el Capítulo II, se
describe el proyecto para el cual se diseña la propuesta. El Capitulo III, presenta el contexto
metodológico del trabajo de diseño, identificando, el problema, la hipótesis, y
procedimientos metodológicos. El Capitulo IV, describe el contexto teórico conceptual que
sustente la propuesta de diseño. El Capítulo V, esta destinado al contexto concreto de las
organizaciones gestoras en cuanto a la agenda de evaluación. El Capitulo VI, presenta lapropuesta de diseño de evaluación, en la cual de desarrolla las necesidades de información,
indicadores, preguntas de evaluación, modelo de evaluación proponiendo un diseño
muestral por conglomerados estratificado. El Capítulo VII presenta las técnicas de
recolección de datos. Finalmente en el Capitulo VIII, se presenta las conclusiones y
recomendaciones del proyecto de grado.
1 Laboratorio de Acción contra la Pobreza Abdul Latif Jameel (J-PAL), del Massachusetts Institute of Technology (MIT).
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 2/54
Memoria de grado Master en evaluación de programas y políticas públicas
1
CAPÍTULO II.DESCRIPCIÓN DEL PROYECTO
El propósito de este capítulo, es presentar el origen, ubicación actual, y la
pertinencia del proyecto con los planes y actuaciones similares, para enmarcar la propuesta
de diseño de evaluación.
2.1 Origen del proyecto
El proyecto actual “Promoción Rural a través de la formación técnica de hijos de
agricultores” 2007-2008, financiado por la Generalitat Valenciana (GV), es una ampliación
un proyecto anterior del mismo nombre, financiado por la Agencia Española de
Cooperación Internacional y Desarrollo (AECID) 2001-2005, en el que se estableció el
Sistema de Educación en Alternancia implementado en zonas rurales mas deprimidas del
Perú, con el objetivo de mejorar la inserción socioeconómica en el medio rural de jóvenes
de escasos recursos.
Esta propuesta inicial planteaba la generación de una oferta pedagógica que afincase
jóvenes valiosos en el medio rural, implementando un Centro Rural de Formación en
Alternancia (CRFA) por año, y cuatro a lo largo de la ejecución del proyecto. En el año
2002 se pusieron en marcha tres CRFAs, para el año 2003 otros cuatro, y para el 2004 yaestaba en marcha la gestión de inicio de otros ocho nuevos CRFAs.
El proyecto finalizó en diciembre del año 2005 con los siguientes resultados:
- Generación de una oferta educativa que responda a las necesidades de desarrollo
del medio rural
- Firma del Convenio de Cooperación con el Ministerio de Educación para la
implementación de dos redes de CRFAs
- 20 Asociaciones Promotoras creadas y formadas.
- 20 CRFAs creados en zonas rurales de 8 regiones del país que atienden desde elprimero al quinto grado de educación secundaria.
- 873 alumnos matriculados
- Índice de retención por grado de 93%
- 24 monitores (profesores) formados en la Pedagogía de la Alternancia
- 86 monitores en proceso de formación.
- Creación de la Unión Nacional de CRFAs
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 3/54
Memoria de grado Master en evaluación de programas y políticas públicas
2
Por la creciente demanda de las comunidades, en el momento de elaborar la
Propuesta técnica para el Ministerio de Educación se percibió la necesidad de plantearse
metas más ambiciosas, dado que el objetivo era no solamente implementar unos cuantos
CRFAs, sino crear un espacio para los mismos en el ordenamiento jurídico educativo del
país; lograr un mayor impacto para el debido reconocimiento de la nueva Propuesta
Educativa se mostraba, en consecuencia, indispensable para lograr un apoyo más decidido
del Estado.
La meta inicial, obedecía al temor de no encontrar el apoyo financiero del Estado,
para el pago del profesorado, se esperaba que el eficiente funcionamiento de los primeros
CRFA atraería la atención del Estado y luego el financiamiento más decidido del mismo.
2.2 Ubicación geográfica del proyecto.
El proyecto actual, inicia el 1 de enero del 2007 y finaliza el 28 de febrero del 2009,
pretende contribuir al fortalecimiento y promoción de los Centros Rurales de Formación en
Alternancia (CRFA), gestionado desde su inicio por la Asociación Civil “PRORURAL”.
Su ejecución es en zonas rurales de los departamentos de: Lima, Cajamarca, San
Martín, Puno, Piura, La Libertad, Lambayeque, Huanuco, Cusco, Apurimac, Arequipa,
Ayacucho, Junín, Loreto de Perú.
El mapa 1, muestra que los CRFAs se encuentran dispersos en todo el ámbito
territorial de Perú. Ha diciembre del año 2008, se encontraban funcionando 41 CRFAs, 34de ellas gestionados por PRORURAL, 4 por la institución ADEAS Qullana, y otros 4 por el
Ministerio de Educación (MINEDU), el anexo 1, muestra el detalle de los CRFAs.
2.3 Pertinencia del proyecto con planes y actuaciones superiores.
El proyecto actual, se enmarca dentro las necesidades detectadas del plan de
fortalecimiento del sistema educativo de Perú, y contemplados en los planes operativos de
las Direcciones Regionales de Educación (DRE).De acuerdo a Limay (2008), a finales de 2002, PRORURAL, establece una alianza
con la institución, ADEAS Qullana, para impulsar esta propuesta educativa. Mientras
PRORURAL trabaja a nivel nacional, ADEAS tiene un territorio geográfico muy definido:
la provincia de Chumbivilcas en la Región del Cusco y la provincia de Cotabambas en la
Región de Apurímac. PRORURAL y ADEAS conforman un único equipo pedagógico
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 4/54
Memoria de grado Master en evaluación de programas y políticas públicas
3
nacional, liderado por PRORURAL. Este equipo pedagógico tiene como tarea la formación
en servicio de manera permanente de los docentes – monitores de los CRFAs y de los
directivos de sus Asociaciones Promotoras.
Gráfico 1: Ubicación geográfica de CRFAs en Perú
Fuente: Estudio de caso-PRORURAL, II Foro Fundación Codespa 2008.
En junio de 2003, PRORURAL, ADEAS Qullana y el Ministerio de Educación
firmaron un Convenio de Cooperación Interinstitucional con objeto de asegurar la validez
oficial de los estudios secundarios desarrollados en los CRFA, la asignación de recursos
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 5/54
Memoria de grado Master en evaluación de programas y políticas públicas
4
económicos para el pago de las plazas docentes y personal auxiliar, y la dotación de
material educativo de los CRFA; es decir el mismo trato que una escuela pública, sin serlo.
Conviene señalar que el profesorado es seleccionado por las respectivas asociaciones
siguiendo las pautas de PRORURAL (o ADEAS Qullana, según el caso).
Cada CRFA ha demandado la formación de una Asociación local (inicialmente
Grupo Promotor) debidamente inscrita en Registros Públicos, las Asociaciones, están
conformadas mayoritariamente por padres de familia, participando en ellas otros actores
sociales comprometidos con la iniciativa, (personas naturales, Municipio, Comunidad
Campesina, Parroquia, etc.).
Cada Asociación es responsable de la orientación y gestión de su CRFA en lo
referente a aspectos económicos, legales, son responsables asimismo de la provisión de las
instalaciones y su equipamiento para lo cual realizan las gestiones necesarias para
proveerlas ante las Comunidades Campesinas, Municipios, Unidades de Gestión Local delMinisterio de Educación, organismos públicos nacionales o regionales, empresas privadas,
etc. PRORURAL orienta, da pistas y, en algún caso, ha conseguido muy limitados recursos
de Cooperación Técnica Internacional, para rehabilitar parte de las instalaciones y apoyar el
equipamiento.
En el 2003, 22 de los 24 profesores fueron pagados por el Estado. En el año 2004 la
mayor parte de los monitores fueron pagados a través de Contratos de Servicios no
Personales a través de la Oficina de Coordinación para el Desarrollo de Educación Rural
(OCDER). Durante los años 2003 y 2004 la OCDER cubrió los honorarios de 94 monitoresde los CRFA de las Redes de PRORURAL y Adeas Qullana. Las Direcciones Regionales
de Educación (DRE) cubrieron algunas plazas: el año 2004 fueron 9 plazas y el 2005 22
plazas.
Transitoriamente, mientras no se obtenían los Contratos de Servicios de parte de la
OCDER o de las DRE, PRORURAL asumió el pago de los honorarios, por periodos de no
más de cuatro meses en el año. Esto se hizo mediante préstamos puntuales y cargados al
proyecto.
En el año 2004 la Red de PRORURAL se incrementó en ocho nuevos CRFA,ubicados en su mayor parte en la zona sur del país, de manera que al cierre de la Estrategia
estuvieron en funcionamiento 20 CRFA.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 6/54
Memoria de grado Master en evaluación de programas y políticas públicas
5
CAPÍTULO III.CONTEXTO METODOLÓGICO Y DE PROCEDIMIENTOS
El propósito de este capítulo, es presentar el marco metodológico del trabajo,identificando el problema, y la hipótesis de la propuesta, para la buena construcción de la
propuesta de diseño.
3.1 Planteamiento del problema.
El proyecto “Promoción rural a través de la formación técnica de hijos de
agricultores en el Perú” cuyo objetivo es mejorar los niveles educativos y técnico-
productivos adaptados al contexto socioeconómico de jóvenes de escasos recursos
pertenecientes a comunidades rurales de Perú, viene a contribuir al fortalecimiento ypromoción de los Centros Rurales de Formación en Alternancia (CRFA) gestionado desde
su inicio por la Asociación Civil PRORURAL.
Los CRFAs en Perú, tiene su origen en el año 1992, cuya característica fundamental
es la utilización de la metodología de la alternancia como herramienta de formación, que es
un sistema pedagógico en el que existe una real y permanente interacción entre el medio y
la escuela, mediante la participación activa y responsable de los diversos agentes sociales y
económicos.
Desde sus inicios, ha jugado un papel importante en la educación de los niños y jóvenes de áreas rurales del Perú, dinamizando el entorno educativo de las familias,
incorporando en las comunidades elementos productivos alternativos a las producciones
tradicionales.
Los CRFAs gestionados por PRORURAL, han tendido apoyo de diferentes
instituciones de cooperación española (Fundación CODESPA, UNEFA, Asociación
solidaria con los niños del Perú), la cooperación Belga (Solidarité Internationale des
Mouvements Familiaux Rurales SIMFR), y la Corporación Andina de Fomento (CAF).
Desde el último trimestre del 2006, PRORURAL ha comenzado a trabajar en
ámbitos de intervención con empresa privadas y locales, tales como empresa minería ARES
(2006), la petrolera SONATRACH (2008), la hidroeléctrica CELEPSA, la empresa
BELCORP El Platanal (desde 2007).
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 7/54
Memoria de grado Master en evaluación de programas y políticas públicas
6
Los CRFAs, a pesar de contar con varios años de funcionamiento, con amplia
experiencia institucional, aún no han contando con una evaluación de su actuación que
muestre los procesos, resultados e impactos en sus beneficiarios directos.
Muchos de los informes a financiadores, fueron realizados bajo una visión de
control para la rendición de cuentas, que solo abarca el análisis de flujos financieros.
El estudio de evaluación pretende focalizar su análisis, en los resultados e impactos
del proyecto con fondos de la GV, en 11 CRFAs ubicados en el norte y oriente de Perú. El
estudio, ampliará su análisis al resto de 23 CRFAs ubicados en el sur y centro de Perú,
debido a la complejidad de aislar resultados de otros financiadores.
La demanda de necesidades informativas, que la evaluación pretenderá dar
respuesta es amplia y compleja, porque en su desarrollo han participado, instituciones
públicas (Ministerio de Educación, Gobiernos locales), privadas (organizamos
financiadores), de representación comunal (autoridades locales), y los propios beneficiarios(alumnos, profesores, dirección nacional). Esta complejidad, hace necesario que el
desarrollo de la evaluación cuente con un diseño que responda a estas necesidades
informativas.
Por lo expuesto la problemática en el trabajo es la siguiente:
El proyecto “Promoción rural a través de la formación técnica de hijos de
agricultores en el Perú” financiado por la GV y ejecutado por PRORURAL,
adolece de un adecuado diseño de evaluación que responda a las necesidades
informativas de los diferentes actores y le permita poner en marcha el proceso deuna evaluación final.
3.2 Hipótesis.
“La elaboración del diseño de evaluación del proyecto, responde a las necesidades
informativas de los diferentes actores de la intervención”.
Variable Independiente. Necesidades informativas de los diferentes actores de la
intervención
Variable Dependiente. Elaboración del diseño de evaluación de proyecto.
Termino Relacionador. Responde.
Es decir, la elaboración del diseño de la evaluación depende de la respuesta de las
necesidades informativas de los actores implicados en el proyecto.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 8/54
Memoria de grado Master en evaluación de programas y políticas públicas
7
3.3 Definición conceptual de variables.
Variable Independiente.
• Necesidades informativas de los diferentes actores de la intervención.
Se entiende por necesidades informativas, al requerimiento de la información que se
le hace a la evaluación por el cliente y/o actores implicados en el proyecto encuestión, es decir, se pretende identificar, en relación al proyecto, ¿qué es lo que se
quiere saber?, ¿qué es lo que se requiere evaluar?.
Se entiende por actores de la intervención, a los protagonistas principales del
proyecto a evaluar (Fundación Codespa, Generalitat Valenciana, PRORURAL,
beneficiarios directos e indirectos).
Variable Dependiente.
• Elaboración del diseño de evaluación del proyecto.
Se entiende por diseño de evaluación, a la primera fase del ciclo de la evaluación2,
recoge los elementos mas relevantes que se deberá considerar para poner en marcha el
proceso evaluativo del proyecto, éstos elementos son: la identificación de la motivación
para evaluar, selección del objeto, identificar actores, definir las preguntas de
evaluación, selección del tipo de evaluación, estimación de presupuestos y plazos.
El resultado de esta primera fase, generalmente se concreta en dos productos
importantes: el Plan de evaluación, y los Términos de referencia.
3.4 Proceso de elaboración de estudio.
En la realización de la presente investigación, se aplicaron diferentes fases de
estudio:
- Preparación del estudio de investigación; en la cual se realizaron las acciones
preparatorias de las siguientes fases de la investigación como ser: la identificación y
contacto de las fuentes de información (Delegado de Fundación Codespa en Perú, técnico
de PRORURAL), la organización inicial de datos y documentación general existente (base
de datos de alumnos, documentos del proyecto).
- Estudio de gabinete; en la cual se ha realizado el análisis de la documentación del
proyecto y otros documentos secundarios para la elaboración del contexto general y
2 En el presente trabajo, el ciclo de la evaluación esta comprendido por tres fases: 1) Diseño de la evaluación, 2)Desarrollo de la evaluación, 3) Comunicación de resultados.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 9/54
Memoria de grado Master en evaluación de programas y políticas públicas
8
específico del estudio y diseño inicial de la propuesta de evaluación, y diseño inicial de
instrumentos de recolección de necesidades informativas.
- Investigación de campo; en la cual se ha realizado las entrevistas a diferentes
informantes claves vía tele conferencia, para identificar procesos clave del proyecto, en esta
fase se brindo mayor esfuerzo en la identificación y recopilación de toda la información
posible para cada uno de los capítulos y temas de estudio.
- Procesamiento y análisis; la cual estuvo orientado a organizar la información
recolectada, verificar su solidez y consistencia, clasificarla y procesarla en cuadros de
salida y resúmenes que permitieron una interpretación y análisis.
- Desarrollo del contenido del estudio; destinado a desarrollar los temas y capítulos
de la investigación de una manera progresiva y consistente.
- El universo para la propuesta de diseño de evaluación estará por todos 34 CRFAs,
180 monitores, 3000 alumnos que están estudiando, 164 jóvenes que concluyen susestudios, y 10 integrantes del equipo nacional de la presente gestión educativa (2009).
- La muestra estará compuesto aproximadamente por 6 CRFAs que incluyen sus
monitores, alumnos e integrantes y los 10 integrantes del equipo nacional.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 10/54
Memoria de grado Master en evaluación de programas y políticas públicas
9
CAPITULO IVCONTEXTO TEORICO CONCEPTUAL.
El propósito de este capítulo, es presentar las bases teóricas y conceptuales en las
que se sustenta la propuesta de diseño de evaluación, analizando las ideas que se encuentrandetrás del modelo de la educación en alternancia en Perú, se presenta además, las
experiencias de evaluaciones realizadas en otros países como Colombia y Portugal.
4.1 Contexto teórico.
La formación en alternancia es una alternativa en el campo de la capacitación para
el empleo, no es simplemente una novedad pedagógica ya que los países en desarrollo
cuentan con una amplia acumulación de décadas de tales experiencias. Dentro de la
formación en alternancia se encuentra un conjunto de programas muy diversificados que
tienen como eje la articulación entre la teoría y la práctica (Abdala, 2004). Aplicado al
contexto educativo de Perú, es la articulación entre de la educación convencional con la
educación técnico-productiva adaptado a la realidad del entorno rural.
En los CRFAs se practica la pedagogía de la alternancia, los alumnos interactúan
permanentemente entre el medio rural y la escuela. A diferencia de los colegios
convencionales, la educación en alternancia implica que los estudiantes alternen sus
residencias cada dos semanas entre el CRFA y sus casas en el campo. En sus hogares los
estudiantes desarrollan las habilidades adquiridas en el CRFA, las tareas que deben realizar
en casa son diseñadas especialmente para lograr la mejora de su ambiente y el bienestar de
sus familias, formando así a jóvenes que sean capaces de emplearse eficientemente en el
negocio familiar, o que generen su propio trabajo, con adecuados índices de productividad
(Cillóniz, 2006).
Por sus características, el CRFA aplica un currículo educativo diversificado, con
contenidos que respondan a la realidad y necesidades del entorno local (productivo,
cultural, eco geográfico, etc.), insertado al mismo tiempo en las demandas de un mundoglobal, en el marco de la normativa educativa oficial del grado y nivel correspondiente.
4.1.1 Diversas formas de alternancia.
La clasificación posible de las distintas formas de alternancia depende en gran
medida de la visión de los distintos autores. Sin embargo, Abdalá (2004) cita a grandes
rasgos una categorización, reconociendo que las características varían con respecto al papel
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 11/54
Memoria de grado Master en evaluación de programas y políticas públicas
10
que cumplen distintos elementos, como la formación, los actores, el entorno
socioeconómico y eco geográfico:
- En una primera categorización nos encontramos con una división clara entre dos
extremos de formación. Cada uno con su propia lógica, sin contemplar el intercambio
entre ambos. Se parte de la hipótesis de que cada uno de los polos puede ofrecer
formación en forma independiente. Se cuestiona a este modelo la limitada
retroalimentación recíproca entre ambos.
- Nos encontramos también con un modelo que se caracteriza por concebir dos momentos
de capacitación que forman parte de un solo proceso: uno se realiza en empresa o lugar
de práctica y el otro en el aula; los dos realizan el aprendizaje de un mismo asunto en un
mismo momento. Se basa en el supuesto de complementariedad. Cada uno con una
lógica específica que no se articulan entre sí. Se intenta funcionar con los dos esquemas
en cada uno de los tiempos de aprendizaje.- Otra categorización es la alternancia articulada de cooperación entre los dos polos de
formación, basándose en una “alternancia verdadera”. Compone un proceso de
capacitación, como el modelo anterior, pero funcionando en una articulación
permanente entre las dos partes. Para lograr el éxito es necesario explorar
pedagógicamente la experiencia de ambas definiendo potencialidades, carencias y
virtudes en cada caso. Es condición el acuerdo en los objetivos propuestos.
- Por ultimo, otra forma de alternancia se caracteriza por la contemplación de la lógica
productiva sobre el propio lugar de la formación, como es el caso de las microempresas,experiencias de simulación, etc.
Este ultimo modelo, es la que mas se aproxima al sistema de alternancia propuesto por
PRORURAL y desarrollado en los CRFAs de Perú, una formación educativa técnico-
productiva de los jóvenes, alternando tiempos de dos semanas en CRFAs y otras dos en los
mismos hogares de los alumnos, posibilitando así la realización de un proyecto de vida.
4.1.2 Ventajas y dificultades en la aplicación de la formación en alternancia.
Labarca (2001), describe a la formación en alternancia como las estrategias yprácticas didácticas que permiten la interacción–retroalimentación de los distintos
elementos del proceso educativo. Estos elementos son muy variados y presentan diversas
interacciones como el que aprende y el objeto de estudio, el saber y el saber hacer, lo que se
sabe y lo que se desea aprender, lo que se aprende y la generación de nuevas necesidades y
conocimientos, lo que se enseña y lo que se aprende, entre otros.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 12/54
Memoria de grado Master en evaluación de programas y políticas públicas
11
La formación en alternancia reconoce una gran ventaja en el aprendizaje grupal, ya
que por medio de éste, se propicia la interacción de alumnos con diferentes conocimientos y
experiencias, junto con la adquisición y construcción de nuevos conocimientos teórico-
prácticos y el fortalecimiento de actitudes de colaboración y respeto. La reflexión grupal, la
discusión colectiva, la problematización compartida y la participación de todos los
miembros en la solución de los problemas, representan aspectos esenciales del proceso
educativo.
La implementación de la formación en alternancia no significa un único camino,
sino que dentro de este proceso existen múltiples maneras, que pueden diferir para cada
individuo, de acuerdo con la situación particular, el ritmo de aprendizaje y el contexto
social en el que se desarrollen. Las estrategias y prácticas didácticas que promueve la
formación en alternancia se van diseñando, ensayando y ajustando durante el proceso
formativo, donde la auto evaluación se convierte en una acción permanente y continua,
permitiendo la retroalimentación y la construcción de saberes contextualizados.
La formación en alternancia implica el desarrollo de capacidades críticas, analíticas
y creativas, así como fomenta actitudes relacionadas con la disposición al cambio, la
responsabilidad, el compromiso, el respeto a la pluralidad de ideas, la constancia, la
disciplina y la superación personal.
Luego de la aplicación de la formación en alternancia en experiencias de campo, se
ha podido observar que ésta permite revalorar el papel del alumno y su rol en un proceso
educativo-productivo. A su vez, permite reconocer la naturaleza del trabajo y laimportancia que ésta tiene en la formación de los alumnos, analizándola en función de su
relación con el desempeño de las actividades productivas y de la evolución o mecanización
del saber hacer.
Este tipo de formación, permite comprender que el proceso no es lineal, sino que
tiene avances y retrocesos necesarios, y que el trabajo evoluciona en la medida en que se
genera y construye con personas que conocen cada una de las partes del proceso productivo
así como en su totalidad. Por último, un punto fundamental de la formación en alternancia
es la posibilidad de que el alumno que se encontraba excluido del sistema educativo, pueda ahora ser escuchado y tenido en cuenta para tomar decisiones en la organización del
trabajo.
Además de las ventajas mencionadas, es posible identificar ciertas dificultades
encontradas a la hora de aplicar la formación en alternancia. Debido a que los programas
formativos se van construyendo en base a las necesidades de la actividad productiva, se
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 13/54
Memoria de grado Master en evaluación de programas y políticas públicas
12
genera desconfianza e insatisfacción por no conocer todos los pasos de cómo se realizará la
capacitación.
4.1.3 Fines y medios de los Centros Rurales de Formación en Alternancia (CRFAs).
Las finalidades más importantes que persigue los CRFAs son dos: el primero tiene
que ver con el desarrollo del medio rural, y el segundo con el desarrollo de las personas en
su medio.
El primero, muy relacionado con el desarrollo local y cuyo objetivo por ejemplo es
reducir las disparidades sociales y económicas aplicado en un territorio uniforme, otros
autores entienden como desarrollo a un proceso endógeno registrado en pequeñas unidades
territoriales y agrupaciones humanas capaz de promover el dinamismo económico y la
mejoría de la calidad de vida de la población.
El segundo esta relacionado con la formación-educación de la persona, laformación personalizada e integral del joven, cuyo elemento fundamental será generar en
ellos su propio proyecto de vida.
El proyecto de vida de cada alumno, constituye el hilo conductor de su formación.
La formación integral que quieren desarrollar los CEFFA (CRFAs en Perú), tiene necesidad
de encontrar un sentido y un significado, que van a realizarse gracias al proyecto
profesional, sabiendo que, como dijimos anteriormente, todos los elementos que forman
parte del ser humano coexisten en el interior del individuo.
El desarrollo de los Centros de Formación en alternancia, muestra una constanteevolución en respuesta clara a las necesidades cambiantes de los jóvenes y de su medio. Se
ha pasado de una formación corta a otra más larga, de lo agrícola a lo rural, de no tener
reconocimiento a los diplomas oficiales. Pero existe un posible problema: que las grandes
mutaciones en lo social, en lo profesional, en lo económico, pueden esconder algunas veces
actitudes conformistas en el comportamiento o en el desarrollo.
Gracias a todos estos elementos y desarrollando la creatividad propia de cada uno, la
formación en el CEFFA se construye sobre la base del proyecto de vida de cada alumno. El
joven aprenderá lo que tenga un sentido o un significado para él e irá construyendo suproyecto sobre una base profesional, que es la que le permitirá entrar en el mundo de los
adultos (el de la realidad socioeconómica).
Se trata de un proyecto profesional que da sentido a su formación y a su vida, que
debe permitir aportar sus propias soluciones singulares, concretas. Un proyecto donde no se
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 14/54
Memoria de grado Master en evaluación de programas y políticas públicas
13
trata de reproducir o de copiar ideas, sino, de crearlas; donde desarrollará sus capacidades
aportando opciones en su propio medio, para su propio medio, con sus propios medios.
Tal como menciona Limay (2008), los jóvenes deberán buscar soluciones sin
esperar a que lleguen desde las altas esferas de decisión: ni políticas, ni de la administración
pública, ni de bancos. Deberán aprender a contar con ellos, pero no a depender de ellos.
Tendrán que innovar y, aunque parezca una utopía, partir de los recursos familiares,
comunitarios, locales, incluyendo a todos los actores del desarrollo, principalmente a su
familia en su comunidad.
La función del agricultor hoy no se limita a ser la de un productor agrario, sino un
emprendedor local con capacidades múltiples (técnicas, económicas, ecológicas,
comerciales, sociales, financieras, etc.), el proyecto del joven no puede ni debe limitarse a
uno de dichos factores. Podríamos decir que, al final de su periodo en el CEFFA, tiene que
presentar de una manera sistémica, completa, compleja, global, aquello que él haconstruido, es decir, “su obra de arte maestra”, aquello de lo que es capaz, algo visible,
tangible, por lo que será reconocido y apreciado por los demás.
El CEFFA, al poder facilitar los medios de formación e información necesarios y el
acompañamiento preciso por parte de los actores de la formación que el sistema implica, le
permitirá al joven adquirir las competencias necesarias para ejercer su profesión, para
desarrollar su proyecto. No sólo en el “saber hacer”, o la posibilidad de tener, sino
sobretodo en el “saber ser”.
Es importante y necesario tener líderes responsables, capaces de ser verdaderospromotores del bien común, de construir proyectos personales y comunitarios buscando las
sinergias con la realidad regional, nacional, internacional.
Si se trata de evaluar la calidad de la enseñanza, del aprendizaje, lo que sí se podría
afirmar es que mejor que cualquier examen, “test” o prueba, sería útil la valoración del
proyecto profesional de los egresados y de su capacidad de emprender a partir de su
realidad proyectándose hacia el futuro. No se trata de hacer del proyecto una inalcanzable
realidad, un sueño como modelo educativo, sino de la posibilidad de aprender a emprender.
Ese proyecto que es a la vez educativo, porque se realizó con el acompañamiento dela escuela; profesional, porque se basa en una profesión real; de desarrollo local, ya que se
crea partiendo de una realidad concreta, puede ser un generador de sinergias entre personas
e instituciones, así como un elemento de esperanza en un medio rural normalmente cargado
de desánimo, pesimismo, desaliento.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 15/54
Memoria de grado Master en evaluación de programas y políticas públicas
14
4.2 Contexto conceptual.
Para determinar las principales definiciones, en las cuales se sustenta el trabajo, se
ha desmenuzado la frase “Los Centros Rurales de Formación en Alternancia”, en
elementos por las cuales se compone.
4.2.1 Algunas definiciones sobre la formación en alternancia.
a) Formación: Los términos educación, formación, instrucción, enseñanza y aprendizaje,
se confunden entre sí. Todos ellos tienen elementos comunes, pero también pueden ser
distinguidos y diferenciados. De hecho, existen estudios de diferentes autores realizados al
respecto, dado que la formación en Alternancia ha tenido sus orígenes en Francia,
utilizaremos como ejemplo algunas definiciones del Diccionario de la Lengua Francesa3,
actualizado en 2003.
Empleamos el término educación por oposición a los términos enseñanza,aprendizaje o instrucción, para insistir en la idea de superar la simple transmisión de
conocimientos o habilidades motrices.
Por lo cual por Formación se entenderá al conjunto de medidas, procedimientos,
métodos, actividades y acciones que tienen como objetivo permitir la adquisición de
capacidades prácticas, de conocimientos y de actitudes exigidas para ocupar un empleo
dentro de una profesión, de una función o de un grupo de profesiones, dentro de una rama o
sector profesional.
b) La pedagogía de la Alternancia: Partiendo de las ideas desarrolladas por Gimonet
(1998), señaladas en Pere Puig-Calvó (2006), se puede afirmar que la formación por
alternancia no debe reducirse, como frecuentemente se hace a simples relaciones binarias
del tipo: teoría y práctica, escuela y empresa, trabajo profesional y formación escolar,
formación y empleo, conocimientos empíricos y conocimientos teóricos…, según
pongamos el acento en lo institucional, lo cognitivo, lo relacional u otros aprendizajes.
La realidad, como el caso del entorno rural de Perú, es mucho más compleja y, si
quiere verdaderamente comprender de forma profunda la formación en alternancia,
conviene definir los componentes y sus interacciones, jerarquizarlos y organizarlos dentro
de una perspectiva sistémica. De ese modo, y superando el esquema de simple método
pedagógico, podemos pensar en la puesta en marcha de un sistema educativo.
3 “Gran Diccionario Terminológico de la Lengua Francesa”. Oficio de la Lengua Francesa y Semantix. París, 2003.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 16/54
Memoria de grado Master en evaluación de programas y políticas públicas
15
En instituciones como los CRFAs de Perú, la pedagogía de la alternancia permite a
cada joven vivir sucesivamente periodos en el mundo de los adultos, del trabajo y periodos
en el centro de formación. La educación, la formación, está centrada en la vida, en la
realidad cotidiana (familiar, social, profesional, etc), vivida por los jóvenes en contacto con
los adultos (padres, responsables de alternancia).
4.2.2 Algunas definiciones sobre modelos de evaluación.
Realizando una revisión documental sobre modelos o enfoques de evaluación, se ha
encontrado diversos modelos adaptados a cada realidad regional e institucional, sin
embargo, la mayoría de los autores desembocan en los siguientes tipos de modelo:
Cuadro: 1 Tipos de evaluación
Según quienevalúa
Según sufunción
Según el contenido de la evaluación Según la perspectivatemporal
Interna Sumativa De diseño o conceptual Ex –ante
Externa Formativa Del proceso de aplicación y gestión Intermedia
De resultados e impactos Ex – post
Fuente: Osuna y Márquez (2000).
En la práctica, las evaluaciones que se realizan en el ámbito de la cooperación al
desarrollo son de los siguientes tipos:
1. La evaluación ex ante: Comprende la evaluación del diseño
2. La evaluación durante: Comprende la evaluación por procesos y la evaluación de
resultados
3. La evaluación ex post: Comprende la evaluación de impacto y la evaluación de
sostenibilidad.
4. La evaluación integral.
a) La evaluación de diseño: Que valora la forma en la que se gestiona y ejecuta el
proyecto, analizando la bondad del diagnóstico socioeconómico realizada (evaluación de
necesidades), constatar la existencia de objetivos claramente definidos y medibles, su
correspondencia con los problemas y examinar la lógica del modelo de intervención
diseñado, tanto de forma interna al programa o proyecto como en relación con otros
programas o proyectos.
b) La evaluación por proceso: Valora la forma en la que se gestiona y ejecuta el
proyecto, es decir su puesta en marcha, pretende valorar la capacidad de un organismo en
relación con el diseño, ejecución, seguimiento y evaluación del proyecto, valorar el grado
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 17/54
Memoria de grado Master en evaluación de programas y políticas públicas
16
de implicación de los gestores con dichas tareas, su actitud, formación, organización y la
dotación de recursos para llevarlas a cabo óptimamente.
c) La evaluación de resultados: Trata de conocer hasta que punto el proyecto
ejecutado ha consiguiendo los objetivos (criterio de eficacia) establecidos o esta alcanzando
los parámetros de valor definidos (criterio de eficiencia), y a que coste se consiguen (en
términos de tiempo, recursos humanos, recursos materiales y monetarios).
La evaluación por resultados hace referencia a objetivos inmediatos y directos de los
programas o proyectos, es decir se centra en analizar los efectos sobre los usuarios o
beneficiarios del programa o proyecto.
d) La evaluación de impacto: Trata de identificar los efectos generados por la
intervención, positivos o negativos, esperados o no, directos o indirectos, colaterales e
inducidos; se centra en la determinación de los efectos netos atribuibles a la actuación. En
General, se trata de determinar en que medida los cambios son debidos a la intervenciónpero en un tiempo estimado en lo general a largo plazo o sobre una población general.
e) La evaluación de sostenibilidad: Consiste en la evaluación de la continuidad del
proyecto, es decir trata de medir la aplicabilidad por parte de los beneficiarios las
actuaciones sin la intervención de la ONG.
f) La evaluación integral: Consiste en analizar las distintas etapas, desde que se decide
intervenir hasta que se manifiestan los impactos, comprobando la validez, tanto interna
como externa, es decir de las hipótesis causales de la intervención.
Esta es una de las evaluaciones que se pretenden desarrollar en la actualidad, puesto quese podría señalar que es la más completa pero que al mismo tiempo requiere tiempo y una
mayor inversión económica. Comprende la evaluación de diseño, de procesos y de
resultados4.
g) La evaluación en base a la Teoría del Cambio: La Teoría del Cambio es un
enfoque de evaluación, que permite interpretar el funcionamiento global del proyecto y
aporta información sobre su diseño, procesos y resultados. El planteamiento va más allá de
medir “objetivos versus resultados” ya que centra su análisis en los procesos que han sido
necesarios para la generación de esos resultados, que es el principal vacío de la metodologíadel marco lógico.
Aplicar la Teoría del Cambio a la evaluación, implica realizar un análisis de las
conexiones entre actividades y sus resultados, de manera que sea posible saber cómo y
4 Bustelo, M., y Ligero, J. A. (2006),. “Ficha maletín pedagógico (inédito)”. Centro Superior de Estudios de Gestión,Análisis y Evaluación (CSEGAE), Universidad Complutense de Madrid.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 18/54
Memoria de grado Master en evaluación de programas y políticas públicas
17
porqué el proyecto evaluado avanza progresivamente hacia la consecución de sus objetivos,
siempre, teniendo en cuenta el contexto en el que se desarrolla5.
Es decir, la Teoría del Cambio permite comprender las relaciones causa-efecto y las
circunstancias en las que el proyecto contribuye a conseguir cambios relevantes sobre el
grupo de beneficiarios/as. Consiste básicamente en representar la trayectoria del cambio
esperada y al mismo tiempo identificar los pasos clave para su desarrollo, de manera que
las interrelaciones más decisivas para alcanzar los resultados previstos puedan ser
identificadas, observadas y medidas.
Así, el enfoque de “Teoría del Cambio” hace dos tipos de análisis que permiten
conocer y profundizar en las causas de los diferentes logros y fracasos que obtenga el
proyecto:
- Análisis de las actividades del proyecto: predice los pasos necesarios para la
adecuada ejecución del proyecto, es decir, la secuencia de actividades.- Análisis de los mecanismos de cambio: analiza las respuestas de los beneficiarios a
las actividades del proyecto. El cambio no lo generan las actividades en sí (lo que se
hace), sino la respuesta que dichas actividades provocan.
En cambio, la evaluación tradicional por criterios estudia la consecución de los
resultados que a su vez permiten alcanzar los objetivos del proyecto, sin analizar los
procesos o las causas de éxito o fracaso.
Los posibles problemas que experimentan los proyectos, y que una evaluación
basada en la “Teoría del Cambio” debería ayudar a desvelar, pueden derivarse de:- Un fallo en la teoría, es decir, intervenciones construidas sobre fundamentos
conceptuales erróneos. Ejemplo: Pretender capacitar a una comunidad en el ámbito
rural de la misma manera que se haría en el urbano sin tener en cuenta las
diferencias de contexto.
- Un fallo en la ejecución de las actividades bien porque lo realizado podría ser
insuficiente para producir los efectos deseados o porque se han producido fallos en
la implementación. Ejemplo: El plan de difusión de un programa de formación para
el empleo no genera el efecto esperado en la población por una mala planificación
de los recursos necesarios.
- Un fallo en las relaciones causa-efecto de las hipótesis o riesgos planteados en el
proyecto. Ejemplo: En un curso de capacitación se plantea una hipótesis a nivel de
5 María Ángeles Díez. Gestión y análisis de Políticas Públicas: Institucionalización y desarrollo de laevaluación de políticas públicas. GAPP núms. 30/31 mayo-diciembre 2004. Ministerio de AdministracionesPúblicas.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 19/54
Memoria de grado Master en evaluación de programas y políticas públicas
18
resultado que es “Los alumnos están motivados en participar”, que no es un factor
externo al proyecto que no está bajo nuestro control.
4.2.3 Experiencias de evaluación de impacto de la educación en alternancia.
La Comisión Económica Para America Latina y El Caribe-CEPAL(2002), indica
que la educación a todos los niveles, es una llave fundamental para abrir la puerta del
desarrollo sostenible. Pero educar a la gente con una visión sostenible del desarrollo, no
consiste en añadir la protección del medio ambiente a los contenidos del currículo, sino en
proporcionar a los estudiantes las herramientas para lograr un equilibrio entre los objetivos
económicos, las necesidades sociales y la responsabilidad ecológica. Por eso, ante los
cambios en la concepción de lo rural, la educación, que debe colocar al ser humano en el
centro del desarrollo sostenible, debe contribuir a construir capacidades polivalentes y a
reforzar la promoción social
Aunque la agricultura sigue siendo vital para la articulación del desarrollo en países
como Perú, la diversificación de actividades más allá de lo agrario, pasa rápidamente del
desarrollo agropecuario al desarrollo rural (García-Marirrodriga, 2002a; Gasperini y
Maguire, 2002).
El desarrollo rural engloba todas las actividades fuera de las áreas urbanas y se
enfoca a todo el sistema productivo. En este sentido, es muy significativo que, a finales de
la última década del siglo XX, el empleo rural no agrícola constituye más de un tercio del
empleo en los hogares rurales de América Latina y aporta más del 40 % de su ingreso total
(Berdegué et al., 2000). Se trata, sobre todo, de producción de artesanías, operaciones
simples de agro-procesamiento, ventas y mercadeo, transporte - en bicicleta o arrastrado
por animales y/o personas -, y la adquisición de insumos agrícolas
Para responder a las necesidades de las personas necesitadas de formación
(especialmente de los jóvenes), ha sido necesario contar con metodologías innovadoras que
permitan que la identidad cultural de esos jóvenes no se bloquee ante la perspectiva de la
globalización. La formación en alternancia representa una de las respuestas posibles a la
necesidad de crear vínculos estables y eficaces entre la educación y el mundo del trabajo(OCDE, 1994). En caso de los MFR ( Maisons Familiales Rurales), establecimientos
educativos de Formación Profesional en ámbito rural, éste vínculo es muy claro por el
sistema pedagógico que utilizan: la alternancia integrativa entre medio socio profesional y
escuela.
Las MFR como se ha indicado en capítulos anteriores son “Asociaciones de
familias, profesionales e instituciones, que asumen la responsabilidad del desarrollo y de la
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 20/54
Memoria de grado Master en evaluación de programas y políticas públicas
19
promoción del medio rural a través de acciones educativas integrales y de formación
profesional especialmente con jóvenes, como respuesta a una problemática común. Para
ello se basan en la pedagogía de la alternancia, que implica un aprender haciendo a partir de
la experiencia en el ámbito laboral y en el aula y, por tanto, una continuidad en la
adquisición de saberes construido sobre la discontinuidad de espacios y de tiempos
compartidos entre el medio socioprofesional y la escuela” (García 2002b).
Experiencias de evaluaciones que se realizaron a los MFR, concluyen que los
resultados fueron muy positivos en muchos de los ámbitos de los participantes (personal,
familiar, y comunal).
García (2002b), describe un Modelo de Planificación para la evaluación de los
resultados de la formación por alternancia. Las bases científicas de dicho modelo (que
incorpora diversas metodologías ampliamente contrastadas, así como las lecciones de
aprendidas), son las siguientes:- La metodología de alternancia tal y como se entiende en las MFR6 (González de
Canales et al., 1973; Chartier, 1997).
- La Planificación como Aprendizaje Social (Friedmann, 1993; Cazorla y
Friedmann, 1995; Quintana et al., 1999; De los Ríos, 2002).
- La Metodología de Formulación y Evaluación de Planes, Programas y Proyectos de
Desarrollo Rural (FAO, 1998; Trueba, 1990), así como las Metodologías propias de
los Proyectos de Cooperación al Desarrollo (CAD, 1995; CE, 2000).
En la última fase del citado Modelo de Planificación, se trata de evaluar el impacto
de la formación en alternancia sobre el desarrollo local, tanto en los beneficiarios directos,
como en los indirectos. Los objetivos de la evaluación son:
a) Demostrar la relevancia de la alternancia como catalizadora de acciones de
desarrollo local - comparando con sistemas de formación convencional -, así
como su pertinencia para responder a las necesidades del propio medio.
b) Comprobar la validez de la alternancia utilizada por las MFR, en términos de
impacto: éxito de los efectos en los beneficiarios (desarrollo personal -
inserción socio profesional - y familiar) y en el medio (desarrollo local).
6 ( Maisons Familiales Rurales), establecimientos educativos de Formación Profesional (FP) en ámbito rural, éste vínculoes muy claro por el sistema pedagógico que utilizan: la alternancia integrativa entre medio socio profesional y escuela.Las MFR son “Asociaciones de familias, profesionales e instituciones, que asumen la responsabilidad del desarrollo y dela promoción del medio rural a través de acciones educativas integrales y de formación profesional especialmente con
jóvenes. Los CRFAs de Perú incorporan esta metodología.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 21/54
Memoria de grado Master en evaluación de programas y políticas públicas
20
c) Verificar la sostenibilidad de las MFR para la agricultura y el desarrollo,
entendida como permanencia de beneficiarios en su medio (contribución a la
vertebración y el equilibrio territorial); es decir, no sólo desde el punto de vista
temporal, sino también espacial.
Si bien, ésta forma de evaluación, utiliza algunos criterios de evaluación definidos
por el CAD (relevancia, pertinencia, impacto y sostenibilidad), éstas no son suficientes para
aplicar a algunas particularidades de los CRFAs de Perú, tal como las comparaciones entre
o de pares (CRFAs Oriente-Norte vs. CRFAs Sur), comparaciones intra o en profundidad
(CRFAs en sus distintos niveles 1ro a 5to grado), y comparaciones con próximos (CRFAs
con Escuelas convencionales).
A continuación, se presentan los resultados de la evaluación para los casos de
egresados de formación por alternancia en Colombia y en Portugal.
a) Resultados de la evaluación de impacto: Colombia.
El BID (1997), señala como ejemplo la evaluación de formación en alternancia en
Colombia, un enfoque de la evaluación de tipo cuantitativo utilizando un cuestionario
encuesta por entrevista cerrada (aunque con algunas preguntas abiertas o semiabiertas); su
diseño estaba pensado para permitir una valoración de los indicadores en función de los
criterios de evaluación, un fácil llenado y sencillo tratamiento de los datos.
La encuesta contiene tres bloques de preguntas. El primero, se refiere sobre todo a la
relevancia de la formación y al proyecto profesional. El segundo, discrimina lasposibilidades de actividad actual del egresado en tres posibilidades: con empleo, en
formación y otros. Se trata de valorar si existe y es adecuada la inserción socio profesional.
Para los que tienen empleo, y con objeto de identificar el impacto de una manera amplia, se
pregunta sobre el tipo de empresa y actividad, pero también sobre la satisfacción laboral, la
calidad y la estabilidad del empleo. En las tres situaciones de actividad actual del egresado
contempladas, se investiga sobre la participación en otras actividades o instituciones con
objeto de comprobar contribuciones concretas a procesos de desarrollo local. El tercer
bloque está dirigido a valorar el impacto en las familias y en el medio, así como lacontribución a la sostenibilidad del desarrollo, extraídos con preguntas sobre el bienestar y
el trabajo familiar que dan una idea sobre la calidad de vida, así como sobre proyectos,
participación y responsabilidad en el medio.
Se establecen en las evaluaciones los grupos de control formados por personas
elegibles aleatoriamente que no hayan sido participantes ni beneficiarias de la intervención
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 22/54
Memoria de grado Master en evaluación de programas y políticas públicas
21
que se está evaluando (BID, 1997). Para resultar útil a los propósitos de la evaluación, el
grupo de control será comparable al de beneficiarios y habrá estado expuesto al mismo
contexto.
Como quiera que las pretensiones de la evaluación no estén focalizadas hacia el
aspecto económico, el énfasis en la medida cuantitativa de resultados y la orientación hacia
el control de la gestión, no parece excesivamente importante considerar la eficiencia. El
aspecto más importante parece ser el caso social. Por eso, se han considerado los siguientes
criterios de evaluación:
- Pertinencia en el sentido de adecuación de la pedagogía de la alternancia como
respuesta a las necesidades formativas del medio. Esto dará una idea de la
eficacia entendida como la consecución de logros en un tiempo determinado
(inserción laboral de los egresados en su medio y canalización de procesos de
desarrollo local).- Impacto en el individuo (como agente de cambio capaz no sólo de lograr la
inserción socio profesional, sino también de poner en marcha transformaciones
significativas), en la unidad familiar y en el propio medio (desarrollo local).
- Sostenibilidad para la agricultura y el desarrollo rural (vertebración y equilibrio
territorial como consecuencia de la permanencia en el medio de los egresados
exitosamente establecidos). Se comprobaría así la viabilidad social de las MFR
de Colombia.
(García, 2002b) señala que en cuanto a los indicadores (que se aplican sobre lasvariables) se pueden caracterizar según los criterios de evaluación establecidos. Así, para el
criterio de la pertinencia, se definen 5 indicadores sobre las variables “empleo” y
“desarrollo local”. Para el criterio de impacto, 11 indicadores sobre las variables “empleo”,
“situación familiar” y “desarrollo local”. Para el criterio de sostenibilidad , 6 indicadores
sobre la variable “permanencia en el medio”.
Esta metodología se aplica sobre los 40 primeros egresados de la primera MFR de
Colombia, el Centro de Educación Familiar por Alternancia (CEFA) “Guatanfur”. Los
jóvenes de la muestra (beneficiarios directos de la formación por alternancia impartida en laCEFA “Guatanfur” de Machetá del Departamento de Cundinamarca) acabaron sus cinco
años de estudios de técnica secundaria en 1996 y fueron evaluados en 2002 (más de cinco
años después).
Como “grupo de control”, se tomaron los datos de los egresados de dos colegios del
municipio de Fusagasuga (concretamente de los Colegios “Espinalito Alto” que es público,
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 23/54
Memoria de grado Master en evaluación de programas y políticas públicas
22
gestionado por el Municipio, y “Valsalice” que es privado), situados en el mismo
Departamento donde se encuentra la CEFA, y que utilizan pedagogía tradicional.
Los resultados de La participación (tasa de respuesta del 53 %) fueron
sensiblemente inferiores a la de la CEFA (con una tasa de respuesta del 100 %). La causa
es, buena medida, el cambio de residencia de los egresados. Esto da idea de una poco
adecuada pertinencia de la formación tradicional para el caso del medio rural, cuyos
alumnos rurales emigran a la ciudad en un 87.5 %.
Al aplicar los indicadores definidos al caso de la CEFA “Guatanfur”, se ve cómo la
tasa de permanencia en el medio de los jóvenes formados en alternancia es del 100 % cinco
años después de egresar, lo que garantiza la sostenibilidad del medio rural. Respecto al
grupo de control, los egresados de la CEFA presentan un 233 % más de inserción laboral
que los de colegios con sistema tradicional, lo cual demuestra que la pedagogía de la
alternancia es muy eficaz para la variable “empleo”. La “permanencia en el medio” comoconsecuencia del empleo, demuestra la contribución de la CEFA a la sostenibilidad
entendida como inserción socio profesional de jóvenes que ayudan a la vertebración y el
equilibrio territorial y a la creación de tejido social.
b) Resultados de la evaluación de impacto: Portugal
García (2002b), presenta resultados de la evaluación de impacto para el caso de
Europa, recogiendo los testimonios (en forma de entrevista abierta) de 12 jóvenes
procedentes de MFR de Portugal, Italia, Francia y España. García señala que de esostestimonios, se pueden inferir unas tendencias muy marcadas por la formación en
alternancia que han recibido. Esas tendencias apuntan hacia:
- La permanencia en un medio rural que debe ser competitivo, rentable, sostenible,
endógeno y multifuncional, que tiene que conjugar tradición e innovación, que ha
de asegurar un futuro a los jóvenes.
- La inserción socio profesional diversificada en el ámbito rural y a la creación y el
mantenimiento del empleo propio y ajeno.
- El compromiso social por el desarrollo local del medio rural (mediante actitudesde trabajo cooperativo, asociativo, solidario), y a la defensa del valor de la familia,
el equilibrio territorial y el medio ambiente.
- El talante emprendedor de proyectos para mejorar la calidad de vida y trabajo en
los ámbitos personal, familiar y comunitario.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 24/54
Memoria de grado Master en evaluación de programas y políticas públicas
23
Del lenguaje de los testimonios de los dos jóvenes portugueses egresados cinco años
antes de la MFR Casa Escola Agrícola (CEA) de Lourinhã, se llega a la conclusión de que
estos jóvenes tienen unas características comunes:
- Están enraizados en su tierra (una Europa moderna y transformada con un nuevo
modelo de agricultura y unos paradigmas de desarrollo rural que se encuentran
también en las más recientes iniciativas comunitarias, como Leader Plus) y
orgullosamente vinculados a su medio con lazos profundos (“si los agricultores no
permanecen en buenas condiciones de vida, no hay sostenibilidad en el medio
rural”; “estoy orgulloso de mi elección y de mis proyectos de futuro”).
- Son productores preocupados por la calidad y seguridad alimentarias (“la
demanda de la sociedad para una alimentación sana, se debe traducir a nivel
político”; “modernización de las instalaciones buscando calidad, competitividad y
clientes satisfechos”) y por la comercialización adecuada de lo que producen paralograr vivir con dignidad en su medio (“mejorando las condiciones de trabajo”;
“reconocimiento y aceptación, por el conjunto de la sociedad, del trabajo de
agricultor”). Un medio cuyos recursos medioambientales (“modernización de las
instalaciones para respetar las normas medioambientales”; “mi proyecto de
elaboración de compost orgánico fuera de la finca, prestará un servicio a la
comunidad y al medio ambiente”; “la Asociación CEA se preocupa de los
problemas medioambientales del pueblo”; “cooperativa de uso común de
maquinaria para tratar los residuos orgánicos”) y patrimoniales, respetan y hacenrespetar.
- Partiendo de lo local, llegan a lo global, y que se dan cuenta de la necesaria
armonía que deben conseguir – por el bien de ambos - con los habitantes de
ámbitos urbanos (“compartir el medio rural con los urbanos”).
- Son actores del desarrollo local, de una revitalización del medio rural, que no
responde sólo a sus convicciones profundas, sino a su percepción de la atracción
que, cada vez más, el medio rural ejerce sobre el urbano. Para ser actores de
desarrollo de su medio, muestran una voluntad de compromiso cívico, social ycultural con los otros. Quieren ser protagonistas del cambio, no meros
espectadores de las decisiones que se tomen sobre ellos y su futuro sin respetar las
tradiciones, costumbres y culturas locales (“responsabilidad y participación, son
aspectos fundamentales para dinamizar la vida social desde dentro e impulsar la
recuperación de tradiciones y costumbres”). Desarrollar el medio local consiste en
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 25/54
Memoria de grado Master en evaluación de programas y políticas públicas
24
reencontrar, reconocer y valorar adecuadamente esos recursos del medio y
situarlos en el presente; en conservar la tradición innovando (“una nueva raza”;
“mecanización de algunas actividades”; “introducción de tecnología punta que
permita mejorar la competitividad”); en capacitar la estructura social para dialogar
a escala global.
- Manifiestan una voluntad firme de emprender, de esforzarse, de comprometerse
en un desarrollo rural sostenible (“contribuir al desarrollo con su compromiso de
permanencia y responsabilidad en la vida local: son los agricultores los que
aseguran la permanencia”; “hay que mantener la actividad agrícola para hacer el
medio sostenible”; “pienso que con mi proyecto, estoy contribuyendo a la
sostenibilidad del medio gracias a la creación de empleo”). Pero demandan un
reconocimiento y un apoyo que no siempre reciben.
Para un caso representativo de la realidad latinoamericana (Colombia), se puedeafirmar que la formación por alternancia constituye una alternativa válida para satisfacer las
demandas educativas de la juventud rural, porque es pertinente para favorecer el empleo y
la mejora de la calidad de vida de las familias y comunidades, y promueve la generación de
procesos de desarrollo local con impacto sobre la sostenibilidad del medio rural.
En el caso de Europa, los testimonios de dos egresados del sistema de alternancia en
Portugal, permiten comprobar como dicho sistema ha permitido a los jóvenes descubrir,
conocer y valorar el propio medio; es decir, motivar para el medio rural. La alternancia ha
sido la razón por la que estos jóvenes no han abandonado su medio porque gracias a ellaencontraron su vocación profesional y su compromiso con el desarrollo local, mediante la
búsqueda de las alternativas más viables sin renunciar a la experiencia, a la tradición, a los
valores, pero tampoco a la diversidad y a las acciones emprendedoras.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 26/54
Memoria de grado Master en evaluación de programas y políticas públicas
25
CAPITULO V.CONTEXTO CONCRETO.
El presente capítulo tiene como propósito, presentar el tema de la evaluación en la
agenda de las organizaciones gestoras del proyecto (PRORURAL, Fundación CODESPA),para comprender el entorno institucional del diseño de la evaluación.
5.1 La evaluación de intervenciones en Fundación CODESPA7.
Fundación CODESPA, desde su inicio, en cumplimiento de las normativas de los
financiadores a apostado a la realización de evaluaciones de sus intervenciones,
encendiendo a la evaluación como “una actividad que recoge y analiza sistemáticamente
información para comprender lo que ocurre en una intervención de desarrollo, permitiendo
tomar decisiones de mejora, rendir cuentas y aprender de las intervenciones”, sin embargo,
gran parte de estas evaluaciones han sido realizadas de manera externa, los resultados y
aprendizajes de las evaluaciones en algunos casos no han sido incorporados de manera
efectiva.
En el año 2007 CODESPA valoró la importancia de crear una unidad dentro de la
organización que se encargara de evaluar internamente nuestros proyectos para asegurar ese
aprendizaje y retroalimentación de nuestro trabajo.
Se hizo una solicitud formal a la AECID para llevar a cabo un plan de evaluacióncon los Convenios 2006, previa consulta y visto bueno de la DGPOLDE, órgano encargado
de marcar los lineamientos en materia de Evaluación de acciones financiadas con fondos
del Gobierno Español.
El plan propuesto consistía en llevar a cabo una Evaluación Mixta Continua y no
únicamente externa puntual, como plantea la normativa. Se planteaba un sistema que
basándose en una adecuada formulación (marco lógico bien diseñado y alimentado de
sistemas de información adecuados), integrara la evaluación desde la concepción del
proyecto, y contara con un equipo de evaluadores mixto (externo-interno), capaz de llevar acabo un análisis que proporcionara mayores y más inmediatos resultados.
La presencia de evaluadores externos en momentos clave y la transparencia de los
sistemas de información permitían asegurar la objetividad frente a la baja percepción
inicial de independencia que este sistema de evaluación pudiera tener frente a una
7 Una descripción completa de Fundación CODESA y PRORURAL es presentado en el anexo 4, de este documento.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 27/54
Memoria de grado Master en evaluación de programas y políticas públicas
26
evaluación externa puntual. Adicionalmente, el sistema permitía contar con información de
manera continua a lo largo de toda la vida del proyecto, lo que incrementaba las
posibilidades de mejora y retroalimentación de la intervención, en contra de las
evaluaciones puntuales. A pesar de esto, cuando la propuesta fue presentada a la AECID,
ésta fue rechazada al no ajustarse a lo reflejado en la Normativa de Convenios.
CODESPA decidió seguir adelante con la propuesta buscando la mejor manera de
llevar a cabo el sistema, a pesar de la negativa de AECID, ejecutando un plan reformulado
mediante la creación de la Unidad de Evaluación dentro de Fundación CODESPA, cuyos
objetivos son:
- Maximizar el aprendizaje a partir de la evaluación de los proyectos. Llevar a
cabo una evaluación de mayor valor añadido: más información y más
aprendizaje.
-
Maximizar el aprovechamiento de evaluaciones externas (saber encargar,supervisar y ser capaces de capitalizar el conocimiento que generan)
- Asegurar la generación de información pertinente, rigurosa, continua,
longitudinal y no manipulable como base para el desarrollo de evaluaciones
puntuales externas. Generar mayor conocimiento fiable en Codespa.
- Hacer posible la retroalimentación a tiempo real y la toma de decisiones
(reorientación de intervenciones).
Para llevar a cabo este servicio, es esencial la coordinación con las delegaciones,
para lo que se establecerán mecanismos que permitan a las delegaciones implicarse yparticipar en el proceso.
Este nuevo planteamiento de evaluación supondrá más trabajo para el socio local
y para las delegaciones (asegurar la calidad y coherencia de las intervenciones, diseño de
sistemas de monitoreo que permitan evaluar, etc.), pero será un esfuerzo dirigido a mejorar
la calidad de nuestro trabajo y que revertirá positivamente en la organización.
La Metodología para la evaluación de sus intervenciones que Fundación
CODESA ha apostado por llevar a cabo es en base a la Teoría del Cambio8, además de
seguir el clásico análisis por criterios (pertinencia, eficiencia, eficacia, impacto, etc.), dichasmetodologías fueron explicadas en el capitulo IV correspondiente al contexto teórico.
8 - Carol H. Weiss (1998) Evaluation: Methods for Studying Programs & Policies, 2nd edition. Prentice Hall.Peter Rossi, Howard Freeman, and Mark Lipsey (2004) Evaluation: A Systematic Approach,7th ed. SagePublications.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 28/54
Memoria de grado Master en evaluación de programas y políticas públicas
27
5.2 La evaluación de intervenciones en PRORURAL.
Actualmente existen 34 CRFAs en funcionamiento, PRORURAL cuenta con un
fondo para el mejoramiento de la infraestructura escolar (equipamiento, mobiliario,
expedientes técnicos, etc.) que utiliza dependiendo de las necesidades más urgentes en los
CRFA, y del grado de compromiso y logro de gestiones de las Asociaciones Promotoras delos Padres de Familia, a las que se exigen determinados fondos de contrapartida.
Como institución PRORURAL ha realizado tareas de seguimiento de sus
actividades, con una relativa eficiencia en la gestión de los mismos, por estar enfocadas en
hacer seguimiento a tareas de formación de actores principales, sin embargo, carece de
tareas relacionadas a una evaluación íntegra que valide el modelo pedagógico por el que se
apuesta, así lo demuestra el análisis documental de PRORURAL y la evaluación rápida que
se realizó al proyecto inicial y cuyos resultados mostraron impactos favorables, pero la
rendición de cuentas fue deficiente, esto se explica por las siguientes razones:- No se contaba con personal que se encargara de la parte administrativa
- Se priorizaron las necesidades reales del terreno versus las limitaciones
impuestas por AECI.
- Poca supervisión del responsable del proyecto de CODESPA Perú, para
que pudieran identificarse a tiempo estas incidencias.
- Poca planificación del proyecto.
- Cambios de normativa de AECI.
- Presentación de informes económicos anuales que no permitían corregir
deficiencias anteriores.
PRORURAL, si bien es una institución de amplia aceptación de sus actuaciones en
Perú, aún carece de acciones que vayan dirigidas a atender las necesidades para realizar
una evaluación que valide el modelo de educación en alternancia.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 29/54
Memoria de grado Master en evaluación de programas y políticas públicas
28
CAPÍTULO VI.DISEÑANDO LA EVALUACIÓN DEL PROYECTO
El propósito de este capitulo es presentar el núcleo del presente trabajo, que es eldiseño mismo de la evaluación del proyecto a través del desarrollo de las diferentes etapas y
los pasos de cada uno de estos.
El gráfico 1, presenta el ciclo completo de la evaluación, de la cual solo se
presentará la FASE 1 correspondiente al diseño.
Gráfico 4: Ciclo de la evaluación
Fuente: Manual de gestión de evaluación de la Cooperación Española: Aprender para mejorar, 2007
Identificación de la motivaciónara evaluar
Selección y acotación delobjeto a evaluar
Elección del tipo de evaluación
y estimar el presupuesto
Definición de las preguntas deevaluación
Redactacción de TdR
Selección del equipo evaluador
Establecimiento del Plan detrabajo definitivo
Gestión del desarrollo del Plande trabajo
Comunicación de losresultados de la evaluación
Incorporación de las leccionesde la experiencia
Detectar la utilidad de los actores
Elegir el tipo evaluación
Estimar presupuesto y plazo
Identificar actores
Definir los Objetivos
Seleccionar el objeto
Acotar el objeto
Evaluabilidad
Constituir el Comité de selección
Seleccionar al equipo evaluador
Estudio de Gabinete
Trabajo de campo
Informe final
Analizar soportes y canales de comunicación
Fases Eta as Pasos
F A S E I :
D i s e ñ a n d o l e v a l u a c i ó n
F A S E I I .
D e s a r r o l l a n d o e l
e s t u d i o d e
F A S E I I I :
C o m u n i c a n d o
r e s u l t a d o s e
i n c o r p o r a n d o
Constituir el Comité deSeguimiento
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 30/54
Memoria de grado Master en evaluación de programas y políticas públicas
29
6.1 Identificación de la motivación para la evaluación: ¿Porqué y para qué
evaluar?
Como en la mayoría de las intervenciones de cooperación al desarrollo, la
evaluación se concibe con un componente más del ciclo integrado de planificación,
seguimiento y evaluación de las políticas de cooperación.
Justificación técnica.
La evaluación se constituye en un proceso que comienza en el mismo momento en
que surge la motivación para evaluar una intervención del desarrollo y termina con la
diseminación de los resultados entre los actores implicados y la incorporación de las
recomendaciones y lecciones aprendidas.
El diseño de evaluación, es la primera de tres fases del ciclo de la evaluación
(diseño de la evaluación, desarrollo del estudio, comunicación de resultados), se constituye
en una parte fundamental, ya que en ella se presenta las motivaciones para evaluar, se
selecciona el objeto, se definen las preguntas de evaluación, se elige el tipo de evaluación a
realizar, el presupuesto estimado, y selección del equipo evaluador; todos esto puntos se
presentan como etapas a cumplir; este fase termia con la elaboración de unos términos de
referencia. Sin la primera fase, la evaluación tiende a ser difusa en sus resultados, poco
planificada, y con costos elevados.
Razones formales:
La Organización No Gubernamental “Fundación Codespa”, es beneficiaria del
proyecto referenciado financiado por la Generalitat Valenciana (GV) y por tanto de acuerdo
a lo que estaba previsto en la formulación aprobada, tiene la obligación de llevar a cabo una
evaluación final externa tal y como menciona la Resolución de 13 de febrero de 2006 de la
Consellera de Cooperación y Participación, sobre concesión de subvenciones
administrativas en su epígrafe Base 20.
“Será preceptiva la realización de una evaluación final externa o mixta (interna-
externa) en el plazo de seis meses desde la fecha de la finalización del proyecto para todosaquellos proyectos cuyo coste total sea superior a 250.000 euros. El coste de la evaluación
estará presupuestado en la solicitud de subvención, y en ella se valorará el grado de
cumplimiento del objetivo específico del proyecto y de los resultados alcanzados. Dicha
evaluación será preceptiva para el cierre del proyecto y formará parte de l expediente de
justificación.”
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 31/54
Memoria de grado Master en evaluación de programas y políticas públicas
30
Razones de aprendizaje interno de la organización: Para la Fundación CODESPA es
esencial integrar la evaluación en el ciclo de cada una de sus intervenciones, consideramos
que la evaluación no termina con un informe de resultados o de rendición de cuentas ante el
organismo financiador, sino con la realización de un plan que incorpore las lecciones
aprendidas en la planificación y/o gestión de las intervenciones evaluadas.
Al tratarse de una evaluación final, el estudio deberá partir de un análisis de los
procesos clave y elementos estructurales que han dado lugar a los resultados, y determinar
los posibles impactos en los diferentes actores de la intervención.
Si bien la evaluación por resultados es una herramienta de análisis orientada al
aprendizaje y mejora de las acciones para la consecución de una mejor toma de
decisiones9, se pretende completar esta visión de resultados con una visión de evaluación
por procesos, creando así un estudio de procesos clave, elementos estructurales y resultados
de la intervención.
6.2 Selección y acotación de la evaluación: ¿Qué se va evaluar?
6.2.1 Selección del objeto: ¿Qué va a ser evaluado?
El objeto a evaluar es el proyecto Nº 1026/2006 “Promoción rural a través de la
formación técnica de hijos de agricultores en el Perú” financiado por GV en la
Convocatoria de concesión de subvenciones de 2006, que dio inicio el 1 de enero del 2007
y finaliza en 28 de febrero de 2009. El proyecto pretende contribuir a la promoción del desarrollo rural a través de la
formación técnico-productiva adaptados al contexto socioeconómico de jóvenes de escasos
recursos pertenecientes a las comunidades rurales de Perú
El área geográfica del proyecto son las Zonas rurales de los departamentos de:
Lima, Cajamarca, San Martín, Puno, Piura, La Libertad, Lambayeque, Huanuco, Cusco,
Apurimac, Arequipa, Ayacucho, Junín, Loreto.
El ámbito de actuación será los Centros Rurales de Formación en Alternancia
(CRFA) ubicados en la zona norte y oriente del país, tal y como muestra en el mapa Nº 1 deCRFAs.
Adicionalmente, se deberán evaluar los componentes generales del proyecto
llevados a cabo a nivel nacional así como se visitarán algunos CRFA de la zona sur para
9 Plan Director de la Cooperación Española 2005-2008 en el capítulo VIII “Gestión basada en resultados: planificación,seguimiento, evaluación y aprendizaje”
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 32/54
Memoria de grado Master en evaluación de programas y políticas públicas
31
comparar el crecimiento de los CRFA en Perú versus el apoyo de los diversos agentes
sociales e institucionales.
6.2.2 Identificación de actores implicados en la evaluación.
Las organizaciones implicadas en el ciclo del proyecto a evaluar son: el principal
organismo financiador (GV), la organización beneficiaria de la subvención (Fundación
CODESPA), su contraparte en terreno (PRORURAL), y otros actores implicados
(Ministerio de Educación, Asociaciones Promotoras de los CRFA, Unión Nacional de
CRFA, Gobiernos Municipales y Regionales). Entre los más importantes para el proceso de
evaluación están los siguientes:
Generalitat Valenciana (GV): Es el conjunto de instituciones de autogobierno de la
Comunidad Valenciana en España; la Dirección General de Cooperación al Desarrollo y
Relaciones Externas es una de ellas, cuya función entre otras, es canalizar la cooperación através de concesión de subvenciones administrativas; la Resolución de 13 de febrero de
2006 de la Consellera otorga el financiamiento para el presente proyecto, en al cual en su
epígrafe Base 20 señala la importancia de realizar una evaluación externa.
Fundación CODESPA: Desde 1986 hasta la fecha Fundación CODESPA ha
trabajado en Perú alrededor de 89 proyectos, cuenta con una Delegación con sede central en
la ciudad de Lima, que fue fundada el año 1995 y se encuentra debidamente inscrita en el
Registro Nacional de Entidades e Instituciones de Cooperación Técnica Internacional -
ENIEX ante el Ministerio de Asuntos Exteriores. Asociación Civil PRORURAL: La Asociación Civil PRORURAL es una persona
jurídica de derecho privado, constituida en el Perú el 17 de agosto del año 2000, tiene como
misión promover el desarrollo rural a través de la educación y el desarrollo de las
capacidades humanas del poblador rural, así como de la puesta en marcha de iniciativas y
proyectos (formativos, productivos, organizativos) dirigidos a la mejora de la calidad de
vida del poblador rural, donde el factor educación (formación, capacitación) sea el
dinamizador del proceso.
El anexo 2 detalla los aspectos más importantes de cada actor implicado en laevaluación del proyecto.
6.2.3 Constitución del comité de seguimiento de evaluación.
De acuerdo al análisis de las características del proyecto, los actores implicados, el
comité de seguimiento deberá estar constituido de la siguiente forma:
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 33/54
Memoria de grado Master en evaluación de programas y políticas públicas
32
Composición, El comité de seguimiento estará compuesto por cinco miembros.
• Dos representantes de la gestora de la evaluación (Fundación CODESPA, GV).
• Dos representantes de informantes clave (PRORURAL, Asociación de
monitores de CRFAs).
• Un representante del equipo evaluador (Coordinador de equipo)
Objetivo general.
• Asegurar la coordinación y comunicación entre los actores implicados en la
evaluación (gestores, evaluadores, informantes clave).
Objetivos específicos.
• Facilitar la participación activa de los actores implicados, en el diseño de la
evaluación, en la identificación de necesidades de información, y la definición
de objetivos, para garantizar la calidad, utilidad y validez interna y externa de la
evaluación.• Facilitar al equipo evaluador, el acceso a toda la documentación relevante, a los
agentes e informantes clave que deban participar en entrevistas.
Labor especifica de los representantes.
• La labor de los representantes de la gestora en la evaluación será, entre otros,
asegurar la fluidez de información documental, contacto con los socios locales,
y beneficiarios del Convenio.
• La labor de los representante de los informantes clave será, entre otros, la de
gestionar la participación activa de los beneficiarios directos e indirectos e
instituciones locales.
• La labor del representante del equipo evaluador será la de ejecutar una
evaluación útil y con el rigor científico y aplicable.
La Fundación CODESPA deberá compartir el informe final de la evaluación con la
unidad gestora de la GV, los socios locales, los beneficiarios directos, y grupos de interés.
En el plazo de un mes, desde la recepción por de dicho informe, el Comité de seguimiento
mantendrá una reunión en la que se analizarán las conclusiones y recomendaciones del
informe de evaluación. Los acuerdos que se adopten en esta reunión se recogerán en un acta
que pasará a formar parte del informa final y acuerdo entre las partes, para lo cual será
suscrita por ambas.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 34/54
Memoria de grado Master en evaluación de programas y políticas públicas
33
6.2.4 Definición de objetivos.
Objetivo general.
Realizar una propuesta de diseño de evaluación del proyecto “Promoción rural a través
de la formación técnica de hijos de agricultores en el Perú” para la realización de una a
evaluación final de procesos y resultados.
Objetivos específicos.
• Describir postulados teóricos y conceptúales sobre el diseño de una evaluación.
• Determinar las motivaciones que generan la necesidad de una evaluación final.
• Determinar las preguntas, criterios e indicadores para la evaluación final.
• Diseñar los instrumentos de recolección de información.
6.2.5 Acotando el objeto de la evaluación: ¿Qué dimensiones del objeto van a ser
evaluados?Con el fin de delimitar el ámbito del estudio, se definirán las dimensiones de la
intervención a evaluar:
• Institucional y reglamentaria: La delimitación institucional abarca a GV, Fundación
CODESPA, PRORURAL, las Asociaciones Promotoras de los CRFA, la Unión
Nacional de CRFA, Ministerio de Educación, y Gobiernos Municipales con todas
sus normativas y reglamentaciones. La reglamentación que regirá la evaluación es la
Normativa 2006 de la GV. Asimismo abarca a los componentes del proyecto que
inciden en el fortalecimiento institucional de PRORURAL y la red nacional deCRFA.
• Geográficas: área rural del norte y oriente de Perú, 11 CRFAs en funcionamiento.
• Temáticas o sectoriales: educación en alternancia, iniciativas micro productivas, y
mercados de trabajo en zonas del área de intervención del proyecto.
• Temporales: el análisis de la evaluación deberá estar enfocado temporalmente entre
el 1 de enero de 2007 al 28 de febrero del 2009, sin embargo, el proyecto al ser una
ampliación de un programa amplio, la evaluación deberá procurar tomar en cuenta
series temporales más amplios.
• Población beneficiaria: Los beneficiarios directos son 3,000 jóvenes que están
estudiando en los CRFAs, 164 jóvenes que concluyen sus estudios en el CRFA, 180
monitores y 10 integrantes del equipo nacional. Los beneficiarios indirectos son los
miembros de las familias de estos alumnos así como los miembros y actores
sociales de las comunidades.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 35/54
Memoria de grado Master en evaluación de programas y políticas públicas
34
6.2.6 Análisis de la evaluavilidad: ¿Es posible realizar la evaluación?
Analizando los documentos del proyecto, (formas de distribución de los CRFAs a
nivel nacional, las actividades planificadas y ejecutadas de la intervención), se ha detectado
una complejidad de separar los impactos de los 11 CFRAs financiados por la GV respecto a
los 23 restantes.
La complejidad surge cuando la propuesta inicial del proyecto pasa por un ajuste
técnico y financiero debido a que los fondos concedidos por la GV (180,504.75 euros),
eran inferiores a los inicialmente solicitados (240,673.00 euros), por lo que la actuación ha
tenido que focalizarse10 de la siguiente forma:
Focalización del proyecto.
• La formación de monitores y directivos se centrará en la Zona Norte y Oriente a
través de los talleres zonales. Lo que se había planteado en el inicio del proyectoes abarcar todo el territorio nacional. Con la reducción del presupuesto, hemos
tenido que reducir actividades también.
• La evaluación y monitoreo del avance en los planes de formación llevado a cabo
por los Coordinadores Zonales y el Equipo Central se focalizará también en el
Oriente y Norte, para dar coherencia en la intervención.
• Así mismo, el Fondo de Contingencia presupuestado será destinado para los
monitores del Oriente y Norte.
• Las pasantías nacionales y los cursos de especialización también estén dirigidasa los monitores del Norte y Oriente.
• Actualmente existe en esas dos zonas 11 CRFAs, y se espera fortalecer 8.
• Los talleres nacionales internos, las pasantías internacionales, la asistencia
técnica informática, los talleres de formación permanente y el sistema contable
son a nivel nacional.
• Las gestiones ante el Ministerio de Educación para acreditar a PRORURAL
como institución formadora lo realiza exclusivamente el Equipo Central.
En base a los antecedentes mencionados, se realiza el análisis de evaluabilidad en
bajo a unas características que se presenta en el gráfico 5.
10 El anexo 3 presenta la propuesta inicial y el ajuste detallado por actividades de la focalización.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 36/54
Memoria de grado Master en evaluación de programas y políticas públicas
35
Gráfico 5. Elementos que condicional la evaluavilidad.
Calidad de la planificación:diagnóstico, objetivos y estrategias
Existencia y disponibilidad deinformación
Implicación de actores y contextosociopolítico
Relevancia del diagnóstico:valoración de la definición de losproblemas y su articulación
Definición de los objetivos Coherencia interna de la estrategia
propuesta
Disponibilidad de informaciónde CRFAs
Existencia de un sistema deseguimiento de CRFAs(Sistema incompleto)
Definición de indicadores
Implicación y actitud de los actoresante la evaluación.
Dotación de recursos para laevaluación (humanos, financieros yde tiempo).
Contexto sociopolítico
Fuente: Elaboración propia adaptado del Manual de gestión de evaluaciones de la Cooperación Española (2007)
6.3 Definición de niveles, preguntas de evaluación, indicadores y criterios
utilizados: ¿Qué se desea saber de la intervención?
6.3.1 Niveles de análisis de evaluación.
En la evaluación de objetivos/resultados
El propósito principal será medir los posibles impactos del proyecto, analiza y
valora hasta que punto se han conseguido los objetivos más inmediatos y directos
establecidos (eficacia), y examinar a que coste se alcanzan en términos de tiempo y
recursos humanos, materiales y monetarios (eficiencia).
El recuadro siguiente muestra los objetivos y resultados a los que la evaluación
pretende valorar.
Objetivo General.Los CRFA, bajo el Sistema de Educación en Alternancia, son motor de desarrollo social yeconómico en comunidades rurales del Perú.
Objetivo específico.Mejorar los niveles educativos y técnico-productivos adaptados al contexto socioeconómico de jóvenes de escasos recursos pertenecientes a comunidades rurales.
Resultados esperados:R1. Mejorar la capacidad de Gestión del Equipo Nacional del Sistema de Educación en
Alternancia.R2. Certificar la calidad técnico-pedagógica y de gestión de los Monitores y Directores de los
CRFA.R3. Mejorar la calidad del Servicio Educativo en los CRFA (Honorarios de monitores,
mobiliario, medios y materiales educativos).R4. Desarrollar la capacidad de gestión comunitaria en cada CRFA.
En la evaluación de los procesos clave,
El propósito será identificar y valorar el conjunto de actividades que transforman las
intenciones en resultados observables, o secuencia ordenada de actividades
Análisis de evaluavilidad
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 37/54
Memoria de grado Master en evaluación de programas y políticas públicas
36
interrelacionados entre sí, precisos para dar respuesta o prestar servicios al beneficiario y
crean un valor intrínseco para el mismo.
El recuadro siguiente muestra los Procesos clave inicialmente identificados y que
servirán de base para su discusión en la segunda fase de procesos de evaluación (desarrollo
del estudio de la evaluación).
Procesos clave
PC1. Formación demonitores:
-Formación permanente- Formación inicial
PC2. Formación dedirectores:
- Gestión Pedagógica- Gestión institucional
PC3. Formación dedirectivos:
-Gestión pedagógica.- Gestióninstitucional
PC4.Formaciónequipo nacional
En la evaluación de la estructura.El propósito será analizar y valorar la Estructura del proyecto entendido como la
organización relativamente estable de distintos tipos de recursos para alcanzar los objetivos
del proyecto, en ella se distingue los recursos y la organización.
El recuadro siguiente, muestra los Elementos estructurales que inicialmente se han
determinado y también servirán de base para su discusión con los evaluadores.
Elementos estructurales:
EE1. Convenio vigente con el Ministerio de Educación.EE2. Infraestructura y equipamientoEE3. Convenios vigentes con la Dirección Regional de Educación (DRE).EE4. Convenios de PRORURAL con cada una de las Asociaciones de CRFAEE5. Código modulares otorgado por la DRE o UGEL (Unidad de Gestión Educativa Local)(Registro oficial del Estado Peruano reconociendo la oficialidad del sistema educativo)EE6. Inscripción en Registros Públicos de las Asociaciones
6.3.2 Definición de preguntas de evaluación e indicadores.
En el cuadro de la matriz de evaluación del punto, se presentan las preguntas
específicas de evaluación que atienden las necesidades informativas de los diferentes
actores de la intervención a los que la evaluación debe dar respuesta.
La forma de extracción de preguntas se realizaron en base a entrevistas por tele
conferencia a actores de forma continua (Coordinador del proyecto, beneficiarios, etc). El
análisis de las preguntas se ha realizado tomando en cuenta los criterios recomendados por
el CAD y adoptados por la mayoría de los actores del sistema internacional de ayuda.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 38/54
Memoria de grado Master en evaluación de programas y políticas públicas
37
6.3.3 Definición de criterios de evaluación.
Bustelo (2002), define a los criterios de evaluación como aquellas variables que,
aparte de guiar y determinar el estudio, se utiliza para emitir valoraciones en la recopilación
y el análisis de la información. La definición de estos criterios puede servir para realizar un
proceso de revisión del propio proyecto a evaluar, clarificar y reforzar los objetivos del
mismo repasando a su vez la “teoría de programas”. En definitiva, el establecimiento de los
criterios de evaluación debe contener y reflejar previamente las perspectivas de valoración
que se utilizarán para enjuiciar los resultados intermedios y finales.
Los criterios de evaluación ayudan a reflexionar sobre qué se quiere evaluar y por
qué, motivo por el cual se deberá dedicar especial atención a su construcción, e incluir en
ellos las diferentes perspectivas expresadas por el conjunto de diferentes actores implicados
en el proyecto con anterioridad.Igualmente importantes en evaluación son los criterios de valor, que se vinculan
con la definición de los criterios definiendo la base lógica con la que posteriormente se van
a emitir los juicios sobre el programa o la política evaluada (Bustelo, 2002). En este
sentido, los criterios son conceptos que incluyen un juicio de valor en positivo, deseable,
acerca de la intervención o del programa y su realidad (Ligero 2007).
De igual forma, el Comité de Ayuda al Desarrollo (CAD), señalado en MAE (2007),
define a los criterios de evaluación como aquellos parámetros que permiten enjuiciar los
éxitos y fracasos de una intervención, estos criterios son: la pertinencia, eficacia, eficiencia,impacto, viabilidad, coherencia, apropiación, alineamiento, armonización, participación y
cobertura.
Utilizando como punto inicial los criterios mencionados, se valora y prioriza
aquellos se ajustan mejor a las necesidades informativas que se han detectado para llevar a
cabo la evaluación del presente proyecto
La definición de criterios que se han identificado son:
• Apropiación: Consiste en valorar hasta que punto las instituciones de los países
ejercen un liderazgo efectivo sobre sus políticas y estratégicas de desarrollo, lo queimplica la coordinación de las actuaciones de los donantes.
• Cobertura: Medida que consiste en evaluar hasta qué punto el proyecto ha llegado a
la población necesitada, si existe un sesgo en la cobertura.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 39/54
Memoria de grado Master en evaluación de programas y políticas públicas
38
• Eficacia: medida del alcance del objetivo y los resultados de la actividad en una
población beneficiaria y en un período temporal determinado, sin considerar los
costes en los que se incurre para obtenerlos.
• Eficiencia: medida del logro de los resultados en relación con los recursos que se
consumen; esto es, la búsqueda de una combinación óptima de recursos financieros,
materiales, técnicos y humanos para maximizar los resultados.
• Calidad: Referida al análisis particular de eficacia de los procesos de asistencia
técnica y capacitación a beneficiarios directos y socios locales.
• Impacto: efectos que la intervención planteada tiene sobre la comunidad en general.
Es un concepto mucho más amplio que el de eficacia, ya que: i) no se limita al
estudio del alcance de los efectos previstos; ii) no se circunscribe al análisis de los
efectos deseados; y iii) no se reduce al estudio de dichos efectos sobre la población
beneficiaria.• Sostenibilidad: Medida que consiste en analizar la capacidad que debe tener una
intervención de generar los recursos necesarios para sostenerse eficientemente en el
tiempo, afectando positivamente al mayor número de personas.
6.3.4 Priorizacion de criterio y complementariedad de factores.
Al tratarse de una evaluación final cuyo objetivo principal es evaluar el avance de
los resultados, es importante priorizar el estudio en los criterios de cobertura, eficacia,
eficiencia, calidad e impacto en sus diferentes niveles de análisis.El análisis deberá también tener en cuenta, aspectos socioculturales, enfoque de
género, estudio de factores, económicos financieros.
• Aspectos socioculturales. Revisión de la integración de las intervenciones en la
comunidad local y de su impacto sobre el acceso al uso de recursos de los distintos
grupos socioeconómicos (en cuanto a una mayor justicia distributiva en su
organización económica, mayor igualdad en su organización social y mayor
democracia en su organización política). Análisis de la promoción de la
participación activa de los beneficiarios, sobre todo de los grupos más vulnerables.
• Enfoque de género en el desarrollo. Análisis de la manera en que las mujeres son
consideradas como beneficiarias de los procesos de cambio y progreso social a
través de la adquisición de poder y el fomento de la igualdad (estudio de la división
sexual del trabajo, acceso a los recursos y repartición de los beneficios, así como la
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 40/54
Memoria de grado Master en evaluación de programas y políticas públicas
39
participación de mujeres y hombres en los procesos de toma de decisiones, tanto en
sus comunidades como dentro de los hogares).
• Factores económicos y financieros. Análisis sobre los mecanismos utilizados con el
fin de asegurar la obtención continua de recursos para la operación y el
mantenimiento de las estructuras creadas; es decir, estudio de las contribuciones de
otras fuentes, bien internas (fondos generados por la intervención vía precios y/o
tarifas), bien externas (prestaciones de otras fuentes).
Adicionalmente al estudio de criterios y factores, se pretende conocer la forma en
que los mecanismos de gestión de las intervenciones han afectado a la ejecución de los
objetivos deseados. Específicamente, se pretende analizar la identificación, la formulación,
el seguimiento, la calidad de los indicadores definidos y la utilidad de las fuentes de
verificación.
6.3.5 Elaboración del matriz de evaluación.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 41/54
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 42/54
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 43/54
Memoria de grado Master en eval
42
de CRFAs
22 Cobertura Evaluación Objetivos/Resultados ¿Existe equidad por zonas en la cobertura de CRFAs? Forma de distribución deCRFAs por zonas
n
23 Calidad Evaluación Procesos ¿Son adecuados las visitas de estudio realizadas por alumnos de CRFAs a microempresas?
Nº de quejas de alumnosrespecto a visitas
Nº de quejas de avisitas
24 Calidad Evaluación Procesos ¿Los monitores, han adquirido los conocimientosdefinidos en el programa formativo?
aplicación en aula deconocimientos adquiridos encapacitación
n
25 Calidad Evaluación Resultados ¿Son adecuados los diseños curriculares de CRFAs alcontexto productivo de cada realidad ?
Elaboración y aplicación deideas de proyectorelacionados con laproducción de la zona oalternativos
n
26 Sostenibilidad
Seguimiento Estructura Proporción de alumnos que se titulan anualmente deCRFAs
% de titulación de alumnos [Nº de alumnos g(1 grado) - Nº de 2008 (5 grado)] *
27 Sostenibilidad
Evaluación Estructura ¿Existe un proceso de transferencia de la gestión deCRFAs al Gobierno local u otras organizaciones?¿Como?
Existencia y aplicación de plande transferencia de CRFAs
n
28 Sostenibilidad
Evaluación Estructura ¿Se cuenta con un plan de viabilidad y sostenibilidadde funcionamiento de CRFAs?
Existencia y aplicación de plande sostenibilidad de CRFAs
Nº de acuerdos ficon instituciones públicas
Aspectos metodológicos
Aspectos método Log ¿Ha sido correcta la formulación de la intervenciónsegún el EML?
Aspectos metodológ ¿Ha sido útil el sistema de indicadores predefinidos?
Aspectos metodológ ¿Han sido apropiados los métodos de recopilación yanálisis de los datos?
Aspectos metodológ ¿Han sido útiles las conclusiones de los trabajos deevaluación previa?
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 44/54
Memoria de grado Master en evaluación de programas y políticas públicas
43
6.4 Elección del tipo de evaluación.
Se trata de una evaluación final externa de objetivos/resultados y posibles impactos
de tipo cualitativo y cuantitativo, cuya base tendrá en cuenta el análisis de los procesos
clave identificados en el proyecto.
El tipo de evaluación que mas se ajusta a los requerimiento de la información, es la
evaluación en base criterios, o también denominado evaluación por resultados, sin
embargo, debido a la complejidad de analizar algunos criterios importantes (impactos y
sotenibilidad), el modelo propuesto deberá ser complementado con una evaluación por
procesos, y una aproximación del tipo de evaluación cuasiexperimental.
Las definiciones de estos modelos se encuentran señaladas en el capítulo
correspondiente al contexto teórico del capitulo 5 del presente trabajo.
Para un mejor análisis de los resultados, procesos clave y aislar de mejor manera elimpacto de los CRFAs, el modelo propuesto deberá tomar en cuenta criterios comparativos
en tres niveles:
1. Comparación con próximos (CRFAs vs Escuelas convencionales)
2. Comparación con pares (CRFAs Norte-Oriente vs. CRFAs sur)
3. Comparación ínter temporal (CRFAs Norte-Oriente2004 vs. CRFAs 2008 ).
Cuadro 3: Criterios comparativos para el análisis de resultados, procesos
CRFAs Norte-Oriente 2008CRFAs Sur Escuelasconvencionales CRFAs NorteOriente2004
CRFAs Norte-Oriente2008
Análisis
cualitativo
Análisiscuantitativo
Comparacióncon pares
Análisiscuantitativo
Comparacióncon próximos.
Análisiscuantitativo
Comparaciónínter temporal.
Posiblesindicadores
- Análisis dedesarrollo decapacidades yhabilidades dealumnos.
- Metodología de
enseñanza.- Calidad dedocentes
- Desarrollopersonal delalumno
- Tasa dematriculación
- Tasa deretención
- Tasa degraduación
- Tasa detitulación
- Índice deprofesorado
- Proporción deprofesores conespecialidadtécnica
- Tasa dematriculación
- Tasa deretención
- Tasa degraduación
- Tasa detitulación
- Índice deprofesorado
- Tasa dematriculación
- Tasa deretención
- Tasa degraduación
- Tasa detitulación
- Índice deprofesorado
- Proporción deprofesores conespecialidadtécnica
Fuente: Elaboración propia en base revisión documental
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 45/54
Memoria de grado Master en evaluación de programas y políticas públicas
44
El propósito del 1º nivel es comprobar la validez de la educación en alternancia
utilizada por los CRFAs aislando los posibles impactos en los beneficiarios (desarrollo
personal, inserción socio profesional, y familiar de alumnos y monitores) y en el medio
(desarrollo local) a través de la comparación de CFRAs y la educación convencional.
El propósito del 2º nivel, es determinar los posibles impactos de los CRFAs Oriente-
Norte en beneficiarios (alumnos y monitores) comparándolos con los CRFAs Sur, aislando
así las diferencias de las variables del entorno espacial.
El propósito del 3º nivel, es determinar el proceso de evolución de los CRFAs,
analizando aspectos cualitativos tales como (procesos de enseñanzas aprendizaje,
adaptación de CRFAs al entorno, tec.)
6.4.1 Determinación del diseño muestral.
Dada la amplitud y complejidad de la zona de intervención del proyecto, laevaluación debe considerar un diseño muestral que permita garantizar: i) una muestra
representativa del conjunto de los CRFAs; y ii) la posibilidad de un análisis en profundidad.
Para tal efecto, se propone la aplicación de un muestreo en tres etapas:
i) Estratificación de los CRFAs, según los tipos diferentes que se pueden
identificar entre el conjunto de ellos.
ii) Conformación de conglomerados de CRFA (por estratos).
iii) Definición por conveniencia, en función de los objetivos y alcance de la
evaluación.a) Estratificación de los CRFA.
Tomando como base un total de 34 CRFAs, se realiza la estratificación de los
mismos en función de un conjunto de variables que se consideren relevantes.
Preliminarmente, se debe tomar como variables de estratificación el sexo (CRFAs de
varones; mujeres; o mixto) y el número de grados implementados en el CRFA (los que
inician con el primer grado; los que funcionan con 2 a 4 grados; y los que tienen ya los 5
grados implementados). De acuerdo a la base de datos, el cuadro 4 presenta la muestra
estratificada.Con las variables de sexo y número de grados en funcionamiento, se han
determinado un total de 6 estratos de CRFA:
- CRFA multigrado completo, mixto.- CRFA multigrado completo, de sólo varones.- CRFA multigrado completo, de sólo mujeres.- CRFA multigrado incompleto, mixto.- CRFA multigrado incompleto, de sólo varones.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 46/54
Memoria de grado Master en evaluación de programas y políticas públicas
45
- CRFA multigrado incompleto, de sólo mujeres.
Cuadro 4. Estratificación de CRFAs.
Variables de CRFAS Zonas de Perú
Variables por
grado
Variables por género Centro Norte Oriente Sur Total
CRFAs mixtos 1 2 3CRFAs solo hombres 4 1 5
Multigradocompleto
CRFAs solo mujeres 1 1 2CRFAs mixtos 3 1 8 12CRFAs solo hombres 2 4 6
Multigradoincompleto
CRFAs solo mujeres 2 4 6Total 3 5 6 20 34
Fuente: Base de datos de PRORURAL
b) Conformación de conglomerados por estratos.
Teniendo identificados los 6 estratos en los que se clasifica el total de los CRFAs,
agrupamos a los mismos en un conjunto de conglomerados, bajo el criterio de que en cadauno se encuentre representado en todos los estratos identificados. Con los resultados de la
estratificación, identificamos dos conglomerados, la primera comprendida por las zonas
norte y oriente, al interior de la cuál se encuentras los 6 tipos de CRFAs identificados, y la
segunda conformada por zona sur, al interior del cual se encuentra también los 6 tipos de
CRFAs, según se indica en el cuadro 5.
Cuadro 5. Conformación de Conglomerados por estratos de CRFAs.
Variables de CRFAS Zonas de Perú
Variablespor grado
Variables por género Centro Norte Oriente Sur Total
CRFAs mixtos 1 2 3CRFAs solo hombres 4 1 5
Multigradocompleto
CRFAs solo mujeres 1 1 2CRFAs mixtos 3 1 8 12CRFAs solo hombres 2 4 6
Multigradoincompleto
CRFAs solo mujeres 2 4 6Total 3 5 6 20 34
Fuente: Base de datos de PRORURAL
c) Definición de la muestra por conveniencia.
Finalmente, sobre la base de los 11 CRFAs identificados dentro del conglomerado
de la zona norte y oriente, se puede elegir a uno como representativo de cada tipo. La
elección final de los 6 CRFAs para la evaluación deberá realizarse tomado en cuenta otras
variables, como la ubicación de CFRAs en centros poblados, años de antigüedad,
accesibilidad y logística. De la misma forma se debe proceder con la elección de 6 CFRAs
de la zona sur la cual servirá solo para el análisis comparativo, aproximándose al papel un
grupo control.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 47/54
Memoria de grado Master en evaluación de programas y políticas públicas
46
CAPITULO VII.
TECNICAS E NSTRUMENTOS PARA LAOBTENCIÓN DE INFORMACIÓN
El Propósito del presente capítulo, es mostrar las técnicas e instrumentos que
deberán ser utilizados para la recolección de la información en la fase de trabajo de campo,
las cuales posteriormente son analizados para valorar la ejecución del proyecto.
7.1 Técnicas participativas
a) Talleres participativos con los principales actores del proyecto:
Los talleres participativos propuestos para la evaluación buscan que los propios
actores del proyecto (CRFA (representadas por los directivos y monitores), asociaciones
promotoras de los CRFA, PRORURAL, Comunidades, Gobiernos Locales), reflexionen e
intercambien sus diferentes apreciaciones sobre la marcha y los resultados alcanzados con
el proyecto.
Los talleres deberán conducidos usando la Técnica Metaplan como método de
moderación grupal, apoyándose en un conjunto de herramientas de comunicación, a partir
del uso de paneles, tarjetas y plumones de colores para la generación y discusión de ideas.
El uso de esta herramienta asegura que todos los miembros participen de una manera
equitativa, sin influencia de las opiniones individuales, facilitando la concentración y el
entendimiento de las ideas, usando "voz, oído y vista". Tanto pobladores como autoridades,
varones y mujeres, especialistas y no especialistas, aportan sus ideas con igual oportunidad;
evitando escenarios de superposición por jerarquía o conocimiento del tema, o sumisión en
el caso de las mujeres, situaciones que a menudo se observan en las relaciones sociales al
interior de las comunidades rurales.
Para la realización de los talleres se usará como instrumento de trabajo una Guía de
Taller, en la cuál se detallarán los objetivos, técnicas, herramientas y procedimientos
específicos para la conducción del mismo.
b) Grupos focales.
La técnica del grupo focal se define como una reunión con modalidad de entrevista
grupal abierta y estructurada, en donde se busca que un grupo homogéneo de individuos
manifiesten, intercambien y debatan ideas, desde la experiencia personal, una temática o
hecho específico.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 48/54
Memoria de grado Master en evaluación de programas y políticas públicas
47
Por cada CRFA que se visite durante la evaluación se propone aplicar los siguientes
grupos focales:
- Grupo focal con alumnos y alumnas de 1º y 2º grado del CRFA.
- Grupo focal con alumnos y alumnas de 3º y 4º grado del CRFA.
- Grupo focal con alumnos y alumnas de 5º grado del CRFA.
- Grupo focal con alumnos egresados del CRFA.
- Grupo focal con directivos y monitores del CRFA.
Para cada grupo focal se utilizará como instrumento de trabajo una Guía de Grupo
Focal, en la cuál se detallarán los objetivos, técnicas, herramientas y procedimientos
específicos para su conducción.
c) Talleres de trabajo con el equipo responsable de la ejecución del proyecto.
Estos talleres de trabajo se desarrollarán con el equipo de PRORURAL y ladelegación en Perú de la Fundación CODESPA. Para la realización de estos talleres se
usará como instrumento de trabajo una Guía de Taller, en la cuál se detallarán los
objetivos, técnicas, herramientas y procedimientos específicos para la conducción del taller.
7.2 Técnicas cuantitativas.
a) Encuesta dirigida a alumnos y alumnas.
La encuesta es una técnica que tiene como objetivo recoger información rápida y
representativa de una población numerosa según las características que se deseen analizar. La encuesta estará dirigida a los alumnos y alumnas de todos los grados de los CRFA que
serán visitados durante la evaluación. El objetivo de dicha encuesta es recoger las
percepciones de los jóvenes estudiantes en cuanto a:
- Desarrollo de capacidades y habilidades.
- Metodología de enseñanza.
- Calidad de los docentes.
- Condiciones físicas (infraestructura y equipamiento) del CRFA.
- Medios y materiales educativos.- Respaldo de la asociación promotora del CRFA y en particular de su propia
familia.
- Respaldo de la comunidad.
- Respaldo del Gobierno Local.
- Respaldo del Ministerio de Educación y otras instituciones.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 49/54
Memoria de grado Master en evaluación de programas y políticas públicas
48
Para la aplicación de la encuesta a hogares se usará como instrumento el
cuestionario de encuesta.
7.3 Técnicas cualitativas.
a) Entrevistas a informantes clave.
La entrevista es una técnica de recojo de información cualitativa mediante la cuál se
llega al total o a una parte representativa de los actores considerados como informantes
clave. En la evaluación las entrevistas estarán dirigidas a los siguientes informantes clave:
- Directivos y monitores de los CRFA.
- Directivos de las asociaciones promotoras de los CRFA.
- Directivos de la Unión Nacional de CRFA.
- Equipo central de PRORURAL (Director, responsable del área pedagógica, área
de proyectos, administración)- Representación local del Ministerio de Educación (UGEL)
- Delegación de CODESPA en Perú.
Para la aplicación de las entrevistas se usarán como instrumentos guías de entrevista
por cada.
7.4 Técnicas complementarias.
a) Revisión de fuentes documentales.
El proceso de identificación estará apoyado además en la revisión de documentos especializados, diagnósticos, proyectos, informes y estadísticas de la zona de intervención.
El recojo de información secundaria será sistematizado en una ficha de análisis.
b) Observación directa.
Todas las metodologías anteriormente señaladas se verán apoyadas en la
observación directa durante las visitas de campo a los CRFAs y las comunidades de la zona
del proyecto. Como instrumentos se usarán una Ficha de observación y una Ficha resumen
de información de las principales cuestiones observadas.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 50/54
Memoria de grado Master en evaluación de programas y políticas públicas
49
CAPÍTULO VIII.
CONLUSIONES Y RECOMENDACIONES.
El propósito del presente capítulo es presentar las principales conclusiones yrecomendaciones extraídas del desarrollo de cada capítulo del presente trabajo, para que
éstos sean considerados en el desarrollo de la evaluación y futuros diseños de evaluación de
proyectos con características similares.
8.1 Conclusiones.
- En el análisis de fuentes de información para el desarrollo del marco teórico, se ha
encontrado diversa información sobre modelos de formación en alternancia
aplicados a jóvenes, sin embargo, muchos de estos modelos adolecen de análisisinicial e indicadores concretos vistas a realizar una evaluación futura.
- En aquellos modelos de formación en alternancia que incorporan indicadores para
realizar una evaluación futura, éstos responden a evaluaciones corte cualitativo
(análisis interno de los Centros de Formación), adoleciendo de indicadores de corte
comparativo (análisis comparativo de Centros de Formación con escuelas
convencionales).
- En el análisis de de fuentes primarias para el desarrollo de la propuesta de diseño, se
ha encontrado que en la ejecución del proyecto participaban varios financiadores
(GV, Ministerio de Educación, Cooperación Belga), la cual dificulta aislar los
efectos de un solo financiador.
- En proyectos de cobertura a nivel nacional, hace necesario la determinación de una
muestra representativa especial, que tome en cuenta las diferencias regionales
(oriente, norte, sur de Perú), diferencias entre modelos de educación (formación en
alternancia vs. formación convencional), para aislar los posibles impactos.
8.2 Recomendaciones.
- Para futuras intervenciones con varios financiadores, se recomendable gestionar una
evaluación integral que contemple las necesidades informativas de todos los
financiadores, abarcando así el impacto del proyecto.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 51/54
Memoria de grado Master en evaluación de programas y políticas públicas
50
- En aquellas evaluaciones que contemple solo las acciones de la intervención de un
solo financiador, es recomendable diseñar una evaluación que esté focalizado en el
análisis de la eficiencia y eficacia, por la dificultad aislar impactos.
- Para aquellas intervenciones de formación alternativos a la convencional, que
pretenden medir el impacto, es recomendable, diseñar una evaluación que
contemple tipos de evaluación combinados, como ser, evaluaciones de procesos
para valorar los procesos de enseñanza aprendizaje, y evaluaciones en base a
criterios y aproximación a cuasi-experiemntales para valorar los impactos de
manera mas precisa.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 52/54
Memoria de grado Master en evaluación de programas y políticas públicas
51
Referencia bibliográfica.
- Abdala Ernesto, (2004) “Formación por Alternancia. Un esbozo de la experienciainternacional”. En Abdala et al, “Formación de jóvenes en alternancia: una propuestapedagógica innovadora”: CINTERFOR; CECAP; EL ABROJO, Consultado el 5 demayo de 2009 en:http://www.cinterfor.org.uy/public/spanish/region/ampro/cinterfor/publ/alternan/index.htm
- Banco Interamericano de Desarrollo (1997): “Evaluación: una herramienta de gestión
para mejorar el desempeño de los proyectos”. Washington, D.C. Consultado el 12 demayo de 2009 en: http://www.procosi.org.bo/files/evalucion_herramienta.pdf.
- Bustelo, M. (2002): “¿Qué tiene de específico la metodología de evaluación?” En: R.
Bañón i Martínez (comp..) “La evaluación de la acción de las políticas públicas”.Madrid, Díaz de Santos.
- Cillóniz Fernando, (2006) “Acerca de la educación rural en alternancia”. Consultadoel 6 de mayo de 2009 en: http://alternanciaperu.blogspot.com.
- De Los Ríos, I., Coord. (2002): “Innovación para el Desarrollo Rural: la iniciativa
LEADER como Laboratorio de Aprendizaje”. Comunidad de Madrid-España.
- Diccionario terminológico de la lengua francesa (2003). Oficio de la lengua francesa y
Semantix. Paris-Francia
- Friedmann, J. (1993): “Toward a Non-Euclidean Mode of Planning”, in Journal of American Planning Association, nº 482, 1993. Chicago-Estados Unidos
- Fundación CODESPA, (2008) “Memoria anual 2007”, Madrid España.
- Garcia M. Roberto, (2004) “Sostenibilidad de la agricultura y equilibrio territorial:
aportaciones de la educación rural en Europa y América Latina”: UniversidadPolitécnica de Madrid. ETSIA. Departamento de Proyectos y Planificación Rural.Madrid-España.
- García M. Roberto. (2002a) “ La pedagogía de la alternancia y su impacto en el medio
rural de Europa y de América latina”. Actas del foro sobre educación y desarrollo ruralorganizado por el Ministerio de Educación Nacional de Colombia y ASRURAL.Bogotá-Colombia, 2002.
- García M. Roberto (2002b) “la formación por alternancia en el medio rural: contexto e
influencia de las MRF sobre el desarrollo local de Europa y los PVD modelo de
planificación y aplicación al caso de Colombia”. tesis doctoral no publicada (UPM).Madrid-España
- Labarca Guillermo. (2001) “Formación para el trabajo: ¿público o privada?”.Cister/OIT. Montevideo-Uruguay.
5/9/2018 Memoria de Grado, Edgar Cabezas - slidepdf.com
http://slidepdf.com/reader/full/memoria-de-grado-edgar-cabezas 53/54
Memoria de grado Master en evaluación de programas y políticas públicas
52
- Ligero Lasa, JA (2007): “Apuntes del Master de Evaluación de Programas y PolíticasPúblicas, curso 2007-2008”
- Limay Angélica, (2008) “Estudio de caso: PRORURAL”. Presentado en el II Foro deFundación CODESPA 2008, 7ª sesión. Madrid-España.
- Ministerio de Asuntos Exteriores, MAE. Secretaría de Estado de CooperaciónInternacional, SECI, Dirección General de Planificación y Evaluación de Políticas deDesarrollo, DGPOLDE (2007): “ Manual de Gestión de Evaluaciones de la
Cooperación Española: Aprender para mejorar ” Madrid-España. Consultado el 10 demarzo de 2009 en: http://www.mae.es
- Pere Puig-Calvó (2006): “ Los Centros de formación por alternancia: Desarrollo de las
personas y de su medio la importancia de la formación y de la investigación en las
instituciones” Tesis doctoral: Universitat Internacional de Catalunya. MIMEO.Catalunya-Madrid
- Quintana, J.; Cazorla, A; Merino, J. (1999): “Desarrollo rural en la Unión Europea:
modelos de participación social”. MAPA, Serie Estudios (140). Madrid-España.
Recommended