-
7/29/2019 CAD Estndares de Calidad de Evaluacion OCDE 2006
1/9
Red de Evaluacin del CAD
Estndares de Calidad deEvaluacin del CAD
(para su aplicacin en fase de prueba)
El borrador de estndares adjunto fue aprobado por los miembros
de la Red de Evaluacin del CADen su cuarta reunin del 30 y 31 de
marzo de 2006 para su aplicacin en fase de prueba durante tresaos.
La experiencia en el uso de los estndares por los miembros y socios
interesados informar elacuerdo final sobre los estndares.
-
7/29/2019 CAD Estndares de Calidad de Evaluacion OCDE 2006
2/9
-
7/29/2019 CAD Estndares de Calidad de Evaluacion OCDE 2006
3/9
La Red de Evaluacin es un rgano subsidiario del Comit de Ayuda
al Desarrollo (CAD) de la OCDE.Su objetivo es incrementar la
eficacia de los programas internacionales de desarrollo
apoyandoevaluaciones fundamentadas e independientes. La Red es un
cuerpo nico, que agrupa a 30 donantesbilaterales y agencias
multilaterales de desarrollo: Australia, Austria, Blgica, Canad,
Dinamarca,Comisin Europea, Finlandia, Francia, Alemania, Grecia,
Irlanda, Italia, Japn, Luxemburgo, Holanda,Nueva Zelanda, Noruega,
Portugal, Espaa, Suecia, Suiza, Reino Unido, Estados Unidos,
BancoMundial, Banco Asitico de Desarrollo, Banco Africano de
Desarrollo, Banco Interamericano de
Desarrollo, Banco Europeo para la Reconstruccin y el Desarrollo,
PNUD, y el FMI.
Para ms informacin sobre el trabajo de la Red de Evaluacin del
CAD, por favor visite la webwww.oecd.org/dac/evaluationnetworko el
mail [email protected]
http://www.oecd.org/dac/evaluationnetworkmailto:[email protected]:[email protected]://www.oecd.org/dac/evaluationnetwork
-
7/29/2019 CAD Estndares de Calidad de Evaluacion OCDE 2006
4/9
Estndares de Calidad de Evaluacin del CAD
(para su aplicacin en fase de prueba)
Introduccin
Los Estndares de Calidad de Evaluacin del CAD1 identifican los
pilares clave necesarios para obtenerun producto de evaluacin y un
proceso evaluativo de calidad. Han sido preparados por los miembros
delCAD teniendo en cuenta las expectativas de los pases en los
procesos y productos de evaluacin. LosEstndares no son vinculantes
para los pases miembros, sino una gua de buenas prcticas tendentes
amejorar la calidad de las evaluaciones de intervenciones de
desarrollo y contribuir a la construccin deuna aproximacin
armonizada a la evaluacin en lnea con los principios de la
Declaracin de Pars sobrela Eficacia de la Ayuda2.
Los Estndares pretenden:
Dotar de estndares comunes a los procesos y productos de la
evaluacin. Facilitar la comparacin de evaluaciones entre pases
(metaevaluacin). Facilitar la asociacin y colaboracin en las
evaluaciones conjuntas. Facilitar a los pases miembros utilizar los
informes y resultados de evaluacin de los otros
pases miembros (incluidas las buenas prcticas y las lecciones
aprendidas).
Racionalizar los esfuerzos de evaluacin.Los Estndares estn
destinados a apoyar las evaluaciones realizadas de acuerdo con los
Principios deEvaluacin de la Ayuda al Desarrollo del CAD3,
incluyendo imparcialidad, independencia, credibilidad yutilidad, y
deben ser ledos a la luz de dichos principios. Los Principios se
centran en la gestin einstitucionalizacin de los sistemas de
evaluacin de las agencias de desarrollo y constituyen los
criteriosusados en las Evaluaciones entre Pares del CAD para los
miembros de la OCDE. Los Estndares, por elcontrario, son una gua
para la realizacin de evaluaciones e informes. Aunque los Estndares
no tienenque seguirse obligatoriamente en las evaluaciones, deberan
aplicarse lo ms posible y dar una breveexplicacin cuando no es
posible.
Los Estndares utilizan el trmino intervencin de desarrollo como
un trmino genrico para referirse alsujeto de la evaluacin y puede
hacer alusin a una actividad, proyecto, programa, estrategia,
poltica,tema, rea operacional, ejecucin institucional, etc.
Los Estndares admiten que el producto de la evaluacin puede
presentarse de varias formas diferentes,incluyendo informes
escritos y orales, presentaciones y talleres colectivos. Se utiliza
el trmino informede evaluacin para referirse a todas las formas de
productos de evaluacin.
1
A partir de ahora los Estndares.2 Declaracin de Paris de
Eficacia de la Ayuda:
http://www.oecd.org/dataoecd/11/41/34428351.pdf3 A partir de ahora
los Principios: http://www.oecd.org/dataoecd/31/12/2755284.pdf
-
7/29/2019 CAD Estndares de Calidad de Evaluacion OCDE 2006
5/9
1. MOTIVO, PROPSITO Y OBJETIVOS DE UNA EVALUACIN
1.1. El motivo de la evaluacin.
Describe por qu y para quin se hace la evaluacin, y por qu se
realiza en un momento determinado.
1.2. El propsito de la evaluacin.
El propsito de la evaluacin est en lnea con las funciones de
aprendizaje y rendicin de cuentas de lasevaluaciones. Por ejemplo,
los propsitos de una evaluacin pueden ser:
Contribuir a mejorar una poltica de ayuda, procedimiento o
tcnica. Considerar si es oportuno continuar o no un programa o
proyecto. Rendir cuentas de los gastos en desarrollo a los actores
implicados y a los contribuyentes.
1.3. Los objetivos de la evaluacin.Los objetivos de evaluacin
especifican lo que la evaluacin pretende conseguir. Por
ejemplo:
Verificar los productos, resultados e impactos y valorar la
eficacia, eficiencia y relevanciade una determinada intervencin de
desarrollo.
Suministrar hallazgos, conclusiones y recomendaciones
relacionados con una intervencinde desarrollo concreta.
2. ALCANCE DE LA EVALUACIN:
2.1. Alcance de la evaluacin.
El alcance de la evaluacin se define claramente especificando
las cuestiones que aborda, los fondosgastados hasta el momento, el
perodo de tiempo, el tipo de intervencin, la cobertura geogrfica,
loscolectivos beneficiarios, as como cualquier otro elemento de la
intervencin de desarrollo que debaconsiderarse en la evaluacin.
2.2. La lgica de la intervencin y los resultados.
El informe de la evaluacin describe brevemente y valora la lgica
de la intervencin, y distingue entreresultados a diferentes
niveles: insumos, actividades, resultados e impactos. El informe
tambin hace unavaloracin general de la lgica de la intervencin.
2.3. Criterios de evaluacin.
El informe de la evaluacin aplica los cinco criterios del CAD
para las evaluaciones de la cooperacin aldesarrollo: pertinencia,
eficacia, eficiencia, impacto y sostenibilidad. Los criterios
aplicados en unaevaluacin determinada se definen con claridad y sin
ambigedades. En caso de que no se haya aplicadoun criterio o se
hayan aplicado otros criterios adicionales se explica el porqu en
el informe de evaluacin.
2.4. Cuestiones de evaluacin.
Las cuestiones preguntadas, incluyendo cualquier revisin de las
preguntas originales, estndocumentadas en el informe de manera que
los lectores sean capaces de valorar si el equipo de
evaluacin las ha respondido adecuadamente.
-
7/29/2019 CAD Estndares de Calidad de Evaluacion OCDE 2006
6/9
3. CONTEXTO
3.1. El contexto de desarrollo y el contexto de la poltica.
El informe de evaluacin hace una breve descripcin del contexto
poltico relevante para la intervencin
del desarrollo, de los documentos polticos, objetivos y
estrategias de la agencia de desarrollo y de lossocios.
El contexto de desarrollo puede referirse a: la economa regional
y nacional y a los niveles de desarrollo.
El contexto de polticas puede referirse a: Estrategias de
reduccin de la pobreza, igualdad de gnero,proteccin del medio
ambiente y derechos humanos.
3.2. EL contexto institucional.
El informe de evaluacin describe el contexto institucional y de
los actores implicados relevantes para laintervencin de desarrollo,
de modo que su influencia pueda identificarse y valorarse.
3.3. El contexto sociopoltico.
El informe de evaluacin describe el contexto sociopoltico en el
que la intervencin se desarrolla, ascomo su influencia en los
resultados e impactos de la intervencin de desarrollo.
3.4. Planes de ejecucin.
El informe de evaluacin describe los planes organizacionales
establecidos para la ejecucin de laintervencin de desarrollo,
incluidas las funciones de los donantes y socios.
4. METODOLOGA DE EVALUACIN
4.1. Explicacin de la metodologa util izada.
El informe de evaluacin describe y explica la metodologa y el
proceso de evaluacin, y analiza suvalidez y fiabilidad. Identifica
todos los impedimentos encontrados, y sus implicaciones para la
evaluacin,incluyendo el impacto sobre su independencia. Detalla los
mtodos y tcnicas usados para la recopilaciny anlisis de los datos y
la informacin, justificando la alternativa elegida y explicando sus
limitaciones ypuntos dbiles
4.2. Valoracin de resultados.
Se especifican los mtodos para valorar los resultados. Deben ser
considerados los factores de atribuciny de contribucin/confusin. Si
se han usado indicadores de base para la valoracin de los
resultados,estos deben ser especficos, medibles, alcanzables,
relevantes y en tiempo limitado (SMART).
4.3. Consulta con los actores relevantes.
Los actores relevantes estn implicados en el proceso de
evaluacin para identificar cuestiones ysuministrar insumos para la
evaluacin. Han sido consultados donantes y socios. El informe
deevaluacin indica los actores consultados, los criterios con los
que han sido seleccionados y describe suparticipacin. Si no se ha
consultado a todos los actores, se explican los mtodos y razones
seguidospara la seleccin de unos actores determinados.
-
7/29/2019 CAD Estndares de Calidad de Evaluacion OCDE 2006
7/9
4.4. Muestreo.
El informe de evaluacin explica los criterios de seleccin de
cualquier muestra e identifica laslimitaciones relativas a su
representatividad.
4.5. El equipo de evaluacin.
El conjunto de los miembros del equipo de evaluacin debe poseer
una combinacin de habilidadesevaluadoras y conocimiento de los
temas tratados, estar equilibrado en trminos de gnero e
incluirprofesionales de los pases o regiones implicados.
5. FUENTES DE INFORMACIN
5.1. Transparencia de las fuentes de informacin.
El informe de evaluacin describe con suficiente detalle las
fuentes de informacin utilizadas(documentacin, informantes clave,
literatura, etc.), de modo que se puede valorar la adecuacin de
la
informacin. Se incluyen listas completas de entrevistados y de
documentos consultados, siempre queesto no entre en conflicto con
el derecho a la privacidad y confidencialidad de los
participantes.
5.2. Fiabilidad y exactitud de las fuentes de informacin.
Se comprueban y valoran crticamente las fuentes de informacin
utilizadas y la validez de los datos,utilizando diversos mtodos y
fuentes de informacin.
6. INDEPENDENCIA
6.1. Independencia del evaluador frente a los actores.
El informe de evaluacin indica el grado de independencia de los
evaluadores con respecto a laspolticas, operaciones y las funciones
de gestin de los que comisionan, implementan la intervencin y delos
beneficiarios. Los posibles conflictos de inters se abordan abierta
y honradamente.
6.2. Proceso de evaluacin, libre y abierto.
El equipo de evaluacin puede trabajar libremente sin
interferencias. Se asegura la cooperacin y accesoa toda la
informacin relevante. El informe de evaluacin indica cualquier
obstruccin que puede haberinfluido en el proceso de evaluacin.
7. TICA DE LA EVALUACIN
7.1. Evaluacin llevada a cabo de manera profesional y tica.
El proceso de evaluacin tiene en cuenta el gnero, creencias,
maneras y costumbres de todos losactores y se ha llevado a cabo con
integridad y honradez. Se protegen los derechos y el bienestar de
losparticipantes en la evaluacin. El anonimato y la
confidencialidad de los informantes individuales debernestar
protegidos cuando son solicitados o establecidos por ley.
7.2. Reconocimiento de los desacuerdos entre el equipo de
evaluacin.
Los miembros del equipo de evaluacin deben tener la oportunidad
de desvincularse de cualquier juicio yrecomendacin. Cualquier
diferencia de opinin no resuelta entre los miembros del equipo
deber constar
en el informe.
-
7/29/2019 CAD Estndares de Calidad de Evaluacion OCDE 2006
8/9
8. CALIDAD
8.1. Incorporacin de los comentarios de los actores
involucrados.
Los actores han tenido la oportunidad de comentar los
resultados, conclusiones, recomendaciones y
lecciones aprendidas. El informe de evaluacin refleja esos
comentarios y reconoce cualquier desacuerdosustantivo. En las
discrepancias sobre hechos que pueden ser verificados, los
evaluadores debeninvestigar y cambiar el borrador cuando sea
necesario. En el caso de opiniones o interpretaciones,
loscomentarios de los actores deben ser reproducidos textualmente,
como anexo, siempre que esto no entreen conflicto con los derechos
y bienestar de los participantes.
8.2. Control de calidad.
Se utiliza el control de calidad durante todo el proceso de
evaluacin. En funcin del alcance de laevaluacin y de su
complejidad, el control de calidad se puede realizar de manera
interna o externa, atravs de un examen de pares o mediante un grupo
de referencia. Los controles de calidad cumplen elprincipio de
independencia del evaluador.
9. RELEVANCIA DE LOS RESULTADOS DE LA EVALUACIN
9.1. Formulacin de los resul tados de la evaluacin.
Los resultados de la evaluacin son relevantes para el objeto
evaluado y el propsito de la evaluacin.Los resultados deben
proceder claramente de las cuestiones de evaluacin y del anlisis de
datos,mostrando una clara lnea de evidencia que apoye las
conclusiones. Se explica cualquier discrepanciaentre lo planeado y
la implementacin real del objeto evaluado.
9.2. Evaluacin ajustada al tiempo y al presupuesto.
La evaluacin se realiza y los resultados se presentan en un
tiempo y manera acorde con el propsito dela evaluacin. En el
informe se explica cualquier modificacin imprevista del cronograma
o delpresupuesto. Se explica cualquier discrepancia entre la
evaluacin planeada y la evaluacin realizada.
9.3. Recomendaciones y lecciones aprendidas.
Las recomendaciones y lecciones aprendidas son relevantes, se
dirigen a los usuarios adecuados y sonsusceptibles de llevarse a
cabo bajo la responsabilidad de los usuarios. Las recomendaciones
sonpropuestas opinables y las lecciones aprendidas son
generalizaciones de las conclusiones, aplicables aun mbito ms
amplio.
9.4. Uso de la evaluacin.
La evaluacin requiere un reconocimiento explcito y una respuesta
de los gestores sobre la intencin deponer en marcha y dar
seguimiento a los resultados de la evaluacin. La unidad gestora de
la evaluacindebe asegurar la difusin sistemtica, la conservacin y
la gestin de los resultados de las evaluacionespara asegurar su
accesibilidad y maximizar los beneficios de los hallazgos de la
evaluacin.
10. EXHAUSTIVIDAD
10.1. Cuestiones de evaluacin a las que responden las
conclusiones.
En el informe de evaluacin responde a todas las cuestiones y
necesidades de informacin detalladas en
el alcance de la evaluacin. Cuando no es posible se explican las
razones.
-
7/29/2019 CAD Estndares de Calidad de Evaluacion OCDE 2006
9/9
10.2. Claridad del anlisis.
El anlisis est estructurado de forma lgica. Los datos y la
informacin se presentan, analizan einterpretan sistemticamente. Los
resultados y conclusiones estn identificados claramente y son
laconclusin lgica del anlisis de los datos y de la informacin. Las
presunciones e hiptesis subyacentesse han explicitado y se han
tenido en cuenta.
10.3. Distincin entre conclusiones, recomendaciones y lecciones
aprendidas.
En los informes de evaluacin se debe distinguir claramente entre
resultados, conclusiones,recomendaciones. La evaluacin los presenta
de manera separada y con una distincin entre ellas clara ylgica.
Las conclusiones estn basadas en resultados y anlisis. Las
recomendaciones y leccionesaprendidas provienen de manera lgica de
las conclusiones.
10.4. Claridad y representatividad del resumen ejecutivo.
El informe de evaluacin se acompaa de un resumen ejecutivo, en
el que se suministra una visin globaldel informe y se subrayan las
principales conclusiones, recomendaciones y lecciones
aprendidas.
