Evaluación de Programas Sociales y Medición de la

Pobreza: Un Reto de Política Pública

Gonzalo Hernández Licona

Consejo Nacional de Evaluación de la Política de Desarrollo Social

ÍndiceI. Problemas de desarrollo socialII. ¿Por qué evaluar?III. Retos en la construcción de un sistema de

evaluación y monitoreoIV. Dimensión institucionalV. Dimensión TécnicaVI. ResultadosVII. Retos

En promedio el décimo decil gana 2,074% más que el primero: $3,300 vs $140

Deciles de hogares 1992 1994 1996 1998 2000 2002 2004I 1.6 1.6 1.8 1.5 1.5 1.6 1.6II 2.7 2.8 3.0 2.7 2.6 2.9 2.9III 3.7 3.7 4.0 3.6 3.6 3.9 3.9IV 4.7 4.6 4.9 4.7 4.6 4.9 4.9V 5.7 5.7 6.0 5.8 5.7 6.1 6.0VI 7.1 7.1 7.4 7.2 7.1 7.4 7.3VII 8.9 8.7 9.0 8.9 8.8 9.3 9.1VIII 11.4 11.3 11.5 11.5 11.2 11.9 11.6IX 16.0 16.1 16.0 16.0 16.1 16.4 16.2X 38.2 38.4 36.4 38.1 38.7 35.6 36.5

TOTAL 100.0 100.0 100.0 100.0 100.0 100.0 100.0

Distribución de Ingreso Corriente Total de los hogares por deciles

Fuente: ENIGH 1992- 2004

Problemas de Desarrollo Económico y SocialMORTALIDAD INFANTIL Tasa de mortalidad corregida de los niños menores de 5 años (por

cada mil nacidos vivos): 44.18 Tasa de mortalidad infantil corregida (por cada mil nacimientos

vivos): 36.17 Porcentaje de niños de un años de edad vacunados contra el

sarampión: 75.3

SALUD MATERNA Tasa de mortalidad materna corregida por cada cien mil

nacimientos estimados: 89

EMPLEO Tasa de informalidad (ENEU-III 1990): 51.6%

Indicador donde se establece Meta del Milenio por el Banco Mundial

Programas y Acciones de Desarrollo Social Educación Pública

Seguridad Social Jubilaciones sector público Pensiones

Solidaridad Progresa Leche Tortilla Adultos Mayores Indígenas Hábitat Empleo Temporal Empleo Artesanos Apoyos agrícolas Microcréditos: Fonaes, Opciones

Productivas, etc.

La Política Social

Identificación de problemas y objetivos

Análisis

Diseño de política social Presupuesto Operación de programas

Evaluación y Monitoreo

Rendición de cuentas

Política Social: Planeación

Rendición de cuentas

Resultados

Identificación del problemay objetivo

Análisis

Diseño del programa Presupuesto Operación del programa

Evaluación y Monitoreo

Rendición de cuentas

Resultados

Identificación del problemay objetivo

Análisis

Diseño del programa Presupuesto Operación del programa

Evaluación y Monitoreo

Rendición de cuentas

Resultados

Identificación del problemay objetivo

Análisis

Diseño del programa Presupuesto Operación del programa

Evaluación y Monitoreo

Rendición de cuentas

Resultados

Identificación del problemay objetivo

Análisis

Diseño del programa Presupuesto Operación del programa

Evaluación y Monitoreo

Rendición de cuentas

Resultados

Identificación del problemay objetivo

Análisis

Diseño del programa Presupuesto Operación del programa

Evaluación y Monitoreo

Rendición de cuentas

Resultados

Identificación del problemay objetivo

Análisis

Diseño del programa Presupuesto Operación del programa

Evaluación y Monitoreo

Marginación, Pobreza, Vulnerabilidad, Desigualdad

DesnutriciónIngresos bajos

Hacinamiento

¿Por qué Evaluar?

Apoyar el conocimiento y aprendizaje sobre programas

Favorecer la comparación entre programas y apoya el uso más eficiente de los recursos

Mejorar la discusión sobre política social al incluir elementos más objetivos y técnicos

Transparencia y rendición de cuentas

La Evaluación es una Inversión

De 1970 a 2000 el gasto social fue de $940 miles de millones de dólares Muchos países Latinoamericanos tienen una

larga tradición de programas sociales, desde mediados del siglo XX.

Pero no era nada claro cuál había sido el beneficio concreto sobre la población

En una empresa privada se conoce de alguna manera el rendimiento de la inversión

Proceso de Empresa Privada Programas Socialestoma de decisionesI. Identificar beneficios

II. Medir Impacto

III. Monitoreo de Procesos

IV. ¿Quién exige conocer el beneficio?

V. ¿Qué se hace con los resultados?

Bienestarpobreza salud infraestructura ingreso nutrición percepcióneducación cohesión satisfacción

IT-CT; TIR ¿Qué hubiera pasado sin programa? Contra factual

Para conocer el monto y causa de las utilidades

No siempre se trabaja por resultados

utilidades

Dueños; accionistas

Sistema eficiente de toma de decisiones

Sistema poco eficiente de toma de decisiones

No es claro Recursos públicosDemocracia y Transparencia

Retos para la construcción de un sistema de Evaluación y Monitoreo de la Política Social Institucionales: Cambiar y adecuar las reglas del

juego de los agentes involucrados para que se lleve a cabo la evaluación y se use la información

Técnicos: Contar con la metodología adecuada para medir impactos y con evaluadores capacitados; tener los instrumentos para recolectar información pertinente

De gestión: Tener un buen sistema de monitoreo y los indicadores adecuados. Un buen esquema lógico.

Avances institucionales: se incrementó la demanda por las evaluacionesI. Asesoría internacional

Asesoría del BID: la necesidad de la evaluación Autoridades más receptivas

II.Cambios institucionales a nivel nacional Desde 2000, el Congreso exige por ley la evaluación

anual de todos los programas del Ejecutivo Federal. En 1999, el partido en el poder pierde la mayoría en el

Congreso Ley de Transparencia y Acceso a la Información

(2004)

Avances Institucionales

2004 Exigir a programas sociales que utilicen la información de las evaluaciones para hacer cambios relevantes

2004 Ley de Desarrollo Social. Se crea el Consejo Nacional de Evaluación de

la Política de Desarrollo Social Independencia en la evaluación y medición de la

pobreza Democracia y Transparencia**

Consejo Nacional de Evaluación de la Política de Desarrollo Social Su objetivo es:

Normar y coordinar la evaluación de las políticas y programas de desarrollo social y

Establecer los lineamientos y criterios para la medición de la pobreza

Se eligieron 6 académicos independientes, para mejorar la independencia de las evaluaciones

Dos elementos para avanzar técnicamente en la evaluación de programas sociales Metodología adecuada de evaluación de

impacto

Construcción del Marco Lógico

Aspectos Técnicos:Evaluación de Impacto

tiempo

Y

La evaluación de impacto no sólo es un asunto de interés académico

Queremos saber si los programas sirven Queremos usar mejor los recursos públicos

escasos Queremos ajustar los beneficios del

programa Queremos informar a la ciudadanía sobre el

efecto de sus impuestos

Evaluación: Resultados concretos Oportunidades: Incremento de 24% en la

matriculación de las niñas; 12% de incremento en la estatura infantil

Programa Alimentario: El impacto en la nutrición es mayor con la entrega de dinero que con la entrega de una despensa

Liconsa: La leche fortificada reduce 26% la anemia infantil a un costo de 8 pesos por niño.

Diconsa: El programa de Abasto Rural ayuda a reducir los precios 9% en promedio (aporx).

Programa Piso Firme: Reducción de 19% en anemia y parásitos en niños menores de 5 años.

Resultados concretos (2003) Las comunidades más pobres son las menos

beneficiadas de los programas de vivienda debido a los requerimientos de infraestructura y tierra.

En el mismo programa hay una tasa alta de abandono de las casas entregadas a los 2 años de recibida

15% de las tiendas de abasto rural no existen 35% de los microcréditos productivos fueron para el

consumo Los niños no absorben el hierro del suplemento

Oportunidades La Estrategia de Microrregiones no tiene un impacto

en los Municipios atendidos (posiblemente sí en las localidades atendidas)

Sistema de M&E El monitoreo y la evaluación son dos estrategias

interrelacionadas para observar de los resultados sobre el desempeño del sector público

Ambos sirven para promover una buena gestión pública

La evaluación de impacto prueba relaciones causales.

El monitoreo: Identifica indicadores clave Genera información de corto plazo sobre los procesos Apoya la gestión

Modelo Lógico: Programa Social

Productos

Actividades

Insumos

Resultados

Impactos

Imp

lem

en

tació

nR

esu

ltad

os

Contribución en la reducción de la mortalidad y morbilidad infantil

Mejorar los servicios de salud para la niñez

Servicio gratuito de vacunación y medicinas para niños menores de 5 años

Promoción, abasto de medicamentos, registro por niño, focalizaciónRecursos económicos, humano y materiales

Modelo Lógico: Realidad actual

Productos

Actividades

Insumos

Resultados???

Imp

lem

en

tació

nR

esu

ltad

os

Contribución en la reducción de la mortalidad y morbilidad infantil

Mejorar los servicios de salud para la niñez

Servicio gratuito de vacunación y medicinas para niños menores de 5 años

Promoción, abasto de medicamentos, registro por niño, focalizaciónRecursos económicos, humano y materiales

Los programas deberían estar alineados a metas de impacto final….. y los indicadores también

Desnutrición Mortalidad materna

Productos

Actividades

Insumos

Resultados

Impactos

Productos

Actividades

Insumos

Resultados

Impactos

Productos

Actividades

Insumos

Resultados

Impactos

Productos

Actividades

Insumos

Resultados

Impactos

Productos

Actividades

Insumos

Resultados

Impactos

Productos

Actividades

Insumos

Resultados

Impactos

Realidad de alineación de programas e indicadores

Desnutrición

Mortalidad materna

Productos

Actividades

Insumos

Productos

Actividades

Insumos

Productos

Actividades

Insumos

Productos

Actividades

Insumos

Productos

Actividades

Insumos

Productos

Actividades

Insumos

Metas Presidenciales

X

?

X ?

X?

XXX

Distribución de los programas y su presupuesto en las dependencias coordinadoras

NOTAS1 El presupuesto de los programas contenidos en siete agrupaciones se estimó con el presupuesto asignado a la agrupación. Ver anexo 3 de la nota técnica.2 Para obtener los presupuestos se consultó el Presupuesto de Egresos de la Federación para el Ejercicio Fiscal 2006, con excepción de nueve programas concentrados en el anexo 4 de la nota técnica.3 El porcentaje se calculó con base en los 143 programas con presupuesto disponible.4 Debido a que no se cuenta con la información presupuestal sobre el total de programas, los montos mostrados representan el presupuesto mínimo concentrado por dependencia.N.D: El monto asignado al programa Binacional de Educación al Migrante coordinado por la SRE no se encuentra especificado en el PEF 2006.

Dependencia ProgramasProgramas con

informaciónProgramas con presupuesto 1

Presupuesto (miles de pesos corrientes) 2,3

Presupuesto % 4

SEDESOL 22 22 19 41,238,014 32.3SAGARPA 18 18 9 21,965,520 17.2SSA 24 24 22 18,211,680 14.3SEP 37 33 33 13,879,874 10.9SEMARNAT 20 19 19 5,968,472 4.7IMSS 1 1 1 5,487,613 4.3SEGOB 3 3 3 5,126,000 4.0SHCP 15 15 13 4,768,946 3.7SE 7 7 5 3,864,239 3.0SCT 3 3 3 2,510,850 2.0SRA 6 6 5 2,232,340 1.7STPS 8 8 8 1,619,331 1.3CONACYT 3 3 3 810,000 0.6SRE 1 1 0 N.D N.D

Total 168 163 143 127,682,877 100.0

Medición de la Pobreza

Hasta hace unos años no había una medición oficial de pobreza para evaluar el desempeño del país en ese tema

En 2002 se crea el Comité Técnico de Medición de la Pobreza

Ahora el Coneval tiene la tarea de medir la pobreza a nivel nacional, estatal, municipal

Se tiene ya una medición de pobreza, utilizando ingresos totales

Pobreza en México, 1992-2005

21.317.4 18.224.7 24.7

47.2 47.0

20.024.1

33.936.9

22.4

26.931.8

42.346.2

30.130.6

50.053.6

64.068.8

52.553.9

0

10

20

30

40

50

60

70

80

1992 1994 1996 1998 2000 2002 2004 2005

Por

cent

aje de

perso

nas

Pobreza Alimentaria Pobreza de Capacidades Pobreza de Patrimonio

Pobreza medida por ingreso, 1992-2005

Fuente: Estimaciones del CONEVAL con base en la ENIGH, empleando la metodología preliminar el CTMP

Posiblemente los cambios en la pobreza sólo reflejan cambios cíclicos sobre una misma tendencia

Evolución de la pobreza 1992-2005

Retos Fortalecer el sistema de monitoreo Tener más evaluaciones de impacto Tener un nexo más claro con las decisiones sobre

presupuesto Mejorar el capital humano de investigadores locales… …pero también de los usuarios potenciales de las

evaluaciones (Congreso, etc.) La evaluación a nivel estatal o municipal prácticamente

no existe La medición de estos fenómenos favorecerá la toma de

decisiones