15
EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad de Antioquia Noviembre 7 de 2012 Este documento se ha realizado con la ayuda financiera de la Unión Europea. El contenido es este documento es responsabilidad exclusiva de sus autores y en modo alguno debe considerarse que refleja la posición de la Unión Europea

EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

  • Upload
    others

  • View
    5

  • Download
    0

Embed Size (px)

Citation preview

Page 1: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

EVALUACIÓN DE POLÍTICAS PÚBLICAS

Fabio Vallejo GiraldoUniversidad de AntioquiaqNoviembre 7 de 2012

Este documento se ha realizado con la ayuda financiera de la Unión Europea. El contenido es este documento es presponsabilidad exclusiva de sus autores y en modo alguno debe considerarse que refleja la posición de la Unión Europea

Page 2: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

No se puede mostrar la imagen. Puede que su equipo no tenga suficiente memoria para abrir la imagen o que ésta esté dañada. Reinicie el equipo y, a continuación, abra el archivo de nuevo. Si sigue apareciendo la x roja, puede que tenga que borrar la imagen e insertarla de nuevo.

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartadoDefiniciones o referentes

Incluya en esta zona el subtítulo del apartado Políticas públicasUna política es un plan para alcanzar un objetivo de interés público (Banco Mundial,2011).Un conjunto de actividades (programas, estrategias, procedimientos, leyes, reglamento) dirigido hacia 

bj i l ¨ E i id d f l d ñ (E l d 2008)un objetivo general ¨ Estas actividades frecuentemente se acumulan durante años. (Evalsed, 2008) “una política pública es un curso de acción o de inacción gubernamental, en respuesta a problemas públicos: [Las políticas públicas] reflejan no sólo los valores más importantes de una sociedad, sino que también el conflicto entre valores. Las políticas dejan de manifiesto a cuál de los muchos diferentes f p j f fvalores, se le asigna la más alta prioridad en una determinada decisión(Kraft y Furlong, 2006).una política pública es “en suma: a) el diseño de una acción colectiva intencional, b) el curso que efectivamente toma la acción como resultado de las muchas decisiones e interacciones que comporta y, en consecuencia c) los hechos reales que la acción colectiva produce” (Villanueva 1996)en consecuencia, c) los hechos reales que la acción colectiva produce”. (Villanueva,1996)

Política pública Momentos de 

1 2 3

45

la  Evaluación 

4

6

Page 3: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartadoMomentos y ruta de la evaluación de la políticaIncluya en esta zona el subtítulo del apartado 

11 22 33

Momentos y ruta de la evaluación de la política 

Evaluación/análisisex ante y diseño depolíticas

Toma de decisiones Planificación (programación ,regulación)

33

Transformación social

445566

OperativizaciónSeguimiento y mapeo de alcances

Medición de efectos

4455

de efectos

Page 4: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartado

11 Análisis ex‐ante 

Análisis dimensional: “Método analítico diseñado para explorar dimensiones  y Incluya en esta zona el subtítulo del apartado 

D En qué consiste?

límites de las situaciones de referencia en una organización o  en un entorno social”

Dsustantiva

DDpersonal

D espacial

Quién lo produce o a quién afecta?

Análisis dimensional

D finalista

D cuali‐t ti Para qué resolvemos la

cuantativa Para qué resolvemos la situación de referencia?

Cuánto importa la situación de f temporal Cuándo y desde cuándo se produce la 

situación de referencia?referencia?Cómo se produce la situación de referencia?

Page 5: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartado22 Toma de decisiónIncluya en esta zona el subtítulo del apartado Planificación del desarrollo

Planificación físico

22 Toma de decisión

Análisis situacional (identificación y priorización de necesidades)

Planificación físico‐financiera

yectos

vención

Plan de

amas y proy

e la interv

Rendición de cuentas

Plan de desarrollo 

Pl dTrabajo 

colaborativo  e integración i tit i l o 

de progra

ficación de cuentasPlanes de 

acción

institucional

Diseño

Planif

Seguimiento, mapeo de alcances y evaluacióng , p yDe diseño y estructura

De resultados y efectos

Page 6: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartadoLínea Base 33 Planificación

Incluya en esta zona el subtítulo del apartado Objetivos y metas 

Dimensiones

Categorías, variables e indicadoresindicadores

Seguimiento y evaluación de

Información de base Información de resultados

Seguimiento de Seguimiento en terreno evaluación de

resultadosprogramasSeguimiento en terreno

(diarios de campo)

Indicadores Gestión, proceso, producto y resultado

Page 7: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartado

44 Operativización

Incluya en esta zona el subtítulo del apartado 

Análisis de contexto

De la ejecución  a la evaluación 

contexto

Análisis deAnálisis de interesadosAnálisis  de 

EfectosPolítica pública

Análisis de resultados 

(Cumplimiento de(Cumplimiento de objetivos y metas)

Page 8: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartado

55 Seguimiento y mapeo de alcances 

Incluya en esta zona el subtítulo del apartado ContextoEstándarTendencias

Planificación objetivos y metasResultados

Mapeo de

Expectativa, efectividad e idoneidad 

Mapeo de alcances  e Indicadores  Insumos

EficienciaProductos

EficienciaEficaciaCumplimiento y calidad

ProcesoEfi i iEficiencia e idoneidad

Page 9: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartado66 Medición de efectos 

Incluya en esta zona el subtítulo del apartado Propósitos de la evaluación

Comprensión de la  intervención

Transformación fsocial

Medición de efectos y mejora Rendición de efectos y mejora  

continua cuentas

Page 10: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartado

Papel de la evaluación en la toma de decisiones

Incluya en esta zona el subtítulo del apartado Diseño y formulación de políticas públicas

Políticas, programasT d Evaluación 

Desempeño y gestiónToma de decisiones

Toma de decisiones

Ejecución , seguimiento y evaluación de resultados

EvaluaciónSegún la etapa de  intervención:Según la etapa de  intervención:Ex ante – previa a la implementación de la políticaDocumenta necesidad de intervención,  la viabilidad y  factibilidad de programas y políticas. (estudios de diseño de políticas y programas, estudios de pre‐inversión de proyectos).Procesos – durante la implementación  de la acción .Se examina el uso de recursos para el cumplimiento de los objetivos, la planificación de la intervención y laSe examina el uso de recursos para el cumplimiento de los objetivos, la planificación de la intervención y la generación de los productos. Se recomiendo “Mapeo de alcances”Ex post – Finalizado cada programa o proyecto Se evalúan los resultados y el cumplimiento de objetivos y metas. Además la gestión  en cada período. Involucra análisis  de los efectos de primer y segundo orden

Page 11: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartadoFactores de éxito de la política

Factores de éxito de la políticaIncluya en esta zona el subtítulo del apartado Factores de éxito de la política

Los objetivos explican losLos objetivos explican los beneficios a largo y mediano plazo que pueden esperarse de la política

¿La política logra el efecto que se propone? ¿Cambia la situación de la población objetivo?

Pertinencia

objetivo?

Sostenibilidad EficaciaViabilidad

¿Tiene sentido la propuesta deintervención?

d f d Efi i iGrado en que se cumplen los objetivos de¿Los riesgos identificados son 

aceptables?Eficiencia cumplen los objetivos de 

una iniciativa al menor costo posible.

Page 12: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartadoEscala propuesta òreferente

Equivalencia. Dada enporcentaje (expresado en

Calificación ovaloración numérica

S ú i ifi d

Escalas de valoración

Incluya en esta zona el subtítulo del apartado f p j pintervalos) (expresado en

intervalos)

Deficiente 0 a 25% 0 a 1 25

•Según significadosLos juicios deberán expresarse de acuerdo a las siguientescategorías y significados:Muy bueno o muy alto: Cuando el diseño cumple totalmentecon el criterio y por lo tanto no requiere modificacionesDeficiente 0 a 25% 0 a 1.25

Aceptable 25 a 50% 1.25 a 2.50

Bueno 50 a 75% 2.50 a 3.75

con el criterio y, por lo tanto, no requiere modificaciones.Bueno ò alto: Cuando el diseño cumple con el criterio

analizado pero puede ser mejorado antes o durante suimplementaciónAceptable ò medio: Cuando el diseño según el criterio deBueno 50 a 75% 2.50 a 3.75

Muy bueno 75 a 100% 3.75 a 5.0

Aceptable ò medio: Cuando el diseño según el criterio deevaluación que corresponda alcanza un nivel de desarrolloque requiere de modificaciones importantes previas a suimplementación.Deficiente ò pobre: Cuando no satisface requerimientos• Según valoración numérica Deficiente ò pobre: Cuando no satisface requerimientosmínimos y deben hacerse cambios profundos en el diseño

Escala de calificación del efecto 1-5

Según valoración numérica• Deficiente ò pobre (0 – 1.25): no hay evidencias de cambio claramente detectadas y no están dadas las condiciones para el progreso futuro. • Aceptable ò medio (1.25 - 2.50): no hay mecanismos adecuados

Pobre 0 a 2.5

Medio 2 5 a 3 6

p ( ) yque develen posibilidades para alcanzar cambios en el mediano y largo plazo, aunque pueden estar dadas las condiciones para el progreso futuro. • Bueno ò alto (2.50 - 3.75): Se evidencian condiciones favorables Medio 2.5 a 3.6

Alto 3.7 a 4.6

para alcanzar algunos cambios en el rezago o permanencia que favorecen la sostenibilidad en el mediano plazo, pero los mecanismos para lograrlo son insuficientes; se están realizando moderados progresos para lograr impactos de largo aliento.

Muy alto Mayor de 4.6

• Muy bueno ò muy alto  (3.75 ‐ 5.0): hay suficientes evidencias  que develan el cambio y/o transformación en las tasas de graduación y rezago   claramente reconocidos, y se está realizando un sustancial progreso para lograrlo  con  mecanismos apropiados claramente  definidos. El programa  está  posicionado para entregar sus productos y se visualiza sostenibilidad.

Page 13: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartadoModelo de componentes principales

Incluya en esta zona el subtítulo del apartado 

E= f . Fac + h . Coh + n . Com

Donde: Una opción f=0 60

Factor  o dimensión

f=0.60h=0.25n=0.15

0.60

EfectosNota: Los valores para f, h y n se definen según el  grupo de investigación ó a través de panel de 

t

Coherencia Complementarios

expertos

Coherencia p

0.25 0.15

Page 14: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartadoIncluya en esta zona el subtítulo del apartado 

Page 15: EVALUACIÓN DE POLÍTICAS PÚBLICASclabes-alfaguia.org/clabes-2012/ponencias/L3-4_Presenta... · 2015-08-26 · EVALUACIÓN DE POLÍTICAS PÚBLICAS Fabio Vallejo Giraldo Universidad

Incluya en esta zona el título del apartado 

Incluya en esta zona el subtítulo del apartadoIncluya en esta zona el subtítulo del apartado 

Gracias