9 Intro ResultsChain Rosalia

download 9 Intro ResultsChain Rosalia

of 33

Transcript of 9 Intro ResultsChain Rosalia

  • 7/25/2019 9 Intro ResultsChain Rosalia

    1/33

    1

    RosalRosalaa RodriguezRodriguez--GarcGarcaa,, MScMSc, PhD,, PhD,Human Development, The World BankHuman Development, The World Bank

    GESTIN POR RESULTADOS

    Madrid, 23-27 de Junio, 2008

    CREAND0 EVIDENCIAEVALUANDO IMPACTO

    SIEF- Fondo Espaol de Evaluacion de Impacto

  • 7/25/2019 9 Intro ResultsChain Rosalia

    2/33

    22

    Objetivos de esta Sesin

    I. Contexto de la agenda por resultados

    II. Definir la gestin por resultadosIII. Definir e identificar los elementos para

    construir una cadena de resultados

    IV. Vincular el seguimiento (monitoring) y la

    evaluacin y

    ~~Usar los datos y hallazgos (findings)

    para una gestin por resultados

  • 7/25/2019 9 Intro ResultsChain Rosalia

    3/33

    33

    Un ResultadoResultado se define como:

    El efecto o impacto directo,

    ~~ intencionado o no,~~ positivo y/o negativo)

    ~~ de una intervencin, de una poltica o deun programa

    Terminologa

  • 7/25/2019 9 Intro ResultsChain Rosalia

    4/33

    4

    I. Contexto de la Agenda por Resultados

  • 7/25/2019 9 Intro ResultsChain Rosalia

    5/33

    5

    II. Definicin de

    la Gestin por Resultados

    La gestigestin por resultadosn por resultados hace uso de

    varios instrumentos y procesos para generar datos e informacin que

    puedan usarse para mejorar las polticas, la planificacin,

    la gestin,

    el seguimiento, la evaluacin y

    el suministro de bienes y servicios.

  • 7/25/2019 9 Intro ResultsChain Rosalia

    6/33

    66

    Gestin tradicional de

    los Programas

    Enfocado en insumos,actividades y productos

    Gestin por Resultados

    Enfocado en resultados obtenidosy no solo en insumos o actividadesrealizadas

    Elementos:

    Enfocarse en los resultados que se desean no en los insumos

    Establecer metas claras y concretas

    Construir una cadena logica que muestre los resultados deseadosa diferente niveles

    Usar indicadores de monitoreo para mejorar la implementacin

    Usar la evidencia de evaluaciones para mejorar la toma dedecisiones

    Qu se requiere para una Gestin por Resultados?

  • 7/25/2019 9 Intro ResultsChain Rosalia

    7/33

    7

    Instrumentos para la Gestin por

    Resultados

    1. Una planificacin que es estratgica

    2. Una cadena lgica de resultados

    3. El seguimiento

    4. La evaluacin

  • 7/25/2019 9 Intro ResultsChain Rosalia

    8/33

    8

    La planificacin Estratgica esta basada enEvidencia

  • 7/25/2019 9 Intro ResultsChain Rosalia

    9/33

    9

    III. Definicin de

    la Cadena de Resultados

    La cadena de resultados es un instrumentoque ayuda a identificar la lgica --las

    relaciones causales de las polticas, las

    estrategias y los programas.

    La cadena de resultados postula que los

    insumos y los procesos son necesarios paraproveer servicios, actividades o productos y

    que stos conducen lgicamente al logrode los efectos directos y de los impactos.

  • 7/25/2019 9 Intro ResultsChain Rosalia

    10/33

    10

    Base terica de

    la Cadena de Resultados

    La cadena de resultados describe unateora de lgica: Si , entonces

    que se refiere a la progresin lgica de que

    si se hace X o sucede Y, entonces Zsera la consecuencia o el resultado.

  • 7/25/2019 9 Intro ResultsChain Rosalia

    11/33

    11

    Ejemplos

    1. SiSi se entrenan a losprofesores, si seponen al da los librosde texto y deenseanza y si semejora la pedagoga.entoncesentonces.habraun aumento en el

    aprendizaje y semejorara elrendimiento escolar.

    2. SiSi se da educacinpara la salud a lasfamilias, si se danservicios y si sehacen las pruebasnecesarias

    .entoncesentonces. Sereducira la incidenciade la tuberculosis ybajara la tasa demortalidad.

  • 7/25/2019 9 Intro ResultsChain Rosalia

    12/33

    1212

    Una cadena de resultados responde a 3

    preguntas.

    Cales son los resultados deseados del

    programa?

    Cmo se alcanzarn estos resultados?

    Cmo se sabr que se han alcanzado estosresultados?

    Construyendo unaCadena de Resultados

  • 7/25/2019 9 Intro ResultsChain Rosalia

    13/33

    1313

    Elementos de la Cadena de Resultados

    InsumosInsumos ActividadesActividades ProductosProductos ResultadosResultadosMetas aMetas aLargoLargoPlazoPlazo

    Implementacin Resultados

    Gestin por Resultados

    Insumos comprometidos

    Recursos utilizados

    Servicios, actividades yproductos entegrados

    Cambios producidos en la

    sociedad, los hogares, lacomunidad, o lasinstituciones a corto,medio or largo plazo

    Ejecucin

    Gestin por Resultados

  • 7/25/2019 9 Intro ResultsChain Rosalia

    14/33

    1414

    La Cadena de Resultados en un Programa Tpo

    InsumosInsumos ActividadesActividades ProductosProductos ResultadosResultadosMetas aMetas aLargoLargoPlazoPlazo

    Implementacin Resultados

    Recursos

    humanos,finacieros,

    etc. movilizadospara lanzar

    actividades

    Acciones o

    trabajos

    ejecutados para

    transformarinsumos en

    productos

    especficos

    Productos bajo elcontrol de la

    agencia ejecutoraPor el LADODE OFERTA

    Uso de los productos porlos beneficiarios

    Fuera del control de

    la agencia ejecutoraPor el LADO DELA DEMANDA

    Resultados

    derivados de

    varias cadenas

    de resultados

    Presupuesto

    Personal

    Capacitacin

    Estudios

    Construccin

    Plan de capacitacin

    terminado

    Transferencia

    condicionada entregada

    Caminos construidos

    Escuelas construidas

    Nuevas prcticasadoptadas

    Los caminos sonusados

    Los nios aprenden ms

    Reduccin de la

    pobreza

    Reduccin de la

    desigualdad de ingreso

    Mejora de la

    productividad laboral

  • 7/25/2019 9 Intro ResultsChain Rosalia

    15/33

    15

    La Cadena de Resultados para PrevencinEjemplo: VIH/SIDA

  • 7/25/2019 9 Intro ResultsChain Rosalia

    16/33

    1616

    Proteccinsocial y

    mercadolaboral

    Disminucin dela pobreza

    Nios mejorpreparadospara trabajar

    Aumento delconsumo

    Aumento de lamatrcula

    Transferenciascondicionadasentregadas alos hogares

    Salud Reduccin dela mortalidad

    maternal einfantil

    Aumento deluso depuestos de

    salud

    MdicoscontratadosMatronascapacitadas

    Educacin

    Alfabetizacin yempoderamiento

    Productividadlaboralaumentada

    Aumento de latasa de

    graduacinAumento del

    aprendizaje

    Profesorescapacitados

    Textosentregados

    Ejemplos Productos Resultados Metas a LargoPlazo

    La Cadena de Resultados en Sectores

  • 7/25/2019 9 Intro ResultsChain Rosalia

    17/33

    1717

    A. Informacin disponible para los padres sobrela importancia de la lactancia materna

    B. Nios ms sanos en la comunidad

    C. Reduccin del nmero de nios con diarrea

    D. Madres amamantando en vez de usar leche enpolvo

    E. Fondos disponibles para la implementacin deun proyecto de salud que reduzca lamortalidad infantil

    F. Diseo de campaas sobre la importancia de

    la lactancia materna

    Ejemplo de

    una Cadenade Resultados(Sector Salud)

    Identifique la Secuencia Lgica de Insumos,Actividades, Productos y Resultados

  • 7/25/2019 9 Intro ResultsChain Rosalia

    18/33

    1818

    1. Proyecto de salud que reduzca la mortalidadinfantil - INSUMO

    2. Diseo de campaas sobre la importancia de lalactancia materna ACTIVIDAD

    3. Informacin disponible para los padres sobre la

    importancia de la lactancia materna - PRODUCTO

    4. Madres amamantando en vez de usar leche enpolvo RESULTADO a corto plazo

    5. Reduccin del nmero de nios con diarrea RESULTADO a medio plazo

    6. Nios ms sanos en la comunidad META a largoplazo

    Ejemplodel

    SectorSalud

    Secuencia lgica de Insumos,Actividades, Productos y Resultados

  • 7/25/2019 9 Intro ResultsChain Rosalia

    19/33

  • 7/25/2019 9 Intro ResultsChain Rosalia

    20/33

    20

    En un Programa, la jerarqua de objetivos involucra a

    varias Cadenas de Resultados.

    ~~Cada resultado se mide con uno o ms indicadores~~

    Reduccion en la mortalidad infantil

    Sistema expandidode salud

    Mejora de lanutricion

    Fondos

    entregados

    Incidencia reducidade enfermedades

    transmisibles

    Aumento deimmunizaciones

    Mejora de lasprcticas de salud en

    la familia

    Contratacion deauxiliares de

    salud

    Concienciapublica

    Disponibilidadde vacunas

    DISEO. El xito del proyecto

    depende de las suposiciones yactividades correctas

    EJECUCIN. Mltiples cadenas deresultados contribuyen al logro delPDO(Objetivos de Desarrollo delProyecto) o metas a largo plazo

    Fortalecimientode las

    regulaciones

    I di d d S i i t E l i

  • 7/25/2019 9 Intro ResultsChain Rosalia

    21/33

    21

    SpecificSpecific ((espespcificocifico)):: mide lo mas cercano posible lo que seintenta medir

    MMeasurableeasurable ((mediblemedible))::

    claro y no ambiguo en relacin conlo que se mide

    Quindicador es

    ms especifico?

    2. % de puestos de salud con medicamentos disponibles

    Source: Khatouri and Kusek, 2006

    1. % de puestos de salud sin existencias de medicamentosx,y,z por ms de una semana al mismo tiempo Qu indicador es

    ms medible ?

    Un buen indicador debe serUn buen indicador debe ser SMART:

    SSpecificpecific;; MMeasurableeasurable;; AAttributablettributable;; RRealisticealistic;; TTargetedargeted(Especifico;(Especifico; MedibleMedible; Atribuible; Realista; Preciso); Atribuible; Realista; Preciso)

    Indicadores de Seguimiento y Evaluacin

    Resultado Indicador

    Los padres se aseguran que 1. Mayor uso de puestos de saludlos nios sean tratados contrala malaria 2. Mayor uso de medicamentos

    antimalaria

  • 7/25/2019 9 Intro ResultsChain Rosalia

    22/33

    IV 1 Vi l d l S i i t l E l i

  • 7/25/2019 9 Intro ResultsChain Rosalia

    23/33

    2323

    La recogida

    continua de datossobre actividades yresultados esnecesaria para dar

    seguimiento a laejecucin

    Traduce productos y resultados en

    indicadores precisos de desempeo

    Sigue los parmetros actuales paracompararlos con los indicadores deseados

    Establece si el programa llega a losbeneficiarios deseados

    Identifica cuellos de botella y otrosproblemas de ejecucin para su solucin

    Indicador

    Ao

    30%

    40%

    50%

    1 2 3 4 5

    20 %

    Seguimiento

    IV.1 Vinculando el Seguimiento y la Evaluacin

    IV 2 Vinc lando el Seg imiento la E al acion

  • 7/25/2019 9 Intro ResultsChain Rosalia

    24/33

    2424

    Establece la causalidad

    Valida las hiptesis

    Permite entender los resultados no-

    intencionales

    Anlisis ex-postpara explicarcmo fueronconseguidos o no

    los resultados

    Es una medida precisa de losresultadoscausadospor el programa

    Crea evidencia para mejorar laspolticas

    Conel

    proyecto

    Sinel

    proyecto

    Indicador

    Ao30%

    40%

    50%

    1 2 3 4 5

    15 %

    EvaluacindeImpacto

    IV.2 Vinculando el Seguimiento y la Evaluacion

    La Evaluacin empieza con las interrogantes

  • 7/25/2019 9 Intro ResultsChain Rosalia

    25/33

    25

    La Evaluacin empieza con las interrogantesfundamentales identificadas de acuerdo a la

    Cadena de Resultados

    U b i t d i i t f ilit l

  • 7/25/2019 9 Intro ResultsChain Rosalia

    26/33

    26

    Un buen sistema de seguimiento facilita la

    evaluacin

    Seguimiento

    Recogida continua

    de datos para: Mejorar la gestin interna

    Explicar los caminos

    hacia los resultados Ofrecer una base de

    clculos coste/eficiencia

    (coste unitario porproducto)

    El programa est

    alcanzandoeficientemente losresultados?

    Evaluacin de impacto

    Evaluacin ex post deresultados para:

    Confirmar o no las hiptesisde la cadena de resultados

    Establecer la causalidad Dar una base de clculos de

    coste-efectividad

    (eficacia)(coste/resultado)

    El programa es efectivo?

    a eva uac n cua a va am n

  • 7/25/2019 9 Intro ResultsChain Rosalia

    27/33

    27

    a eva uac n cua a va am ncomplementa la evaluacin

    Ejemplos de evaluacin cualitativa que no

    requiere grupos de control:

    Testimonios Estudios de casos

    Observaciones y anlisis (filmacin de profesores)

    Pero que ayudan a explicar los caminos hacia los

    resultados:

    Por qu los padres no participaron en los consejosescolares?

    Por qu algunos nios no usaron mosquiteras

    antimalaria para dormir?

  • 7/25/2019 9 Intro ResultsChain Rosalia

    28/33

    2828

    Qu preguntas pueden ser respondidas por

    el seguimiento y cules por la evaluacin ?

    Qu porcentaje de absentismo laboral existeentre los profesores ?

    La tasa de graduacin en la educacin primariaest aumentando?

    La contratacin de profesores a tiempo parcialaumenta el aprendizaje escolar?

    Las becas llegan a las nias provenientes defamilias de bajos ingresos?

    El uso de anti-parasitarios aumenta la asistencia

    escolar ? La gestin descentralizada de las escuelas

    aumenta el aprendizaje escolar?

    Est mejorando el rendimiento escolar?

  • 7/25/2019 9 Intro ResultsChain Rosalia

    29/33

    29

    Qu preguntas pueden ser respondidas por

    el seguimientoy cules por la evaluacin?

    Qu porcentaje de absentismo laboral existeentre los profesores ?

    La tasa de finalizacin de la educacin primariaesta aumentando?

    La contratacin de profesores a tiempo parcialaumenta el aprendizaje escolar?

    Las becas llegan a las nias provenientes defamilias de bajos ingresos?

    El uso de anti-parasitarios aumenta la asistencia

    escolar ? La gestin descentralizada de las escuelas

    aumenta el aprendizaje escolar?

    Est mejorando el rendimiento escolar?

    S

    S

    EI

    SEI

    EI

    S

  • 7/25/2019 9 Intro ResultsChain Rosalia

    30/33

    30

    Entrevistaparticular

    Entrevistasen la

    comunidadUso de

    archivosoficiales

    Encuestanica

    Encuestasperidicas

    Evaluacin delImpacto con

    diseo

    experimental

    Censos

    nfasis estadstico

    Rigor/Dificultad(Coste/tiempo ysofisticacin)

    Entrevista

    de ungrupo focal

    Mtod

    osmas

    forma

    les

    Mtod

    osmas

    rpido

    sObservacin

    directa

    ValidezFiabilidadCredibilidad

    La eleccin

    depende de:

    1. El asunto a analizar

    2. La calidad de la informacin necesaria

    3. El plazo disponible

    4. Costes

    Elige los Mtodos de Recogida de Datos

  • 7/25/2019 9 Intro ResultsChain Rosalia

    31/33

    31

    CONCLUSICONCLUSINN::La gestin por resultados utiliza la planificacin estratgica,

    la cadena de resultados, el seguimiento y la evaluacincomo instrumentos para generar evidencia y nuevosconocimientos.

    Este conocimiento se usapara tomar decisiones eidentificar buenas prcticas

    que mejoren las polticas yla gestin de losprogramas de manera a

    incrementar los beneficiosa la poblacin y laeffecrividad de la

    asistencia.

  • 7/25/2019 9 Intro ResultsChain Rosalia

    32/33

    32

    Terminologa bsica sobre los resultados

    La secuencia causal necesaria para que una intervencin

    logre producir impactos, pasando de los insumos y

    actividades a los productos, efectos directos e impactos.

    Cadena de

    resultados

    El efecto directo o impacto de una intervencin. Puede

    comprender a los productos.

    Resultado

    Grado en que el funcionamiento de una intervencin o un

    asociado se ajusta a normas o criterios especficos

    Desempeo

    Efectos o cambios de conducta probables o logrados que

    resultan de una intervencin

    Efectos

    directos

    Productos, bienes y servicios resultantes de una

    intervencin

    Productos

    Recursos financieros, humanos y materiales usados enuna intervencin

    Insumos

    Fuente: OCDE, IEG. Para ms definiciones, remitirse al ONUSIDA.

  • 7/25/2019 9 Intro ResultsChain Rosalia

    33/33

    33

    GRACIAS

    www.worldbank.org/asap

    [email protected]