Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico...
Transcript of Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico...
![Page 1: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/1.jpg)
Evaluación... Por
donde empezar
![Page 2: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/2.jpg)
Unitat d’Assistència a
la Planificació i l’Avaluació
EVALUACIÓN…
POR DONDE EMPEZAR
VI CONFERENCIA BIENAL – EVALUACIÓN DE
POLITICAS PÚBLICAS –
Barcelona, 6, 7 y 8 de mayo de 2009
http://www.sociedadevaluacion.org
![Page 3: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/3.jpg)
Donde estamos?
Llorenç Fernàndez Matamoros
SANT BOI DE LLOBREGAT
Habitantes: 81.269
Superficie: 21,94 Km2
Forma parte del Área Metropolitana de Barcelona
![Page 4: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/4.jpg)
Unitat d’Assistència a la
Planificació i Avaluació
Legislatura 2003 - 2007
![Page 5: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/5.jpg)
Llorenç Fernàndez Matamoros
De donde venimos? (Antecedentes)
Administración muy sectorizada
Dificultades de coordinación alrededor de un proyecto global
Dispersión de recursos y esfuerzos
Poca información sobre como se desarrolla la acción de gobierno
Dificultad para corregir y/o rediseñar la estrategia política
Pobre interacción con la ciudadanía
Estructura orgánica Gestión Política
![Page 6: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/6.jpg)
SISPAM
Llorenç Fernàndez Matamoros
Hacia donde vamos? (Objetivos)
Hacer del PAM el eje vertebrador de toda la actuación municipal.
Favorecer que toda la administración trabaje a partir de un proyecto global en el que estén implicados tanto los técnicos como los
políticos.
Mostrar el desarrollo del PAM con total transparencia, tanto interna (trabajadores) como externa (ciudadanos).
Ayudar a corregir y redefinir las políticas públicas incorporando mecanismos de participación ciudadana.
Integrar en un mismo espacio diferentes herramientas capaces de auxiliar a los políticos en la toma de decisiones.
![Page 7: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/7.jpg)
Llorenç Fernàndez Matamoros
Aspectos clave – Fortalezas del SISPAM
FACIL ADAPTABILIDAD a cualquier instrumento de planificación.
SENCILLEZ, huye de la complejidad
INTEGRACIÓN con otras aplicaciones e instrumentos.
TRANSVERSALIDAD implica a todas las áreas del organigramafavoreciendo la cohesión interdepartamental.
INTERACTIVIDAD, el entorno web favorece la interacción entreciudadanos, políticos y técnicos.
CARÁCTER MOTIVADOR, ya que incorpora herramientas propias demotivación del personal
![Page 8: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/8.jpg)
Llorenç Fernàndez Matamoros
El SISPAM incide sobre:
ORGANIZACIÓNCambio cultural
(aunando objetivos-voluntades)
CIUDADANOS Gestión municipal más
transparente.Mejora del servicio.
POLÍTICOSToma de decisiones
más fácil: información de calidad y al día
![Page 9: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/9.jpg)
Unitat d’Assistència a la
Planificació i Avaluació
A final de legislatura pudimos informar de un grado de ejecución del plan de un 87%,
el sistema había recibido 35.272 visitas, contenía 819 indicadores, 460 productos
multimedia y 164 documentos asociados a las fichas de las 517 actuaciones, pero no
sabíamos nada sobre el impacto de las medidas implementadas ni sobre la
satisfacción de los usuarios.
Una experiencia inicial en seguimiento
![Page 10: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/10.jpg)
Estabamos haciendo
algo que parecía
evaluación.
Empezamos...
Unitat d’Assistència a la
Planificació i Avaluació
Llorenç Fernàndez Matamoros
![Page 11: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/11.jpg)
Teníamos mucha información
relacionada con el QUÉ y muy poca
respecto al COMO.
¿Cómo podíamos ayudar
a tomar decisiones?
Llorenç Fernàndez Matamoros
Unitat d’Assistència a la
Planificació i Avaluació
Llorenç Fernàndez Matamoros
Unitat d’Assistència a la
Planificació i Avaluació
![Page 12: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/12.jpg)
Unitat d’Assistència a la
Planificació i Avaluació
Legislatura 2008 - 2011
![Page 13: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/13.jpg)
• ¿Que coste tiene el plan?
• ¿Los objectivos son objectivos?
• ¿Ha participado todo el mundo?
• ¿Es una herramienta de gestión que sirve para tomar decisiones?
• ¿Tenemos elementos de evaluación?
• ¿Como inciden otros planes aprobados con duración superior al
mandato (programas transversales, Agenda 21, Plan de cultura, etc).
PREGUNTAS RELEVANTES
Llorenç Fernàndez Matamoros
Unitat d’Assistència a la
Planificació i Avaluació
Llorenç Fernàndez Matamoros
Unitat d’Assistència a la
Planificació i Avaluació
![Page 14: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/14.jpg)
Todo lo que sigue son obviedades, pero
debemos tenerlas claras para poder realizar
cambios en los procesos de planificación y
en los de gestión presupuestaria.
Atención. Pensado únicamente para la
realidad de Sant Boi de Llobregat.
Llorenç Fernàndez Matamoros
Unitat d’Assistència a la
Planificació i Avaluació
PLANIFICACIÓN
![Page 15: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/15.jpg)
MEDIO PLAZO
LARGO PLAZOPLAN ESTRATEGICO
PLAN DE
ACTUACIÓN
MUNICIPAL
PREVISIÓN
PRESUPUESTARIA
Programas
ElectoralesEquipo
de Gobierno
Gestión
extra-
ordinaria
Gestión
Ordinaria
PRESUPUESTO ANUAL
LOS DIFERENTES NIVELES DE PLANIFICACIÓN
CORTO PLAZO
Planes
puntuales
PLANIFICACIÓN
CUATRIENAL
AÑO 1 AÑO 3AÑO 2 AÑO 4
![Page 16: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/16.jpg)
Proceso Pre-electoral. CONFECCIÓN DEL PROGRAMA ELECTORAL
PROGRAMA
ELECTORAL
COMPROMISOS
ADQUIRIDOS PAM
ANTERIOR
PRESUPUESTO
COMPROMETIDO/PREVISIÓN DE
CRECIMIENTO ECONÓMICO = MARGEN
ECONÓMICO PREVISTO
PLAN ESTRATÉGICO
ÁREA
ECONÓMICA
![Page 17: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/17.jpg)
PROPUESTAS DE PAM (Programa
Electoral)
PAM APROBADO
Definición de
objetivos (con
cuantificación):
ESCENARIO 0
Asignación referentes
Despliegue de
actuaciones
Asignación
recursos
económicos y
propuesta
temporalización
PLANIFICACIÓN ANUAL
PRESUPUESTO
GESTIÓN
ORDINARIA
Obligatoria
GESTIÓN
EXTRAORDINARIA
PlurianualidadesNo Obligatoria
PREVISIÓN DE
GASTOS
Previsión de
disponibilidad
presupuestariaESCENARIO 1
ESCENARIO 2
ESCENARIO N..
AÑO 1 AÑO 3AÑO 2 AÑO 4
Reajustes + -
- +
![Page 18: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/18.jpg)
Aquí fue donde conocimos ebd a través de la
empresa CICLE y nació aquello que hemos
denominado PlaGEP
![Page 20: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/20.jpg)
![Page 21: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/21.jpg)
![Page 22: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/22.jpg)
![Page 23: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/23.jpg)
![Page 24: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/24.jpg)
![Page 25: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/25.jpg)
![Page 26: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/26.jpg)
![Page 27: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/27.jpg)
![Page 28: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/28.jpg)
![Page 29: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/29.jpg)
En paralelo a la creación del sistema de planificación, la organización preparaba un
importante cambio organizativo
Unitat d’Assistència a la
Planificació i Avaluació
Llorenç Fernàndez Matamoros
![Page 30: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/30.jpg)
RELACIONES
CON LA
SOCIEDAD CIVIL
COORDINACIÓN
CON EL ENTORNO
INSTITUCIONAL
PARTENARIADO
ESTRATEGICO EN EL
TERRITORI
MEJORA
CUALITATIVA DE LA
ORGANIZACIÓN
GOVERNANZA
LOCAL
LA GOVERNANZA
![Page 31: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/31.jpg)
ORGANIZACIÓN
Cartipacio 2007 - 2011
![Page 32: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/32.jpg)
LA GOVERNANZA:
hacia un nuevo concepto de
arquitectura organizativa y de
vínculos relacionales.
ORGANIZACIÓN
Organigrama
Ciclo de Krebs
![Page 33: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/33.jpg)
ALCALDIA
4aTINENTA D’ALCALDE
3aTINENTA D’ALCALDE
2nTINENT D’ALCALDE
1rTINENT D’ALCALDE
CAP
D’ÀREA
UAPA
GABINET
D’ALCALDIA
GOVERNANÇA I CIUTADANIA
SERVEI LOCAL
DE SEGURETAT
DEPARTAMENT DE
PROMOCIÓ
DE LA CIUTAT
UNITAT D’ASSISTÈNCIA
A LA PLANIFICACIÓ
I L’AVALUACIÓ
DEPARTAMENT DE
PARTICIPACIÓ CIUTADANA
I PROXIMITAT
SERVEIS GENERALSTERRITORI I CIUTADANIA
BENESTAR I CIUTADANIA
5èTINENT D’ALCALDE
UNITAT DE COOPERACIÓ,
SOLIDARITAT I PAU
ORGANIZACIÓN
Vínculos multirelacionales
SERVEI DE PLANIFICACIÓ
I AVALUACIÓ
DE POLÍTIQUES PÚBLIQUES
![Page 34: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/34.jpg)
PENSAR ACTUAR
INPUTS
OUTPUTS
RELACIONARNOS
PLANIFICACIÓN Y EVALUACIÓN
![Page 35: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/35.jpg)
PLANIFICACIÓN Y EVALUACIÓN
Como construimos
los niveles de
interrelaciones
![Page 36: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/36.jpg)
PLANIFICACIÓN
AGENDA 21
PROCESO
ESTRATÉGICO
PLANES Y PROGRAMAS
TRANSVERSALES Y
SECTORIALES
BALANCE
ANUAL
GESTIÓN POR RESULTADOS
CONSECUCIÓN DE
OBJECTIVOS OPERATIVOS
CONSEJOS
SECTORIALES
Y TERRITORIALES
EVALUACIÓN PARTICIPACIÓN
OBSERVATORIO
DE CIUDAD
CATÁLOGO
DE SERVICIOS
CONSEJO
DE CIUDAD
PLANIFICACIÓN Y EVALUACIÓN
FORUM ECONÓMICO
PAM FORUM
SOCIAL
![Page 37: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/37.jpg)
Llorenç Fernàndez Matamoros
Unitat d’Assistència a la
Planificació i Avaluació
Hasta el momento cualquier planificación requierede una importante inversión de tiempo.
Reducirlo es un reto que permite que laspolíticas se implementen cuando corresponda.
En nuestro caso, estamos satisfechos:
![Page 38: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/38.jpg)
¿Y ahora qué?
Teníamos todo el tema de la planificación
“solucionado”, ...más o menos
Técnicamente, ...es posible
Culturalmente, ...esto ya es otro tema
La participación, ...en nuestro caso, mucha
Hemos podido tomar “algunas” decisiones
El tema de la evaluación, ..., ya hablaremos
Llorenç Fernàndez Matamoros
Unitat d’Assistència a la
Planificació i Avaluació
![Page 39: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/39.jpg)
La organización
escuchaba algo que
parecía evaluación.
Empezamos...
Unitat d’Assistència a la
Planificació i Avaluació
Llorenç Fernàndez Matamoros
![Page 40: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/40.jpg)
DISEÑO DE
EVALUACIÓN
Dirección: Maria Bustelo Ruesta
i Juan Andres Ligero Lasa
Tutoria: Juan Antonio Garde
Roca
Llorenç Fernàndez Matamoros
Unitat d’Assistència a la
Planificació i Avaluació
![Page 41: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/41.jpg)
Evaluación
sistemática
Seguimiento
DISEÑO DE EVALUACIÓN
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 42: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/42.jpg)
Nivel
estratégico
Técnica Aproximación metodológica
Plan
-Visión
Evaluación
sistemática
Avaluación libre de objetivos. Analizaremos el
impacto sobre la población diana y no diana, sobre las
condiciones actuales y futuras. Los costes directos y
los costes de oportunidad. Efectos netos (Scriven)
Políticas
-Misiones
Modelo que se fundamenta en la utilización de los
resultados de la evaluación. (Modelo de gestión
orientado a resultados). Vigilaremos la multiplicidad de
partes afectadas por la política/programa y no
perderemos de vista el contexto.
Evaluación pluralista: reconocimiento de la pluralidad
de sistemas de valores que conviven en el seno de la
sociedad.(Wholey, Weiss, Cronbach, Suchman, Guba, Lyncoln i Monnier)
Programas
- Objetivos
estratégicos -
Objetivos
Operativos
Seguimiento
Evaluación centrada en los objetivos.
Compararemos aquello previsto inicialmente con el
resultado que estemos alcanzando realmente.
Requiere concretar y delimitar correctamente los
cambios pretendidos. – Monitorage – (Tyler)Actuaciones
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 43: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/43.jpg)
SISTEMA DE INFORMACIÓN Y
SEGUIMIENTO
¿Porqué no coger nuestro SISPAM y mejorarlo?
¿Podemos interactuar con los ciudadanos?
¿Podemos ser más autónomos?
¿Podemos...?
Llorenç Fernàndez Matamoros
Unitat d’Assistència a la
Planificació i Avaluació
![Page 45: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/45.jpg)
![Page 46: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/46.jpg)
![Page 47: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/47.jpg)
![Page 48: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/48.jpg)
Ponderación en
todos los niveles
Responsabilidad
política i tècnica
Temporalización
prevista y real
![Page 49: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/49.jpg)
![Page 50: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/50.jpg)
![Page 51: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/51.jpg)
![Page 52: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/52.jpg)
EVALUACIÓN SISTEMÁTICA
¿Podemos incorporar elementos de evaluación?
¿La organización está preparada?
¿...?
Llorenç Fernàndez Matamoros
Unitat d’Assistència a la
Planificació i Avaluació
![Page 53: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/53.jpg)
Evaluación
sistemática
Seguimiento
DISEÑO DE EVALUACIÓN
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 54: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/54.jpg)
Nivel
estratégico
Técnica Aproximación metodológica
Plan
-Visión
Evaluación
sistemática
Avaluación libre de objetivos. Analizaremos el
impacto sobre la población diana y no diana, sobre las
condiciones actuales y futuras. Los costes directos y
los costes de oportunidad. Efectos netos (Scriven)
Políticas
-Misiones
Modelo que se fundamenta en la utilización de los
resultados de la evaluación. (Modelo de gestión
orientado a resultados). Vigilaremos la multiplicidad de
partes afectadas por la política/programa y no
perderemos de vista el contexto.
Evaluación pluralista: reconocimiento de la pluralidad
de sistemas de valores que conviven en el seno de la
sociedad.(Wholey, Weiss, Cronbach, Suchman, Guba, Lyncoln i Monnier)
Programas
- Objetivos
estratégicos -
Objetivos
Operativos
Seguimiento
Evaluación centrada en los objetivos.
Compararemos aquello previsto inicialmente con el
resultado que estemos alcanzando realmente.
Requiere concretar y delimitar correctamente los
cambios pretendidos. – Monitorage – (Tyler)
Actuaciones
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 55: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/55.jpg)
Modelo de tipo pluralista/participativo
- Se trata de un proceso sistemático y periódico en el que las diferentes
partes interesadas analizan y valoran los resultados, toman decisiones
y derivan aprendizajes.
- Hemos implicado a una multiplicidad de actores, tanto internos como
externos.
- Permite a los miembros de la organización participar en el cambio
cultural que supone este trabajo.
Según Carol Weiss, “En la medida que permite una redistribución del
poder de decisión, este enfoque pluralista democratiza la evaluación”
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 56: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/56.jpg)
Iniciar este proceso requiere un fuerte impulso de la dirección tanto política
como técnica.
Justifica la creación de una unidad que intente realizar difusión de la cultura
de la evaluación.
Dependemos de un importante cambio cultural, que nos permita pasar...
Unitat d’Assistència a
la Planificació i l’Avaluació
Marta Martinez Muñoz (6º edició Master evaluación de programes y políticas públicas UCM) “Enfoques participativos en evaluación”
![Page 57: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/57.jpg)
Tipo de evaluación y momento temporal
1. Análisis de evaluabilidad
2. Evaluación intermedia
3. Evaluación de resultados al
final
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 58: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/58.jpg)
Análisis de evaluabilidad
1. Correcta definición de los objetivos, efectos y
necesidades de información.
2. Posibilidad de alcanzar las metas del programa
3. Obtención de datos relevantes de los resultados
4. Existencia de consenso respecto a la utilización de la
información generada.
Cómo:
Análisis de contenidos, entrevistas con los responsables de
los programas y observación directa de la realidad
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 59: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/59.jpg)
TEORÍA DEL PROGRAMA
Análisis crítico, fundamentado en el valor generado mediante la
comprensión de los diferentes elementos del programa o política
conjuntamente con la explicación de su funcionamiento.
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 60: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/60.jpg)
Unitat d’Assistència a
la Planificació i l’Avaluació
ESTRUCTURA
Organización relativamente estable de distintos tipos de
recursos para alcanzar los fines del proyecto.
En ella se distinguen los recursos, las personas, medios,
misión, organización,...
PROCESO
Cómo se está aplicando el programa. La finalidad que
se busca con este análisis es introducir un proceso
formativo para detectar posibles áreas de mejora y
ayudar al análisis de los efectos de la intervención
RESULTADOS
Se centra en medir los
efectos previstos
y los no previstos. Dos niveles:
- Impacto: outcomes: logro de
objetivos finales
- Eficacia: ouputs, objetivos
intermedios, logros que el
programa puede garantizar
![Page 61: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/61.jpg)
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 62: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/62.jpg)
EVALUACIÓN INTERMEDIA
1. Evaluación de la implementación
2. Evaluación de la cobertura
3. Monitorización y seguimiento del programa
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 63: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/63.jpg)
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 64: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/64.jpg)
Tipo de preguntas Número
Encargos 110
Investigaciones 89
Preguntas de evaluación 495
Totalidad de preguntas 694
Ciudad del
futuro..Governanza
BienestarServicios
generales
Territorio
Un mapa de ideas nos ha ayudado a reducir las necesidades
de información a poco menos de 40 preguntas
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 65: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/65.jpg)
•Análisis documental
•Entrevistas con los gestores
•Focus grup
•Encuestas recientes
•Análisis de redes
•Diseño de un trabajo de campo capaz
de dar respuesta a los vacíos de
información detectados
Unitat d’Assistència a
la Planificació i l’Avaluació
Trabajo de campo
![Page 66: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/66.jpg)
EVALUACIÓN DE RESULTADOS AL FINAL (ex-post)
1. Valoraremos el alcance de los resultados generales.
2. Determinaremos los efectos que son atribuibles al
plan, el análisis del contexto será imprescindible.
3. Aprenderemos de los errores del plan.
4. Tendremos muy en cuenta buscar la opinión de la
ciudadanía
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 67: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/67.jpg)
TRANSPARENCIA
Unitat d’Assistència a
la Planificació i l’Avaluació
![Page 68: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/68.jpg)
¿...más claro?
![Page 69: Evaluación Por donde empezar - COSITAL. Evaluacion. Llorenc Fernandez... · Nivel estratégico Técnica Aproximación metodológica Plan-Visión Evaluación sistemática Avaluación](https://reader030.fdocumento.com/reader030/viewer/2022040714/5e1b9064ea1fcd4abb3d31d4/html5/thumbnails/69.jpg)
Muchas gracias
Todo proceso de innovación en una organización compleja como es la administración local es unatarea que requiere un decidido liderazgo político, una gestión flexible del proceso de cambio y, porencima de todo, la participación y el compromiso de todos los actores relevantes, en especial deciudadanos y trabajadores públicos.