1

Presentació

Barcelona 2015

2

• Ivàlua és un Consorci Públic

• Constitució formal l’any 2006 i inici d’activitats l’octubre de 2008.

• Entitats que el formen:

Ivàlua

3

Missió i funcions

Article 4 estatuts: La promoció de l’avaluació de polítiques públiques entre les administracions públiques catalanes, les entitats sense ànim de lucre que persegueixin finalitats d’interès públic i entre la ciutadania en general.

Per portar a terme aquesta missió Ivàlua tindrà com a principals funcions:

• Avaluar polítiques públiques per encàrrec de les administracions públiques i de les entitats sense ànim de lucre. • Dissenyar instruments que permetin les Administracions públiques i la societat en general, realitzar anàlisis i

avaluació de polítiques públiques. • Detectar i assessorar en temàtiques d’interès per a les administracions públiques i a les entitats sense ànim de

lucre, per al disseny, la planificació, la implementació i l’avaluació de les polítiques públiques. • Generar coneixement, produir informació i documentació que permetin les administracions públiques i a les

entitats sense ànim de lucre en general, realitzar anàlisis i avaluació de polítiques públiques. • Realitzar activitats de formació sobre avaluació de polítiques públiques o participar en programes de formació

d’altres organismes amb aquesta mateixa finalitat. • Desenvolupar projectes de recerca sobre avaluació de polítiques públiques o participar en programes de recerca

d’altres organismes amb aquesta mateixa finalitat. • La promoció i difusió de l‘avaluació i l’establiment d’estàndards de qualitat per a la millora de l’avaluació. • Difondre els resultats de les avaluacions de polítiques públiques, mitjançant formats i canals adaptats als

diferents tipus de destinataris. • Desenvolupar altres activitats que facilitin el compliment de la seva missió.

4

Principis

• Independència

• Objectivitat

• Rigor

• Transparència

• Col·laboració activa

5

La Comissió Europea (CE, 2007) defineix l’avaluació com: La valoració de les intervencions dels organismes públics segons els seus productes i els seus impactes, amb relació a les necessitats que pretenen satisfer i orientada a proveir informació rigorosa, basada en evidències, per a la presa de decisions.

el perquè de l’AVALUACIÓ

Avaluar perquè:

• MILLORA: Millorar la qualitat de les polítiques públiques i l'eficiència en la gestió dels recursos.

• GOVERNANÇA: Promoure la transparència, el retiment de comptes i la participació en la gestió de les polítiques públiques

• COMPRENSIÓ: L’avaluació proporciona coneixement analític, proveint informació rigorosa basada en evidències. Això exigeix de l’ús de tècniques de recerca de les ciències socials, que impliquen un cert grau de complexitat.

6

La institucionalització de l’avaluació com a procés sistemàtic dins de les administracions requereix de:

- Temps.

- Adquisició d’un cos de coneixement d’experiències rellevants avaluades.

- Un compromís més enllà del “paper ho aguanta tot”. Una acceptació de l'administració de la responsabilitat d’avaluar-se a si mateixa.

- Valor per part dels polítics d’assumir que avaluar no implica “qüestionar” el que s’està fent sinó que és una eina de millora.

- Una certa gosadia: En temps de crisi hauria de ser especialment rellevant dedicar “pocs recursos” a avaluar.

• L’avaluació no és un fi en si mateix, sinó un instrument per prendre decisions que millorin la intervenció pública que s’avalua.

el perquè de l’AVALUACIÓ

7

Qui avalua internacionalment?

Quatre són els sectors principals que avaluen i promouen l’avaluació:

- El sector de l’ajuda al desenvolupament en els organismes internacionals

- FMI, BM, els fons europeus en la Unió Europea

- El sector filantròpic, sobretot als països anglosaxons

- Internament cada país amb més o menys intensitat - Els organismes públics d’avaluació treballen en col·laboració amb les administracions

públiques per promoure la cultura de l’avaluació en els seus àmbits territorials. Aquests organismes poden també realitzar avaluacions, determinar quins programes seran avaluats o estar implicats en activitats d’investigació sobre l’avaluació.

- Els organismes supranacionals normalment compten amb una unitat o un òrgan específic dedicats exclusivament a l’avaluació de les seves pròpies actuacions.

- En els nivells nacional, regional i local, normalment trobem organismes dedicats exclusivament a l’avaluació i/o a la seva promoció junt amb altres que utilitzen l’avaluació entre altres eines de rendició de comptes i de millora de l’acció pública.

8

Qui avalúa internacionalment?

ORGANISMES PÚBLICS D’AVALUACIÓ A TALL D’EXEMPLE

SUPRAESTATALS PAÏSOS ESTAT ESPANYOL

Banc Europeu d’inversions: Operations Evaluation

Àfrica del sud: Public service commission (PSC)

Espanya: AEVAL Agencia Española de evaluación las Políticas Públicas y la Calidad de los Servicios

Banc Interamericà de desenvolupament (BID) Office of Evaluation and Oversight (OVE )

Canada: Center for Excellence of Evaluation (CEE)

Andalusia: Observatorio para la mejora de los Servicios Públicos

Banc mundial: Independent Evaluation Group (IEG)

Estats Units: Governement Accountability Office (GAO) (audita) Congressional budget office (CBO) (no audita)

Catalunya: Institut Català d’Avaluació de Polítiques Públiques (Ivàlua)

Comissió Europa: Evaluation Commission Services

França: Cour des Comptes

Navarra: Servicio de calidad de las políticas y servicios públicos

Fons Monetari Internacional (FMI): Independent Evaluation Office of the International Monetary Fund

Itàlia: Sistema Nazionale di Valutazione (SNV)

Pais Basc: Secretaria de presidència del Govern Basc

Organització de les Nacions Unides (ONU): United Nations Evaluation Group (UNEG)

Regne Unit: National Audit Office Behavioural Insights Team (GOV + Nesta)

Organització Internacional del Treball (OIT): Evaluation Unit

Austràlia

Office of auditor general

Organització per a la cooperació al desenvolupament (OCDE): DAC Network of Development Evaluation

9

Activitat: AVALUACIÓ

• Realització directa per part d’Ivàlua d’avaluacions en matèries que responen a prioritats de les administracions o del tercer sector.

• Actuacions preparatòries d’avaluació en àmbits sectorials prioritaris: confecció d’agendes d’avaluació, millora de condicions d’avaluabilitat.

• Assessorament a organismes del sector públic i tercer sector per a la realització interna d’avaluacions o el seu encàrrec extern.

Àrees de coneixement

- Ocupació

- Empresa- emprenedoria

- Educació

- Social i Benestar

- ......

http://www.ivalua.cat/generic/static.aspx?ID=782&

10

Activitat: AVALUACIÓ

• Tipologia d’Avaluació: disseny, implementació, impacte, eficiència

11

Activitat: AVALUACIÓ

• Polítiques ocupació, formació

2008 – 2013 DEMO Avaluació de les polítiques actives d’ocupació (PAO) per a joves:

‒ Revisió empírica de l’efectivitat dels principals programes en l’àmbit de l’OCDE. ‒ Avaluació retrospectiva i d’impacte dels Programes de Qualificació Professional Inicial (PQPI). ‒ Avaluació d’implementació i d’impacte dels programes d’Escoles Taller, Noves Cases per a Nous Oficis i

Suma’t ‒ Proposta de model d’avaluacions de les PAO gestionades pel Servei d’Ocupació de Catalunya.

Avaluació dels Plans d’Ocupació 2005 – 2007. 2013 BCN-ACTIVA Avaluació de PAO impulsades per Barcelona Activa.

‒ Revisió de la literatura científica sobre programes d’orientació, recerca de feina i desenvolupament professional.

‒ Assessorament per a la millora de les condicions d’avaluabilitat: la mesura dels outcomes i la construcció de grups de comparació.

‒ Anàlisi quantitativa del perfil dels usuaris, dels itineraris d’ús dels serveis i dels outcomes laborals dels participants.

‒ Proposta d’una agenda d’avaluacions.

Avaluació amb disseny experimental del programa Mobilitza’t‐Mobile, de Barcelona Activa, subvencionat pel Programa PROGRESS de la UE. 2013‐2016 (en curs).

12

Activitat: AVALUACIÓ

• Polítiques socials

2009 Avaluació del Programa Interdepartamental de la Renda Mínima d’Inserció 1998 – 2008. Avaluació del Pla Nacional de la Joventut de Catalunya 2000 – 2010. 2011 Avaluació del disseny del Programa Interdepartamental de la Renda Mínima d’Inserció i informe sobre els

determinants del volum de beneficiaris del programa. Sistema Català d’Autonomia i Atenció a la Dependència: una agenda d’avaluacions. Avaluació de la prestació econòmica de caràcter universal per infant a càrrec. Avaluació del Servei Local de Teleassistència domiciliària de la Diputació de Barcelona. Avaluació de la implementació del programa Gent 3.0 de la Fundació “la Caixa”, i creació del sistema

d’informació sobre participants i activitats. Disseny d’avaluació del programa Cases d’Infants, impulsat per la Fundació Acció Social Infància i el

Departament de Benestar Social i Família de la Generalitat. 2012 Avaluació ex‐ante de l’impacte pressupostari i incidència distributiva de la prestació per infant a càrrec. Avaluació de la implementació del programa Gent 3.0 de la Fundació “la Caixa” (2ª fase).

13

Activitat: AVALUACIÓ

• Polítiques educatives 2010 Avaluació retrospectiva dels Plans Educatius d’Entorn 2005-2009 2012 Avaluació de la implementació del Programa LECXIT “Lectura per a l’èxit educatiu” (curs 2011-2012)

• Polítiques empresa i emprenedoria 2011 DEMO Programes de foment de l’R+D+I empresarial de la Generalitat. Anàlisi d’avaluacions prèvies i

recomanacions per a una agenda d’avaluacions. 2013 BCN- ACTIVA Avaluació de programes d’emprenedoria i empresa impulsats per Barcelona Activa.

‒ Revisió de l’experiència internacional quant a aquest tipus de programes i la seva avaluació. ‒ Assessorament per a la millora de les condicions d’avaluabilitat: proposta d’indicadors d’outcome i

identificació de les principals fonts d’informació. ‒ Proposta d’agenda d’avaluacions.

14

Activitat: AVALUACIÓ

• Altres polítiques

2009 Avaluació intermèdia de la Implementació del Pla Interdepartamental de Participació Ciutadana 2008- 2010. 2010 Avaluació intermèdia del Pla d’Acció per a l’Alimentació i l’Agricultura Ecològiques 2008-2012. 2013 ACT – Agència Catalana de Turisme. Revisió de l’experiència comparada sobre avaluació d’activitats de

promoció turística.

• Assessoraments DBSF: Elaboració de la memòria econòmica de l’avantprojecte de Llei de promoció de l’autonomia personal (LAPCAT) (2013, en

curs). DECO i al DJUS: Informe d’impacte econòmic del Pla director d’equipaments penitenciaris 2013-2010 (2013, en curs). Supervisió de l’avaluació del programa Obertament, de lluita contra l’estigma social de les persones amb malaltia mental

(Associació Obertament, BSF*, FLC*) (2013, en curs). ACJ*: Disseny de l’avaluació del Pla Nacional de Joventut 2010 – 2020. (2011). ACJ: Seguiment i avaluació dels Plans Locals de Joventut (2013). DBSF: Diagnòstic de necessitats i al model d’avaluació del Pla Estratègic de Serveis Socials. (2009). DBSF: Avaluació del programa Talla amb els mals rotllos. (2010). DCLT: Avaluació externa del Pla director d’Instal·lacions i Equipaments Esportius de Catalunya (2012). DEMO: Indicadors d’ocupabilitat de beneficiaris del PIRMI. (2011). DJUS: Indicadors de funcionament de l'oficina judicial i elaboració de l'Informe Explotació de dades de jutjats penals de

Catalunya (2010). FJB i FLC: Disseny de l’avaluació del programa Lectura per l’èxit escolar. (2011). FLC: Avaluació del Programa de Vocacions Científiques (2012-2013). DINEPA (Haití) en el marc del Programme de réforme et investissements dans le secteur de l’eau potable et de l’assainissement.

Agència Espanyola de Cooperació Intl. al Desenv. (2012-2013). * ACJ: Ag. Catalana Joventut; DBSF: Dpt. Benestar Social i Família; DCLT: Dpt. Cultura; DECO: Dept. Economia i Coneixement; DEMO: D.Empresa i Ocupació; DINEPA: Direction Nationale de l’Eau Potable et de l’Assainissement (Gov. Haití); DJUS: Dept. de Justícia; FJB: F. Jaume Bofill; FLC: F. “la Caixa”.

15

Activitat: AVALUACIÓ

• DECO-ICF: Avaluació ex-ante Instruments de finançament de les PIME a través de l’ICF. Avaluació

dels programes com a pas previ per al finançament europeu.

• DECO-DBSF. Avaluació ex-ante de la llei d’autonomia personal de Catalunya (LAPCAT).

• DBSF: Elaboració del Pla director de serveis socials especialitzats a l’horitzó 2018.

• DIBA: Avaluació del Pla "Xarxa de Governs Locals 2012-2015: impacte sobre l’ocupació i implementació.

• DIBA: Avaluació experimental del programa pilot “Maleta de les Famílies”, de la Diputació de Barcelona .

• DEMO-SOC: Avaluació ex-ante de les polítiques actives d’ocupació per a joves.

• DEMO-SOC: Avaluació del disseny i d’implementació de les experiències de concertació territorial del Servei d’Ocupació de Catalunya (SOC): ‘Treball a les 7 comarques’ i Consorci per a l’ocupació i la promoció econòmica del Vallès Occidental (COPEVO).

• DEMO-SOC: Pilot per al desenvolupament d’un instrument estandarditzat de seguiment i monitorització dels programes del SOC.

• DEMO-GABINET TÈCNIC: Construcció d’indicadors per al seguiment de la inserció laboral a partir de registres administratius.

• 2014

16

Activitat: AVALUACIÓ

• Agència de l’Habitatge de Catalunya: Avaluació ex-ante de l’impost sobre habitatges buits en

mans de les entitats financeres i estimació base imposable de l’impost.

• BA-EMPRESA: Avaluació d’implementació i d’impacte, del Model d’Atenció a Emprenedors.

• BA- OCUPACIÓ: Avaluació d’impacte del Servei d’orientació i recerca de feina.

• BA- OCUPACIÓ: Avaluació d’implementació dels programes PISL i Proper.

• BA-OCUPACIÓ: Avaluació del disseny del programa d’ajuts a la contractació estable: BCN crea ocupació i BCN es compromet.

• AJUNT-BCN. Avaluació del programa “Housing First” d’atenció al col·lectiu sense sostre.

• AJUNT-BCN. Anàlisi de viabilitat d’una Renda Garantida de ciutadania a BCN.

• Federació Salut Mental Catalunya: Avaluació del programa ‘Activa’t per la salut mental’ 2014-2017: Disseny, implementació i impacte.

• Associació Punt de Referència: Avaluació del disseny del programa de mentoria social: Referents, una intervenció d’acompanyament a l’emancipació de joves extutelats.

• Projecte Urban Projects Finance Initiative (UPFI) i Unió per la Mediterrània. Participació Ivàlua consorci Català per a l’avaluació de projectes de millora urbana en països de la riba sud del Mediterrani finançats per UE i BEI principalment (Incasol, Agència de l’Habitatge de Catalunya, Departament de Territori i Sostenibilitat, United Habitat i Ivàlua).

• 2014

17

Activitat: AVALUACIÓ

• Aigües de Barcelona: Avaluació del disseny i implementació del Fons de Solidaritat

• DEMO-Ocupació - Avaluació del programa d’Orientació i recerca de feina - Avaluació del programa de Garantia Juvenil - Avaluació del programa 7 Comarques

• DEMO: Avaluació de la Renda Mínima Inserció

• DIBA: - Avaluació de l’impacte dels tallers de capacitació digital per a persones grans de la xarxa

de Biblioteques - Avaluació del programa escolar les maletes de les Famílies

• DECO: - Avaluació ex ante instrument financer de suport a les PIME - Anàlisi de l’impacte pressupostari d’una renda garantida de ciutadania

• AJUNT-BCN. - Avaluació del programa “Housing First” d’atenció al col·lectiu sense sostre. - Avaluació del Programa Vincles:

- Avaluació del programa Èxit a l’estiu

- Avaluació del programa d’ajuts als infants en situació de pobresa.

• 2015

18

Activitat: TIC

• Desenvolupament de sistemes d’informació per a l’avaluació de polítiques públiques

Simulació de l’impacte econòmic de la prestació per infant a càrrec. Microsimulació de la cobertura, despesa i incidència distributiva de la prestació

BA-DEMO: Aplicatiu per al seguiment de la Inserció laboral (outcome) a partir de dades de registres administratius. (APLICATIU INSER-DATA)

BA: Aplicatiu per al seguiment d’indicadors d’”outcome” a partir de registres administratius dels programes de suport a les empreses i emprenedoria (APLICATIU FIRM-DATA)

19

Activitat: Formació

Formació introductòria

- Avaluació de polítiques públiques - Mètodes quantitatius per a l'avaluació de

polítiques públiques - Mètodes qualitatius aplicats a l'avaluació de

polítiques públiques - Introducció a l'avaluació econòmica

adreçada als ens locals i entitats del tercer sector

Formació especialitzada

- L'ús de les avaluacions de polítiques públiques per a prendre decisions adreçada a gestors administració pública i entitats tercer sector

Programes i seminaris de formació a mida per institucions: Ajuntament BCN, DIBA, Generalitat, Ajuntaments de Catalunya...

20

Activitat: Difusió

Elaboració de material metodològic (en pdf

accés lliure)

- Guia sobre evidència i decisió

- Guia d’avaluació de polítiques educatives

- Guia d’avaluació econòmica en benestar

- Guia d’avaluació econòmica en educació

- 10 Guies d’avaluació: disseny, necessitats, d’impacte....

Organització de jornades i workshops de caràcter nacional i internacional

- Jornada internacional: L’efectivitat de les Polítiques Actives d’Ocupació a debat (desembre 2014)

- Jornada sobre l’avaluació de polítiques en l’àmbit local: una assignatura pendent per a la innovació social” (juliol 2014) + taller (octubre)

- Diàlegs: Noves formes de filantropia i transformació social + taller (octubre-desembre)

- Diàlegs: Política i coneixement (febrer-abril 2015)

21

Equip

• Analistes

Miquel Àngel Alegre

David Casado

Jordi Sanz

Ramon Sabés

Federico Todeschini

• Gestió del coneixement

Montse Clèries

• Gestió de recursos

Mercedes Romera

Núria Ramon

• Direcció

Eulàlia Dalmau

• President Consell Rector

Frederic Udina

22

Moltes gràcies per la vostra atenció

www.ivalua.cat

@ivalua_Cat

Pau Claris 108, 4rt 1a, 08009 Barcelona

telèfon: +34 93 554 53 00