Il post propone un esempio di applicazione del modello di valutazione della formazione di Kirkpatrick alla misurazione degli effetti delle azioni di capacity building. Tale esempio è tratto, con degli adattamenti, dalla manualistica dell’agenzia per la cooperazione internazionale australiana (AusAID).
Così come ha dei limiti il modello di Kirkpatrick, lo stesso si puàò dire per il suo adattamento alla misurazione degli effetti delle azioni di capacity building proposto e implementato da AusAID.
Ciò detto, l’approccio di AusAID è certamente molto interessante – e da replicare – con riferimento ai seguenti aspetti: (i) l’idea di fondo di applicare la logica valutativa non solo ai singoli individui, ma anche alle stesse unità organizzative che beneficiano di attività di capacity building (idea abbracciata anche da UNDP e da altre agenzie nazionali di cooperazione allo sviluppo); (ii) l’idea, ampiamente condivisibile, di non misurare gli effetti delle azioni di capacity building solo con riferimento ai risultati “interni”, ma anche e soprattutto a quelli “esterni”. In altri termini, bisognerebbe stimare la capacità delle azioni di capacitazione di migliorare non solo la performance in senso stretto delle unità organizzative, ma anche la loro capacità di produrre un impatto positivo sui beneficiari/destinatari finali delle azioni di politica economica e dei progetti. In sostanza, il termine di riferimento fondamentale dell’efficacia delle azioni di capacity building dovrebbe sempre essere l’impatto sui beneficiari/destinatari finali.
Tag: catene logiche
Audit, monitoraggio e valutazione dei Programmi cofinanziati dai Fondi Strutturali
Il post argomenta che audit, monitoraggio e valutazione costituiscono i principali meccanismi di apprendimento nell’ambito delle procedure attuative dei Programmi cofinanziati dai Fondi Strutturali (essi si possono tutti collocare nella fase “check” del Ciclo Plan Do Check Act di Shewhart e Deming). Va sempre ricordato, tuttavia, che essi hanno finalità, approcci e anche tempi di esecuzione differenti. In particolare va ricordato che il monitoraggio risponde alla domanda “Are we doing the things right?”». Invece, la valutazione risponde alla domanda “Are we doing the right things?”
Ciclo del progetto: la fase fantasma dell’approvazione
Il post argomenta che fra la fase di ideazione (avvio) del “ciclo del progetto” e la fase di pianificazione, andrebbe sempre considerata una fase “fantasma” in molti “cicli del progetto” proposti in Guide e Manuali, che è quella dell’approvazione dei progetti. Non va mai dimenticato che solo nel caso in cui la “proposta di progetto” venga approvata sarà possibile proseguire con una fase successiva di approfondimento che conduce all’elaborazione del “progetto esecutivo”. Nel post provo a rappresentare concretamente questo aspetto con riferimento a un progetto di sviluppo aziendale soggetto all’approvazione o meno del top management, a un progetto tecnico (offerta tecnica) elaborato per aggiudicarsi un appalto pubblico (call for tender) e, infine, ad una proposta di progetto finalizzata ad accedere a delle sovvenzioni messe a concorrenza tramite un avviso di finanziamento (call for proposal).
Ciclo del progetto: la fase iniziale di ideazione
Il post illustra la fase di ideazione (avvio) del “ciclo del progetto”, che si può articolare in tre sub-fasi (identificazione, analisi e formulazione).
La fase di ideazione si chiude con l’elaborazione di una “proposta di progetto” o “progetto preliminare”.
Molti autori asseriscono che si chiuda con il “project charter” (una sorta di atto che formalizza la conclusione della fase di avvio). Così non è. Va sempre considerata una fase (fase “fantasma” in molti “cicli del progetto” proposti in Guide e Manuali), che è quella dell’approvazione dei progetti. Non va mai dimenticato che solo nel caso in cui la “proposta di progetto” venga approvata, sarà possibile definire il “project charter” e proseguire con una fase successiva di approfondimento che conduce all’elaborazione del “progetto esecutivo”.
Ciclo del progetto, monitoraggio e valutazione d’impatto
Il post argomenta che per capire adeguatamente il ruolo della valutazione di impatto bisogna collocarla nella fase di maturazione degli effetti strutturali del “ciclo del progetto” (generalmente non richiamata anche in rilevanti Manuali sulla formulazione dei progetti). Questa fase – che corrisponde alla fase “Act” del Ciclo “Plan-Do-Check-Act” – include anche il processo di apprendimento dall’attuazione del progetto (catalizzato dalla stessa valutazione di impatto) e quello della valorizzazione delle “lezioni dell’esperienza” attuazione da parte dei decisori politici e degli esperti che li supportano nella formulazione di progetti o di Programmi complessi. La valutazione di impatto, quindi, anche più della valutazione “on-going” ha quali finalità precipue quelle di rendere conto di attuazione ed effetti strutturali dei progetti e di supportare i processi di decisione strategica.
Catene logiche e processi di Monitoraggio e Valutazione dei progetti
Il post illustra le tre parti costitutive fondamentali delle c.d. “catene logiche”, che sono sempre alla base di una buona formulazione di progetti di sviluppo socio-economico e programmi complessi. Esse sono implementazione (piano di lavoro del progetto), ipotesi e gap logici e risultati e impatti.
Il blocco implementazione è completamente interno al progetto (e direttamente controllabile dall’agenzia esecutrice o dal team incaricato di realizzarlo). Risultati e impatti di lungo termine, invece, dipendono in parte dal progetto e in ampia parte da fattori di contesto. Questo è un aspetto molto rilevante da considerare anche in sede di definizione dei processi di monitoraggio e valutazione dei progetti.
Programmi cofinanziati dai Fondi Strutturali e “catene logiche”
Il post pone in luce tre problemi di fondo che condizionano negativamente la formulazione e l’attuazione dei Programmi complessi cofinanziati dai Fondi Strutturali, fra cui una conoscenza perfettibile dei principali approcci usati a livello internazionale per la definizione del disegno strategico di progetti e Programmi complessi, quali Approccio di Quadro Logico, Theory of Change, Result-Based Management, Outcome Mapping.
Mi è sembrato opportuno ricordare che tutti questi approcci, fondamentalmente, affondano le radici nelle c.d. “catene logiche”, che si sono affermate negli anni Settanta. Si parla tanto di formazione per migliorare la Pubblica Amministrazione (PA). Credo che per migliorarla davvero si dovrebbe dedicare ampio spazio ad attività di formazione sul significato di programmare “per obiettivi”, “catene logiche”, Approccio di Quadro Logico e “teoria del cambiamento”.
Programmi FESR 2021-2027. Alcune considerazioni su come definire in modo pertinente gli interventi a sostegno delle imprese
Il post propone dei suggerimenti per descrivere in modo completo le azioni di policy da inserire in ciascuno dei 23 Obiettivi Specifici dei Programmi Regionali FESR 2021-2027.
A tal fine si possono usare due diversi approcci/strumenti di lavoro: (i) l’Approccio di Quadro Logico, ampiamente usato nella formulazione dei progetti di sviluppo socio-economico; (ii) la Matrice “5W Questions + How?”, uno strumento che, per semplicità ed applicabilità a varie tipologie di indagine, si può anche usare per definire dei progetti di sviluppo, o per descrivere in termini sintetici delle azioni di politica economica. Il post illustra come la Matrice “5W Questions + How?” potrebbe essere usata per razionalizzare e descrivere in termini sintetici degli interventi a sostegno della competitività delle imprese.
Un possibile percorso logico per la formulazione dei Programmi FESR 2021-2027
Il breve articolo presenta un possibile percorso logico per la formulazione dei Programmi FESR 2021-2027. La premessa del percorso logico proposto è l’idea – provocatoria, ma solo in quanto poco discussa – che non sia molto utile considerare gli Obiettivi di Policy e gli Obiettivi Specifici (OS) dei Fondi Strutturali 2021-2027 come due livelli gerarchici di una ipotetica Matrice di Quadro Logico. E’ pragmatico e molto più utile considerarli come due livelli di ambiti di policy e non dei veri “obiettivi” e, quindi, come dei vincoli – molto rilevanti – alla formulazione dei Programmi.
Ne consegue che, dati i singoli OS (singoli ambiti di policy), se si vuole informare la formulazione della strategia complessiva all’Approccio di Quadro Logico, si debba farlo a livello di singolo OS, elaborando una “catena logica” che leghi le azioni di policy pertinenti rispetto a quell’OS a degli obiettivi di sviluppo da raggiungere al termine del periodo di programmazione.
Naturalmente si dovrà avere premura di verificare mutua coerenza e sinergie delle varie “catene logiche” elaborate per gli OS che i decisori politici intendono inserire nel POR e che, nell’insieme, la strategia regionale di sviluppo sostenuta dal FESR sia caratterizzata da una soddisfacente coerenza interna.
Formulazione dei Programmi cofinanziati dai Fondi Strutturali 2021-2027 e valutazione
Il post illustra alcuni elementi basilari sulla formulazione dei Programmi complessi – quali sono quelli cofinanziati dai Fondi Strutturali – e sulla loro valutazione.
Anche questi Programmi, infatti, sono informati alla logica generale per cui si deve delineare a priori il “percorso di cambiamento” attivato dagli interventi di policy (“teoria del cambiamento”). In altri termini, per la loro formulazione sarebbero importanti la “teoria del cambiamento” insita nel Programma, una adeguata valutazione ex ante e la contestuale definizione del “disegno di valutazione” dei Programmi. Inoltre, va sempre ricordato che la valutazione degli impatti dei Programmi non si può assolutamente fondare su degli indicatori, bensì deve essere fondata sulla rigorosa applicazione di metodi di analisi contro-fattuale. La ragione risiede nel fatto che gli effetti strutturali dei Programmi sulle variabili socio-economiche non vengono solo a dipendere dall’attuazione degli interventi (cause endogene), ma anche da una congerie di variabili “esogene” rispetto al Programma (cause esogene di contesto).