3.5. Il Monitoraggio e la valutazione delle iniziative sostenute
La Fondazione CON IL SUD ha consolidato un sistema di monitoraggio basato su una propria piattaforma informatica, denominata Chàiros, attraverso la quale i soggetti responsabili delle iniziative sostenute possono rappresentare lo stato di avanzamento dei progetti. All’interno della piattaforma Chàiros sono stati implementati appositi modelli che permettono di rendicontare, a scadenze predefinite, in merito all’andamento delle attività e delle spese sostenute. Per ogni iniziativa finanziata, inoltre, sono previsti incontri in loco, presso le sedi di attuazione delle attività, e un servizio di assistenza telefonica quotidiana.
Il sistema di monitoraggio prevede inoltre uno stretto collegamento sia con la fase di istruttoria, attraverso la predisposizione di visite in loco precedenti al finanziamento e la previsione di una fase di rimodulazione esecutiva antecedente all’assegnazione dei contributi, che con la programmazione delle strategie d’intervento della Fondazione, attraverso la predisposizione di documenti di monitoraggio trasversali e riepilogativi delle iniziative finanziate. Per la maggior parte delle iniziative è prevista, inoltre, una fase di monitoraggio ex post che si avvale di apposite schede di rilevazione compilate dai soggetti responsabili dei progetti conclusi.
Le informazioni raccolte attraverso le attività di monitoraggio consentono di sistematizzare i principali indicatori sull’attività complessiva della Fondazione e di esprimere, per ciascun progetto finanziato, un giudizio di valutazione qualitativo. L’esigenza di raffrontare iniziative eterogenee, sia per ambito tematico che per complessità e ampiezza dell’intervento, ha portato all’elaborazione di un modello di valutazione multi-criterio, che prende in esame le 4 macro dimensioni trasversali: andamento delle attività, reti e partenariati, gestione delle risorse, risultati conseguiti e obiettivi.
Dall’interconnessione dei 4 criteri è stata definita una scala che esprime un giudizio di valutazione articolato su 6 livelli:
L’attribuzione di un valore numerico al giudizio di valutazione consente di proporre una lettura comparata tra iniziative molto eterogenee tra loro e con diversi gradi di complessità. Il valore numerico permette di fornire un voto medio in funzione dei diversi ambiti d’intervento.
Al 31 dicembre 2019, su 1.228 iniziative finanziate, 982 risultano concluse, 199 in corso di realizzazione e 47 in fase di avvio. I giudizi di valutazione, articolati secondo lo stato di attuazione degli interventi, sono stati formulati per 961 iniziative, che rappresentano il 78% del totale delle iniziative finanziate.
Per 155 progetti è disponibile un giudizio di valutazione in itinere; per 234 iniziative è stata elaborata una valutazione finale, mentre 572 sono i progetti che, fino al 31 dicembre 2019, sono stati valutati successivamente alla conclusione delle attività (ex post).
Le 267 iniziative non valutate sono composte da progetti avviati a fine 2019, per i quali non sono disponibili dati sufficienti a formulare un giudizio di valutazione, iniziative gestite direttamente dai soci fondatori della Fondazione (Forum Nazionale del Terzo Settore, CSVnet), iniziative in partenariato con altri enti erogatori ai quali sono state demandate le attività di monitoraggio, iniziative che non possono essere articolate secondo una struttura progettuale predefinita (generalmente classificate nella categoria “Altre iniziative”).
In relazione allo stato di attuazione degli interventi, le valutazioni esprimono significati differenti. Nel caso dei progetti in corso, le valutazioni ‘in itinere’ sono rivedibili ed hanno un valore di verifica dei processi attuativi e di conformità tra le attività previste e realizzate. Per ogni iniziativa si susseguono più valutazioni ‘in itinere’ che rappresentano lo stato di attuazione dell’intervento ad 1/3 o 2/3 del suo ciclo attuativo.
Le valutazioni finali assumono un carattere definitivo, in quanto, vengono elaborate sulla base dell’effettivo conseguimento dei risultati attesi e degli obiettivi specifici delle diverse iniziative.
Le valutazioni ‘ex post’, oltre a fornire un’indicazione sugli obiettivi di lungo periodo previsti dai progetti, sono maggiormente orientate a fornire un giudizio sulla continuità nel tempo delle attività e delle relazioni di partenariato.
La figura seguente riporta la ripartizione dei giudizi di valutazione in considerazione dello stato attuativo dei progetti. Una lettura trasversale, in merito agli esiti delle iniziative finanziate, può essere proposta sulla base delle valutazioni finali, che confermano il grado di raggiungimento dei risultati dichiarati in fase progettuale.
Prospetto delle valutazioni 2019
I dati sulle valutazioni finali al 31 dicembre 2019 confermano il buon esito del 75% delle iniziative finanziate, che si attesta su una valutazione buona (3) o superiore. Contenuta appare la percentuale di progetti che si attestano su una valutazione sufficiente (valore 2, 12%), che costituisce il limite minimo per confermare il sostegno ai progetti. Le iniziative concluse negativamente, mai avviate a causa di non fattibilità delle proposte di progetto o interrotte in corso d’opera, a causa di revoche o rinunce del contributo, costituiscono una percentuale relativamente bassa delle iniziative valutate. Il confronto tra le valutazioni ‘in itinere’ e finali evidenzia come, a fronte di una maggiore evidenza delle difficoltà attuative incontrate in corso d’opera dai progetti (21% di valutazioni sufficienti) al termine delle attività si può generalmente confermare il buon esito delle iniziative. Le valutazioni ‘ex post’, che fanno riferimento ai dati raccolti fino al 2019, indicano, sul lungo periodo, la sostanziale tenuta di circa la metà delle iniziative finanziate.
La figura seguente riporta l’andamento cumulato delle valutazioni finali elaborate tra il 2015 e il 2019. Le valutazioni sono state raggruppate per valori positivi (A+, A, B) e valori negativi (C, D, E). L’andamento delle valutazioni positive risulta in leggera decrescita dal 2016 al 2019 ma i dati sono sostanzialmente stabili nell’indicare per circa il 75% dei progetti una riuscita sostanzialmente positiva.
Andamento delle valutazioni finali 2015- 2019