Tre toolkit per orientare il settore culturale all’impatto e alla valutazione Una rassegna per costruire una cassetta degli attrezzi per la valutazione e l’impatto

L’esperienza in questo ambito ci suggerisce che il tema dell’impatto e della valutazione sta progressivamente superando la dimensione del semplice adempimento, per aprirsi al campo delle opportunità strategiche, anche per le organizzazioni culturali. Per contribuire a questo passaggio abbiamo selezionato e analizzato tre toolkit di alcuni tra gli enti più rilevanti per il tema o per il settore – Centre for Cultural Value (CCV), European Network of Cultural Centres (ENCC) in collaborazione con On The Move e Social Value Italia – che permettono di trasformare timore e resistenze nei confronti della valutazione in opportunità di apprendimento e crescita per le organizzazioni.

Le tre risorse sono frutto del lavoro di tre enti accreditati nel panorama internazionale e offrono prospettive complementari sul tema:  

1) The Evaluation Journey – a toolkit for cultural operators, a cura di European Network of Cultural Centres (ENCC) e in collaborazione con On The Move.

ENCC rappresenta la voce dei centri culturali europei, mentre On The Move supporta la mobilità di artisti e artiste a livello internazionale. In questo toolkit si concentrano insieme su come rendere la valutazione accessibile anche alle organizzazioni con risorse limitate.

Prospettiva offerta: il processo interno che le organizzazioni devono compiere per navigare in modo efficace il tema della valutazione. 

2) il Social Impact Navigator, a cura di Social Value Italia insieme e PHINEO, insieme a a Bertelsmann Stiftung.

Social Value Italia, affiliata a Social Value International, promuove attivamente la cultura e la pratica della misurazione del valore sociale in Italia, rendendo accessibili anche strumenti complessi, come nel caso del Social Impact Navigator di PHINEO.

Prospettiva offerta: traduce operativamente e in modo meticoloso una metodologia utile a progettare per impatti. infine, sulla generazione di cambiamento continuo.

3) Evaluation for Change Framework, a cura di Centre for Cultural Value (CCV).

CCV è un organismo accademico di primo piano nel Regno Unito, offre framework flessibili per valutare il cambiamento nel settore artistico e culturale, con una forte enfasi sul valore strategico.

Prospettiva offerta: la valutazione come dispositivo per orientare e supportare la generazione di cambiamento continuo nelle organizzazioni.

Nel suo complesso, questa rassegna mette insieme tre contributi utili a costruire una cassetta degli attrezzi, riconoscendo che la valutazione è un viaggio continuo che rafforza le organizzazioni.

Ve li suggeriamo perché

I tre toolkit nel loro complesso rappresentano un’ottima selezione dei riferimenti e degli strumenti necessari per affrontare la valutazione con rigore metodologico ma anche un po’ di creatività. Tuttavia ciascuna risorsa ha le proprie specificità e risponde a esigenze diverse.

1. Guida e strumenti per un percorso interiore: The Evaluation Journey – a toolkit for cultural operators 

È un ottimo punto di partenza per chi ha qualche resistenza e vede la valutazione come complessa e onerosa. Questo toolkit adotta un approccio insieme riflessivo e pragmatico, per affrontare la valutazione come un viaggio integrato nel lavoro quotidiano, non un capitolo separato da svolgere per rispondere a pressioni esterne. Questa risorsa affronta tutte le fasi del viaggio da compiere, tra riflessioni intime nella visione delle organizzazioni, riferimenti metodologici e strumenti concreti.

Specificità: 

• è eccellente per le organizzazioni con budget e risorse umane limitate , in quanto propone approcci partecipativi e interni
• demistifica la valutazione e insegna che il vero valore non risiede nell’applicazione di modelli esterni complessi, ma nella capacità dell’organizzazione di avviare una riflessione interna che consenta di attrezzarsi e orientarsi tra i diversi modelli, fino a contemplare la possibilità di inventarne uno proprio ex-novo. Questo per assicurarsi che l’atto di valutare sia sempre collegato alla missione dell’ente, combinando aspetti quantitativi e qualitativi.

2. Bussola solida e operativa: Social Impact Navigator 

Guida pratica per eccellenza che mira a spostare il focus della progettazione sociale: dall’idea di progetto come semplice insieme di attività al progetto come insieme di attività e risorse intenzionalmente e strategicamente orientate all’impatto.

Specificità: 

• ha una struttura molto chiara e dettagliata, che ambisce al fai da te completo, rispondendo al bisogno di strumenti in grado di accompagnare le organizzazioni lungo il percorso di riposizionamento strategico
• accompagna passo dopo passo nel processo di progettazione per impatti e ripercorre ogni singolo step descrivendo finalità, domande chiave da farsi, elementi essenziali da tenere in considerazione e strumenti operativi da utilizzare
• è versatile, dunque utile sia alle grandi che alle piccole organizzazioni
• un caso studio si sviluppa lungo tutto il documento, per mostrare a chi legge un’applicazione diretta della metodologia e degli strumenti proposti

3. Apprendimento costante e crescita organizzativa: Evaluation for Change Framework 

Ribadisce l’idea di “Evaluation For Change”, ovvero la valutazione non solo come misurazione, ma come motore per la crescita organizzativa, sia internamente all’organizzazione che in relazione ai suoi principali stakeholder. L’invito più sfidante che questa guida fa è quello di sviluppare e curare una cultura dell’apprendimento all’interno delle organizzazioni culturali. 

La specificità: 

affronta in modo esplicito e con rilevanza il tema della baseline, assicurandosi che la valutazione sia anche misurazione dei cambiamenti e del progresso a partire da una situazione di base e di partenza.

propone un framework flessibile e che combina approccio quantitativo e qualitativo. È fondamentale per coloro che hanno l’esigenza di allineare la valutazione ai requisiti dei soggetti finanziatori, senza perdere le opportunità di apprendimento connesse

ll modello proposto della “Wheel of Change” è una rivisitazione della catena del valore che ha il proprio focus su una dimensione di circolarità: un approccio a ciclo continuo che garantisce che la valutazione informi regolarmente il lavoro dell’organizzazione e consenta l’apprendimento a lungo termine.

Perché possono esserti utili?

I tre toolkit selezionati forniscono gli spunti concreti e strumenti per superare gli ostacoli tipici della valutazione: la complessità metodologica, la scarsità di risorse e la disconnessione con la strategia.

1. Approcciare la valutazione, iniziando a farla : The Evaluation Journey – a toolkit for cultural operators 

Un toolkit utile anche a chi muove i primi passi nel campo della valutazione e capire che esiste un modo unico e universale per farlo. Ma è utile anche per chi ha già delle esperienze e può chiedersi quanto abbiano

Utile soprattutto per:

– superare l’idea di valutazione come controllo e giudizio;

– costruire un’idea di valutazione scalabile e maggiormente adattabile, sviluppata internamente e con un approccio partecipativo, per superare l’idea di un’operazione necessariamente complessa o costosa;

– acquisire che il primo passo per una valutazione efficace è chiedersi “perché” e “per chi” si valuta (cfr Generare valore, valutare gli impatti);

– avere un’idea delle metodologie e delle tecniche di raccolta dati maggiormente applicate in ambito culturale, anche con esempi concreti e alcuni riferimenti bibliografici, comprese quelle maggiormente qualitative. Aspetto cruciale per il settore culturale, dove l’impatto è spesso legato a dimensioni intangibili o immateriali;

– esplorare indicatori e processo e strumenti di raccolta dati, che rendono concreta e operativa la valutazione.

2. Progettare per impatti: Social Impact Navigator 

Una risorsa che costituisce un manuale piuttosto completo per progettare in modo intenzionale, prevedendo gli impatti e la valutazione dei risultati fin dal primo momento della progettazione. Anche se pensato soprattutto per organizzazioni del comparto sociale, può comunque rivelarsi utile per chi opera nel settore culturale per:

• essere guidati nella progettazione in modo sequenziale, dalla comprensione dei bisogni e delle sfide alla definizione dei risultati: la parte 1 si concentra sulla pianificazione (dall’analisi dei bisogni alla definizione degli obiettivi e del quadro logico). La parte 2 si concentra sull’analisi (monitoraggio e valutazione). La Parte 3 sul miglioramento e sull’apprendimento grazie alle evidenze emerse dall’attività di valutazione;
• approfondire tutti gli elementi del Quadro Logico e assicurarsi che i vari elementi che lo compongono (Input, Attività Output, Outcome, Impatto) siano collegati da nessi logici e che gli obiettivi siano stati formulati come cambiamenti attesi;
• sviluppare e formulare obiettivi di progetto chiari e misurabili, evitando l’errore comune di misurare solo l’attività invece dei risultati sui beneficiari;
• fare chiarezza estrema sui diversi risultati che è necessario considerare, superando il calderone in cui spesso vengono collocati.

3. Valutare il cambiamento reale: Evaluation for Change Framework 

Una risorsa snella, utile per integrare la valutazione nella cultura dell’organizzazione. L’elemento di novità è il suo focus sull’apprendimento continuo, sulla base del quale rivisita la catena del valore come processo ciclico (Wheel of Change), fondamentale per la sostenibilità a lungo termine.

È utile soprattutto per:

• legittimare che l’obiettivo della valutazione non è solo soddisfare gli obblighi di reporting verso i finanziatori esterni, ma innescare una riflessione critica e un processo di apprendimento grazie ai risultati e alle evidenze emerse nell’ambito del processo valutativo;
• imparare un concetto chiave: misurare il cambiamento come progresso rispetto a un punto di partenza (baseline), stimolando l’idea di una raccolta dati anche ex-ante;
• distinguere chiaramente tra le diverse tipologie di risultati possibili (Output, Outcome e Impact);
• sviluppare dimestichezza nel costruire connessioni forti e di coerenza tra: le diverse tipologie di risultati attesi, indicatori di risultato, fonti e strumenti per la raccolta di dati ed evidenze coerenti;
• conoscere strumenti innovativi per la raccolta di dati qualitativi e di impatto “soft,” come gli “story of change workshops” o gli “on-reflection journals”, per comprendere le aspettative individuali (da confrontare poi al termine delle attività) o per catturare il cambiamento in atto. Questo è cruciale per il settore culturale, dove l’impatto è spesso legato a dimensioni intangibili o immateriali.

Nel loro insieme, questi tre strumenti guidano l’operatore culturale in un percorso completo: dal perché al come fare fino al come migliorare.

Glossario

Catena del valore: è un’interpretazione di Quadro Logico propria della Teoria del Cambiamento e rappresenta l’insieme di attività che un’organizzazione o un progetto svolge per creare valore non solo economico, ma anche sociale e culturale. La peculiarità è che mostra tutti i nessi logici e causali, dalla progettazione all’implementazione, fino ai benefici o cambiamenti positivi prodotti nella comunità e nella società.

In parole semplici, è il percorso che collega ciò che si fa ai risultati e agli impatti concreti che si vogliono ottenere

Framework: è il quadro concettuale e operativo che definisce la logica e la teoria che sottendono la ricerca valutativa, consentendo di progettare un percorso valutativo efficace e adattato al contesto specifico. Struttura la valutazione in fasi e guida sia le scelte metodologiche sia le pratiche operative, garantendo l’accuratezza e l’appropriatezza della ricerca stessa nell’ambito del programma o intervento valutato. 

Link

The Evaluation Journey – a toolkit for cultural operators, a cura di European Network of Cultural Centres (ENCC) e in collaborazione con On The Move https://cloud.encc.eu/s/WQjLWmbfot4bdao

il Social Impact Navigator, a cura di Social Value Italia insieme e PHINEO, insieme a a Bertelsmann Stiftung https://www.socialvalueitalia.it/wp-content/uploads/2021/07/Social-Impact-Navigator.pdf

Evaluation for Change Framework, a cura di Centre for Cultural Value (CCV) https://www.culturehive.co.uk/wp-content/uploads/2023/08/Evaluation-for-Change-Framework.pdf