Capire come e perché funzionano i programmi
La ricerca di implementazione è parte integrante della maggior parte degli studi MDRC. Mentre i nostri studi di impatto indagano gli effetti di un nuovo programma o politica sui risultati degli individui, è il lavoro della ricerca di implementazione per indagare come il programma produce tali impatti comprendendo i servizi che vengono forniti agli iscritti e i fattori che influenzano la loro implementazione.
La ricerca di implementazione è tipicamente un’indagine multi-metodo che utilizza dati sia quantitativi che qualitativi per valutare i programmi e le politiche che sono oggetto di una valutazione. Che sia parte di un esperimento o di uno studio autonomo, la ricerca di implementazione presso MDRC è basata su un modello logico, che esprime la teoria generale del cambiamento per un programma. Il modello logico delinea le risorse necessarie per un programma, la popolazione che si aspetta di servire, le attività che compongono il programma, i servizi specifici da erogare e i risultati attesi per i partecipanti.
Quali tipi di domande affronta la ricerca sull’implementazione?
Gli studi di implementazione coprono una vasta gamma di domande. Un obiettivo centrale è quello di descrivere i servizi erogati — chi si è iscritto allo studio o al programma; il contenuto, la quantità, la qualità e la struttura dei servizi che il programma intendeva fornire; e la misura in cui la popolazione target ha ricevuto il servizio previsto. Gli studi di implementazione spesso vanno oltre, ad esempio valutando il contesto organizzativo, il processo con cui il personale è stato addestrato e supportato nella realizzazione del programma o la qualità delle relazioni terapeutiche tra personale e partecipanti. Per raggiungere questi obiettivi, gli studi di implementazione potrebbero mettere in campo indagini, condurre interviste con il personale o i partecipanti o osservare i servizi mentre vengono consegnati.
Gli studi di implementazione informano sempre più lo scale-up del programma, aiutando i responsabili politici e gli amministratori a comprendere le caratteristiche dei sistemi o delle organizzazioni più adatte all’implementazione di un programma man mano che si espande. In che modo i programmi locali adottano, adattano e implementano modelli basati sull’evidenza? Cosa possiamo imparare attraverso gli studi e attraverso diversi campi dell’istruzione e della politica sociale? Gli studi di implementazione spesso esaminano la fedeltà dei servizi effettivamente forniti al modello di servizio previsto, nonché i successi e le sfide associati alla fornitura di servizi così come progettati. Quando le organizzazioni locali implementano un modello di servizio esistente, possono adattarlo intenzionalmente al loro contesto locale. Gli studi di implementazione possono documentare le ragioni, i tipi e i risultati di tali adattamenti.
Perché la ricerca di implementazione è importante?
Pratiche educative innovative e programmi sociali sono processi complessi tipicamente incorporati in sistemi più grandi e contesti organizzativi. Sia all’interno di uno studio di controllo randomizzato o di un’indagine autonoma sull’implementazione del programma stesso, MDRC considera la ricerca sull’implementazione come fondamentale per comprendere gli effetti dei programmi e fornire lezioni per rafforzare gli investimenti pubblici futuri. Negli studi randomizzati, gli studi di implementazione gettano le basi per comprendere la differenza nei servizi ricevuti dai gruppi di programma e di confronto — il “differenziale di trattamento” — e quindi forniscono il contesto per interpretare i risultati di uno studio di impatto. Ma forse ancora più importante, una buona ricerca sull’implementazione può fornire lezioni agli operatori sul modo migliore per eseguire programmi efficaci e consigli ai responsabili politici su come migliorare gli interventi esistenti. La nostra ricerca di implementazione informa il processo decisionale da parte di politici, operatori di programmi e altri che mirano a comprendere appieno gli interventi complessi.
Esempi di ricerca di implementazione di MDRC:
- Trasferirsi nell’età adulta: risultati di implementazione dalla valutazione della vita transitoria dei villaggi giovanili
- Aiutare i residenti delle case popolari a trovare e mantenere posti di lavoro: Una guida per i professionisti basata sulla dimostrazione Jobs-Plus
- Un primo sguardo alla dimostrazione Head Start CARES: implementazione su larga scala di programmi per migliorare la competenza socio-emotiva dei bambini
- Gettando le basi: i primi risultati del nuovo progetto Mathways
- Implementando le Accademie di nono grado nella contea di Broward, in Florida