- Oggetto:
- Oggetto:
VALUTAZIONE DELLE POLITICHE
- Oggetto:
EVALUATION OF POLICIES
- Oggetto:
Anno accademico 2023/2024
- Codice attività didattica
- CPS0671
- Docente
- Camilla Borgna (Titolare dell'insegnamento)
- Corso di studio
- Corso di laurea magistrale in Politiche e servizi sociali (Classe LM-87)
Corso di laurea magistrale in Sociologia (Classe LM-88) - Anno
- 1° anno, 2° anno
- Periodo
- Primo semestre
- Tipologia
- Caratterizzante, Affine/Integrativa
- Crediti/Valenza
- 6
- SSD attività didattica
- SPS/07 - sociologia generale
- Erogazione
- Tradizionale
- Lingua
- Italiano
- Frequenza
- Facoltativa
- Tipologia esame
- Scritto
- Oggetto:
Sommario insegnamento
- Oggetto:
Obiettivi formativi
L'insegnamento concorre alla realizzazione degli obiettivi formativi del Corso di Laurea in Politiche e Servizi Sociali fornendo agli studenti e alle studentesse gli strumenti teorici ed analitici dei principali approcci e tecniche per la valutazione delle politiche, intesa come produzione sistematica di informazioni per dare giudizi empiricamente fondati su azioni pubbliche, con l’intento di migliorarle.
Una conoscenza e comprensione approfondita delle diverse logiche della ricerca valutativa, unitamente alla capacità di padroneggiarne le tecniche base, fa parte delle competenze fondamentali per coloro che si occuperanno della gestione, direzione, programmazione e coordinamento di servizi, figure professionali che il Corso di Laurea intende formare.
Più in generale, le competenze relative alla valutazione sono sempre più importanti sia nell’ambito della ricerca sociale applicata, sia per figure professionali come l’analista di politiche pubbliche o l’esperto/a nella programmazione di politiche e servizi sociali.
The course concurs to the learning goals of the degree in Social Work and Social Policies by providing the students the theoretical and analytical tools of the main approaches and techniques for policy evaluation, meant as systematic production of information to make empirically grounded judgements on public actions, with the aim of improving them.
Understanding the different logics of evaluation research, together with the ability to deal with the most common techniques, is part of the fundamental skills for those who will work in the management, direction, programming, and coordination of services. This is in line with the formative aims of the degree course.
More generally, evaluation skills are very important in applied social science, and they are increasingly requested also in occupations such as policy analyst or expert in social policies and social work.
- Oggetto:
Risultati dell'apprendimento attesi
Al termine dell'insegnamento gli studenti e le studentesse saranno in grado di:
- Comprendere le diverse logiche della valutazione all’interno del ciclo delle politiche pubbliche (conoscenza e capacità di comprensione)
- Conoscere le tecniche essenziali, sia quantitative sia qualitative, alla base della ricerca valutativa (conoscenza e capacità di comprensione)
- Applicare la logica controfattuale alla valutazione delle politiche e dei servizi sociali e scegliere le strategie più appropriate per l’individuazione di un legame causa-effetto tra la realizzazione di un intervento e il verificarsi di cambiamenti attesi o inattesi (conoscenza e capacità di comprensione applicate)
- Interpretare in autonomia i risultati di ricerche empiriche, in particolare di tipo valutativo, e individuarne eventuali criticità legate al disegno della ricerca e all’analisi dei dati (autonomia di giudizio)
- Padroneggiare il lessico specifico proprio della metodologia delle scienze sociali, e in particolare della ricerca valutativa (abilità comunicative)
- Essere in grado di apprendere tecniche di ricerca valutativa più avanzate sulla base delle competenze sviluppate nel corso e tramite approfondimenti mirati (capacità di apprendimento)
By the end of the course, students are expected to:
- Understand the different logics of evaluation within the policy cycle (knowledge and understanding)
- Be familiar with the essential techniques, both qualitative and quantitative, of evalutation research (knowledge and understanding)
- Apply the counterfactual logic to the evalutaion of social policies and services and choose the most appropriate strategies to identify cause-effect relations between the implementation of a policy intervention and developments among its beneficiaries (applying knowledge and understanding)
- Autonomously interpret the results of evalutative empirical research carried out by others and identify potential issues connected to research design and data analsysis (making judgements)
- Master the specific terminology of social science methodology especially of evaluation research (communication)
- Be prepared to learn advanced research techniques in evaluation research, based on the skills developed in the course and follow-up deepening (learning skills)
- Oggetto:
Programma
Dopo un’introduzione sui vari possibili intenti e logiche della valutazione, l’insegnamento si soffermerà sui due principali approcci per valutare l’efficacia delle politiche pubbliche che perseguono finalità di cambiamento: l’analisi di implementazione e l’analisi di impatto. Gli approcci metodologici verranno illustrati con modalità quanto più possibile intuitive e non tecniche, tramite la presentazione di studi di caso nell’ambito delle politiche e dei servizi sociali.
Nel dettaglio, il programma prevede:
- Il ciclo delle politiche pubbliche
- Le diverse logiche della valutazione
- Concetti essenziali per la valutazione
- Efficacia, efficienza, prodotti, risultati, processi, impatto, bisogni
- Covariazione, causazione, concausazione, effetti multipli, influenza reciproca
- Valutazione di implementazione
- La black box dei processi attuativi
- Teoria del cambiamento e modello logico
- Approcci top-down e bottom-up
- Monitoraggio e valutazione in itinere
- Il benchmarking
- La prospettiva dei beneficiari
- Breve rassegna dei metodi di raccolta e analisi dati per la valutazione di implementazione: questionari, diari, metodo Delphi, interviste in profondità, focus group, osservazione partecipata
- Fondamenti di statistica univariata e bivariata
- Valutazione di impatto
- La logica controfattuale
- Confronti naif e problemi di validità (distorsione da selezione e dinamica spontanea)
- Disegni sperimentali
- Il metodo dello studio controllato randomizzato (RCT)
- Disegni non-sperimentali
- Il metodo della differenza nelle differenze
- La regressione e il suo uso per la valutazione di impatto
- Accenni a: metodo dell’abbinamento statistico (matching), analisi delle serie storiche, confronto intorno al punto di discontinuità
After an introduction on the different goals and logics of evaluation, the course will address the two main approaches to evaluate the effectiveness of public policies aimed at producing change: implementation analysis and impact analysis. The two methodological approaches will be presented in an intuitive and non-technical way, relying on case studies in the field of of social policies and social work.
More specifically, the program is the following:
- Public policy cycle
- The different logics of policy evaluation
- Key concepts for evaluation:
- Effectiveness, efficiency, outputs, results, processes, impacts, needs
- Correlation, causation, conjuctural causation, multiple effects, mutual influence
- Implementation evaluation:
- The black box of implementation processes
- Theory of change and logical model
- Top-down and bottom-up approaches
- Monitoring and ongoing evaluation
- Benchmarking
- The side of beneficiaries
- Review of methods for data collection and analysis used in implementation analysis: questionnaires, diaries, Delphi method, qualitative interviews, focus groups, participatory observation
- Statistical fundamentals: univariate and bivariate analysis
- Impact evaluation
- The counterfactual logic
- Naive comparisons and threats to validity (selection bias and pre-existing trends)
- Experimental designs
- Randomized control trials (RCT)
- Quasi-experimental designs
- Difference-in-differences method
- Regression analysis applied to impact evalutation
- (Shortly): statistical matching, time series analysis, regression discontinuity designs
- Oggetto:
Modalità di insegnamento
L’insegnamento è strutturato in 36 ore di didattica frontale.
Le attività saranno condotte con l'ausilio di strumenti utili a favorire l'autovalutazione di studenti e studentesse, in funzione del rafforzamento delle competenze (test periodici di autovalutazione e valutazione formativa).
La frequenza non è obbligatoria, ma caldamente consigliata.
The course has 36 hours of lectures.
Formative feedback and self-assessment will constitute an important part of the course, in order to strengthen students' hard and soft skills.
Attendance is not compulsory, but highly recommended.
- Oggetto:
Modalità di verifica dell'apprendimento
Il processo di apprendimento viene verificato in itinere a livello di gruppo-classe, tramite strumenti utili a favorire l'autovalutazione di studenti e studentesse (test periodici di autovalutazione e valutazione formativa).
Il giudizio finale è determinato dal risultato ottenuto nella prova finale, che consiste in un test scritto, uguale per frequentanti e non frequentanti. Il test comprende 2 domande a risposta aperta (6 punti ciascuna), alcuni quesiti a scelta multipla (da 2 o 3 punti ciascuno) e 1 semplice esercizio applicativo (8 punti). La valutazione è in trentesimi e data dalla somma dei punteggi ottenuti nelle risposte alle diverse domande.
Le domande sono volte a saggiare:
- La comprensione delle nozioni fondamentali presenti nei testi di riferimento e dettagliate nel Programma
- La capacità di applicare tali nozioni al campo delle politiche e dei servizi sociali
- L’abilità di interpretare in autonomia i risultati di ricerche empiriche svolte da altri
- La chiarezza espositiva e la padronanza del lessico specifico
- Le competenze critico-analitiche e di esemplificazione
La durata della prova è di 90 minuti.
The learning process will be a assessed during the course at the group-class level, through exercises and tools that facilitate student self-assessment (periodic tests of self-assessment and formative evaluation).
Learning outcomes will be assessed based on student achievement in the final exam. The exam is the same for students who regularly attended the lectures and those who did not. It is a traditional sit-down examination that comprises: 2 open-ended questions (6 points each), some multiple-choice questions (2 or 3 points each), and 1 simple applied exercize (8 points).
The questions will assess:
- Whether students have understood the fundamental notions of the course contained in the reference texts, as detailed in "Programma"
- The ability to apply such knowledge to the field of social policies and social work
- The ability to autonomously interpret the results of empirical research
- Clarity of writing (including the usage of disciplinary-specific language)
- Critical and analytical competences
Students have up to 90 minutes to complete the exam.
- Oggetto:
Attività di supporto
Non sono previste attività di didattica integrativa.
No specific activity.
Testi consigliati e bibliografia
- Oggetto:
- Libro
- Titolo:
- Valutare il successo delle politiche pubbliche
- Anno pubblicazione:
- 2009
- Editore:
- Il Mulino
- Autore:
- Alberto Martini; Marco Sisti
- Obbligatorio:
- Si
- Oggetto:
- Libro
- Titolo:
- Impact Evaluation in Practice
- Anno pubblicazione:
- 2011
- Editore:
- The International Bank for Reconstruction and Development / The World Bank.
- Autore:
- Gertler, Paul J., Sebastian Martinez, Patrick Premand, Laura B. Rawlings, e Christel M. J. Vermeersch
- Permalink:
- Capitoli:
- 6 Difference-in-differences; 7 Matching; 8 Combining methods
- Note testo:
- Il testo non è obbligatorio ma consigliato, per una maggiore comprensione della logica della valutazione di impatto
- Obbligatorio:
- No
- Oggetto:
- Libro
- Titolo:
- Politiche pubbliche. Analisi e valutazione
- Anno pubblicazione:
- 2020
- Editore:
- Il Mulino
- Autore:
- Antonio La Spina
- Capitoli:
- II: Il ciclo di una politica pubblica
- Note testo:
- Il capitolo è disponibile sulla piattaforma Moodle
- Obbligatorio:
- Si
- Oggetto:
- Libro
- Titolo:
- Metodologia e tecniche della ricerca sociale - Seconda edizione
- Anno pubblicazione:
- 2014
- Editore:
- Il Mulino
- Autore:
- Piergiorgio Corbetta
- Capitoli:
- XIII (L'analisi monovariata) e XIV (L'analisi bivariata)
- Note testo:
- Il testo è FORTEMENTE consigliato a chi non ha già dato, in passato, esami di metodologia della ricerca quantitativa
- Obbligatorio:
- No
- Oggetto:
Note
Studentesse e studenti sono invitati a iscriversi alla pagina Moodle dell'insegnamento (raggiungibile utilizzando il pulsante qui sotto) entro la prima lezione del corso. Sulla piattaforma Moodle saranno resi disponibili materiali didattici rivolti alle studentesse e agli studenti frequentanti e non frequentanti.
Per sostenere l'esame è necessario registrarsi sul sistema ESSE3. Gli iscritti all’esame che non intendono presentarsi il giorno dell’appello sono tenuti a cancellarsi attraverso il sistema ESSE3 oppure, nel caso ciò non sia possibile, ad avvisare la docente tramite e-mail.
Per studenti e studentesse Erasmus è prevista la possibilità di sostenere l’esame in inglese: si prega di contattare la docente con dovuto anticipo (almeno 10 giorni prima dell'appello) se si vuole usufruire di questa possibilità.
Students are invited to register on the Moodle page of the course (accessible using the button below) before the first lesson. The teaching material for both attending and non-attending students will be available on-line (Moodle platform).
To take the exam, students must register on the ESSE3 system. Students registered for the exam who are unable to be present on the appointed day are required to cancel by means of the ESSE3 system or, if this is not possible, to contact the instructor by e-mail.
Erasmus students may take the examination in English: please contact the istructor at least 10 days before the exam if you wish to take the exam in English.
- Oggetto:
