Policy design analysis and evaluation

A.A. 2021/2022
12
Crediti massimi
80
Ore totali
SSD
INF/01 SPS/04
Lingua
Inglese
Obiettivi formativi
The students will be equipped with the conceptual and empirical tools to understand the most salient features and the most relevant consequences of today's processes in a number of significant social domains.
Risultati apprendimento attesi
By the end of the course students will acquire the ability to critically evaluate and discuss the impact, development and use of the topics covered during the course. The final exam aims to verify the expected learning outcomes in relation to these topics.
Programma e organizzazione didattica

Edizione unica

Responsabile
Periodo
Secondo trimestre
Programma
Lezione 00 - La mappa del corso
La prima lezione è dedicata a illustrare: (a) oggetto e obiettivi del corso; (b) le risorse a disposizione degli studenti; (c) il percorso di apprendimento.
Riferimenti:
A Schneider, H Ingram, Systematically pinching ideas, 10.1017/S0143814X00006851
A Schneider, H Ingram, Behavioral assumptions of policy tools, 10.2307/2131904


Modulo A _ La sostanza
Docente: A Damonte

Le politiche pubbliche sono soluzioni a problemi di rilevanza collettiva. In quanto tali, si sviluppano attorno a due ipotesi causali collegate. La prima considera che il comportamento di alcuni attori in specifiche situazioni sia responsabile del problema. La seconda ipotesi mantiene che, intervenendo sulla situazione o più direttamente sui comportamenti degli attori, il problema possa essere risolto o almeno alleviato.
Il modulo offre gli strumenti analitici per identificare le due ipotesi in contesti reali, con un approfondimento sull'uso dell'informazione come strumento di intervento.

Lezione 02 - Il focus delle politiche pubbliche: le situazioni
Riferimenti:
PA Sabatier, Theories of the Policy Process, Ch 2
Lezione 03 - Esempio e discussione
Riferimenti:
E Ostrom, Reflections on 'Some Unsettled Problems of Irrigation,' 10. 1257/aer.101.1.49

Lezione 04 - Fare le politiche pubbliche
Riferimenti:
PA Sabatier, Theories of the Policy Process, Ch 3, 7
Lezione 05 - Esempio e discussione
Riferimenti:
E Aukes, K Lulofs, & H Bressers, Framing mechanisms, 10.1080/19460171.2017.1314219

Lezione 06 - Informazione come regolazione
Riferimenti:
JG Kelley, BA Simmons. Politics by number, 10.1111/ajps.12119
Lezione 07 - Esempio e discussione
Riferimenti:
S Schueth, Winning the rankings game, 10.1017/CBO9781316161555.007

Lezione 08 - Destinatari o decisori?
Riferimenti:
L Bini M Bellucci, Accounting for Sustainability, Ch 2 10.1007/978-3-030-24954-0_2
Lezione 09 - Esempio e discussione
Riferimenti:
Adrian Zicari and Luis Perera Aldama, Value-Added Statements as a Communication Tool for Stakeholders, 10.1007/978-3-319-62785-4_9

Lezione 10 - Lavoro di gruppo: analisi e sviluppo di rendiconti non-finanziari
Lezione 11 - Lavoro di gruppo: analisi e sviluppo di rendiconti non-finanziari


Modulo B _ La forma
Docente: A Damonte

Le ipotesi causali riguardo al mondo condividono una struttura formale che le lenti della logica formale rendono evidenti. Il modulo introduce gli studenti al linguaggio e alle regole della logica di primo ordine e illustra le caratteristiche dell'inferenza valida.

Lezione 12 - Analisi degli argomenti e evidenze
Riferimenti:
P Phelan and P Reynolds, Argument and Evidence, Capp 2,4
Lezione 13 - Schemi di inferenza
Riferimenti:
P Phelan and P Reynolds, Argument and Evidence, Cap 5
Lezione 14 - Stabilire la validità
Riferimenti:
P Phelan and P Reynolds, Argument and Evidence, Cap 6
Lezione 15 - L'analisi critica in pratica
Riferimenti:
P Phelan and P Reynolds, Argument and Evidence, Cap 7
Lezione 16 - Assunti
Riferimenti:
P Phelan and P Reynolds, Argument and Evidence, Cap 8
Lezione 17 - L'evidenza come terreno della tenibilità: ma cosa conta come evidenza?
Riferimenti:
P Phelan and P Reynolds, Argument and Evidence, Capp 9,10

Lezione 18 - Test


Module C _ Stabilire la tenibilità con gli insiemi
Docente: A Damonte

L'Analisi Qualitativa Comparata (QCA) permette di stabilire la tenibilità delle ipotesi causali sfruttando la corrispondenza tra strutture della logica formale e relazioni tra insiemi. Il modulo introduce gli assunti specifici e la strategia che caratterizzano la tecnica con l'ausilio di un esempio reale.

Lezione 19 - Assegnare numeri a lettere: valori di appartenenza binari e fuzzy
Riferimenti:
A Dusa, QCA with R, Cap 4
Lezione 20 - Strumenti analitici: parametri di fit
Riferimenti:
A Dusa, QCA with R, Capp 5, 6
Lezione 21 - Strumenti analitici: la tavola di verità
Riferimenti:
A Dusa, QCA with R, Cap 7

Lezione 22 - Una QCA dall'inizio alla fine - Modellare una spiegazione configurativa
Lezione 23 - Una QCA dall'inizio alla fine - Analisi di necessità e aspettative direzionali
Lezione 24 - Una QCA dall'inizio alla fine - Analisi di sufficienza e minimizzazioni
Lezione 25 - Una QCA dall'inizio alla fine - Visualizzazione
Riferimenti:
Rihoux B, & CC Ragin. 2008. Configurational comparative methods. Ch 2, 3, 5
Damonte A, 2021. Modeling configurational explanations, 10.1017/ipo.2021.2

Lezione 26 - Lavoro di gruppo - Replicazione critica
Lezione 27 - Lavoro di gruppo - Replicazione critica
Lezione 28 - Lavoro di gruppo - Replicazione critica

Lezione 29 - Presentazione e discussione
Lezione 30 - Presentazione e discussione


Modulo D _ Stabilire la tenibilità con la probabilità frequentista
Docente: da definire

Implicitamente o esplicitamente, l'obiettivo di molta ricerca empirica consiste nell'interpretazione causale dell'occorrenza congiunta di fenomeni interessanti. Stabilire la causalità, però, è notoriamente difficile senza il lusso di evidenze sperimentali. Dopo aver presentato lo schema analitico dell'Outcome Potenziale come quadro analitico di riferimento per valide inferenze causali, il modulo introduce gli studenti alla teoria e pratica di quattro disegni per identificare affermazioni causali convincenti in assenza di dati sperimentali.

Lezione 31 - L'ideale sperimentale e il quadro analitico dell'Outcome Potenziale
Riferimenti:
Angrist and Pischke: Ch. 1 & 2
Dunning: Introduction, Ch. 5.1 (The Neyman model 5.1.1-5.1.5)

Lezione 32 - Instrumental Variables
Riferimenti:
Dunning, Ch. 4
Angrist and Pischke: Ch. 4
Card (1993), 10.3386/w4483
Class 33 - Sessione di laboratorio

Lezione 34 - Regression Discontinuity Design
Riferimenti:
Dunning: Ch. 3
Angrist and Pischke: Ch. 6
Lee (2007), 10.1016/j.jeconom.2007.05.004
Lezione 35 - Sessione di laboratorio

Lezione 36 - Matching
Riferimenti:
Angrist and Pischke: Ch. 3.3.1
Costalli & Negri (2021), 10.1017/ipo.2021.2
Lezione 37 - Sessione di laboratorio

Lezione 38 - Difference-in-Differences
Riferimenti:
Angrist and Pischke: Ch. 5.2 (Differences-in-Differences 5.2-5.2.1)
Card & Krueger (1993), 10.3386/w4509
Lezione 39 - Sessione di laboratorio

Lezione 40 - Domande e risposte
Prerequisiti
Il corso non presume particolari conoscenze pregresse; per il modulo D, facilita avere familiarità con l'analisi multivariata per le scienze sociali. Gli studenti sono caldamente invitati a utilizzare i propri portatili in classe e, specialmente dal modulo C, a installare la versione aggiornata di R e RStudio.
Metodi didattici
Il corso si svolge attraverso lezioni frontali, esercitazioni guidate su software, verifiche istantanee di comprensione, discussioni, lavori di gruppo, e presentazioni.
Materiale di riferimento
Modulo A
- Sabatier Paul A. 2007. Theories of the Policy Process. Boulder, CO: Westview Press. Ch. 2, 3, 7
- Schneider, A., & Ingram, H. 1988. Systematically pinching ideas: A comparative approach to policy design. Journal of public policy, 61-80.
- Schneider, A., & Ingram, H. 1990. Behavioral assumptions of policy tools. The journal of politics, 52(2), 510-529.
- Ostrom, E. 2011. Reflections on" Some unsettled problems of irrigation". American Economic Review, 101(1), 49-63.
- Aukes, E., Lulofs, K., & Bressers, H. 2018. Framing mechanisms: the interpretive policy entrepreneur's toolbox. Critical Policy Studies, 12(4), 406-427.
- Kelley, J. G., & Simmons, B. A. 2015. Politics by number: Indicators as social pressure in international relations. American journal of political science, 59(1), 55-70.
- Schueth, S. 2015. Winning the rankings game: The Republic of Georgia, USAID, and the Doing Business project. 151-177 in A Cooley, J Snyder (Eds). Ranking the World: Grading States as a Tool of Global Governance, 151-77.
- Bini L., Bellucci M. 2020. Accounting for Sustainability. 9-51 In: Integrated Sustainability Reporting. Springer, Cham.
- Zicari A., Aldama L.P. (2017) Value-Added Statements as a Communication Tool for Stakeholders: The Case of Industrias Peñoles in Mexico. 193-214 In: Freeman R., Kujala J., Sachs S. (eds) Stakeholder Engagement: Clinical Research Cases. Issues in Business Ethics, vol 46. Springer, Cham.

Modulo B
- Phelan, P. and Reynolds, P. 1996. Argument and Evidence: Critical Analysis for the Social Sciences. London: Routledge.

Modulo C
- Rihoux, B., and C.C. Ragin. 2008. Configurational comparative methods: Qualitative comparative analysis (QCA) and related techniques. Sage Publications. Ch 2, 3, 5.
- Dusa, A. 2019. QCA with R. Cham: Springer.
- Damonte, A. 2021. Modeling configurational explanations. Italian Political Science Review/Rivista Italiana di Scienza Politica, 1-16.

Modulo D
- Angrist, Joshua, and Jörn-Steffen Pischke. 2009. Mostly Harmless Econometrics: An Empiricist's Companion, Princeton: Princeton University Press.
- Dunning, Thad. 2012. Natural Experiments in the Social Sciences: a Design-Based Approach. Cambridge University Press.
- Card, D. 1993. Using geographic variation in college proximity to estimate the return to schooling. NBER working paper, (w4483).
- Card, D., & Krueger, A.B. 1993. Minimum wages and employment: A case study of the fast food industry in New Jersey and Pennsylvania (No. w4509). National Bureau of Economic Research.
- Costalli, S., & Negri, F. 2021. Looking for twins: how to build better counterfactuals with matching. Italian Political Science Review/Rivista Italiana di Scienza Politica, 1-16.
- Lee, D.S. 2008. Randomized experiments from non-random selection in US House elections. Journal of Econometrics, 142(2), 675-697.
Modalità di verifica dell’apprendimento e criteri di valutazione
Il corso sviluppa conoscenze e competenze per stabilire e valutare la tenibilità logica, causale, e empirica dei disegni di policy intesi come argomenti causali.

Gli studenti vengono quindi valutati per:

1. la partecipazione attiva.
Ogni lezione frontale includere modalità istantanee di verifica della comprensione, laboratori, discussioni, e presentazioni.
La partecipazione attiva garantisce fino a 6 punti del voto finale.

2. la capacità di sviluppare misure adeguate per la rendicontazione di risultati sociali, ambientali, di governance.
Nella parte conclusiva del modulo A, gli studenti sono organizzati in gruppi di lavoro sulla rendicontazione di risultati non-finanziari.
Un lavoro di gruppo efficace garantisce fino a 6 punti del voto finale.

3. la capacità di formalizzare un argomento di policy.
A conclusione del modulo B, gli studenti sono invitati a tradurre una ipotesi causale espressa in linguaggio naturale in un modello logico usando gli operatori Booleani.

4. la competenza nella replicazione di una analisi configurativa.
A conclusione del modulo C, a ciascun studente viene assegnata un'applicazione replicabile e pubblicata di QCA. In forma guidata, gli studenti producono uno script che risponde alle seguenti domande:
i) il modello: è configurativo?
ii) la selezione di casi e variabili grezze: assicura una adeguata verifica empirica?
iii) la calibratura: è replicabile?
iv) le aspettative direzionali: sono supportate empiricamente?
v) la tavola di verità: contiene primitive inconsistenti?
vi) le soluzioni: viene discussa quella 'meritevole'?
L'adeguato completamento dell'esercizio garantisce fino a 6 punti del voto finale.

5. la competenza nei disegni quasi-sperimentali.
A conclusione del modulo D, agli studenti verrà chiesto di replicare un lavoro sviluppato attorno a uno specifico disegno quasi-sperimentale, e di discuterne punti di forza e debolezza.
L'adeguato completamento dell'esercizio garantisce fino a 6 punti del voto finale.

Nel colloquio individuale conclusivo vengono rivelati i punti ottenuti durante l'intero corso e si apre l'opportunità di rivedere gli esercizi, discutere i limiti, e approfondire.
Il colloquio decide il voto finale e può garantire un aggiustamento fino a 3 punti.
INF/01 - INFORMATICA - CFU: 6
SPS/04 - SCIENZA POLITICA - CFU: 6
Lezioni: 80 ore
Docente/i
Ricevimento:
Giovedì 11.30-12.30 (studenti) - 13.30-15.30 (tesisti e dottorandi)
sopralzo, II piano, stanza 12 | VirtualOffice in Teams