1. Open Data
Produzione e distribuzione
e qualche spunto per il dataJournalism
Daniele Crespi
Responsabile Struttura Innovazione Digitale – ARIA SpA
Milano, 24 Luglio 2019
5. OBBLIGHI NORMATIVI
• Direttiva PSI 3.0 (2013/1024/UE), in vigore dal 16 giugno 2019
• Codice Amministrazione Digitale - CAD – Dlgs 7-3-2005, n. 82
• Decreto trasparenza – D.lgs 33/2013
• Il nuovo FOIA (Freedom of Information Act) - Decreto legislativo,
25/05/2016 n° 97, G.U. 08/06/2016
• Linee Guida Nazionali per la Valorizzazione del Patrimonio
Informativo Pubblico 2017 di AgID (3-8-2017)
• Quarto piano di azione nazionale dell’Open Government
Partnership (OGP)
• Piano Triennale per l’informatica nella Pubblica
Amministrazione 2019 – 2021
6. Cesare Battisti
Il trentino - 1898
[..] Di più avrei potuto fare, specialmente nel
campo statistico, se non ci fosse nel nostro
paese, e nei privati e negli enti morali, una tal
quale ritrosia a confidare al dominio del
pubblico dati, fatti e notizie.
7. Art. 1
l-bis) formato aperto: un formato di dati reso pubblico, documentato
esaustivamente e neutro rispetto agli strumenti tecnologici necessari per la
fruizione dei dati stessi;
l-ter) dati di tipo aperto: i dati che presentano le seguenti caratteristiche:
1) sono disponibili secondo i termini di una licenza o di una previsione
normativa che ne permetta l'utilizzo da parte di chiunque, anche per finalità
commerciali, in formato disaggregato;
2) sono accessibili attraverso le tecnologie dell'informazione e della
comunicazione, ivi comprese le reti telematiche pubbliche e private, in
formati aperti ai sensi della lettera l-bis), sono adatti all'utilizzo automatico
da parte di programmi per elaboratori e sono provvisti dei relativi metadati;
3) sono resi disponibili gratuitamente attraverso le tecnologie dell'informazione
e della comunicazione, ivi comprese le reti telematiche pubbliche e private,
oppure sono resi disponibili ai costi marginali sostenuti per la loro
riproduzione e divulgazione salvo quanto previsto dall'articolo 7 del decreto
legislativo 24 gennaio 2006, n. 36;
CAD – DLGS 82 DEL 2005 E S.M.I.
8. COSA VUOL DIRE FARE OPEN DATA
•Rendere i nostri dati pubblici
•In un formatostandard aperto e machine readable
•Con una licenza d’usoche ne consentail riutilizzoanche per
fini commercialial più chiedendo di citare la fonte
•Corredato da tutte quelle informazioninecessarie per
facilitare il riutilizzo(metadati)
comma-
separated
values
Shape
File
9. PERCHÉ FARE OPENDATA
I principali driver delle iniziative OpenData sono:
❑LA CREAZIONE DI SERVIZI A CITTADINI E IMPRESE
• Si abilitano soggetti terzi a creare servizi (e si risparmia)
❑LA CREAZIONE DI NUOVA ECONOMIA
• Si abilitano nuovi mercati, nuove imprese
❑L’AUMENTO DELLA TRASPARENZA
• Volontà di rendere pubblica l’azione di governo
❑POLITICHE BASATE SUI DATI
• Facilitare decisioni basate sui dati
• Dare conto delle scelte
10. Rilascio di
Opendata
Raccolta,
catalogazione,
raffinamento,
pubblicazione
Riuso di
OpenData
Consumo di
OpenData
Dati “grezzi” Dati “raffinati” Prodotti e servizi
pronti all’uso
Enti Pubblici
ICT in-house
Abilitatori no-profit
Abilitatori orientati
al profitto
Società civile
Imprese che
offrono servizi
Imprese che
offrono prodotti
Imprese
“utilizzatrici”
Cittadini
Enti Pubblici
Dati “puliti” e “aggiornati”
LA CATENA DEL VALORE
20. dati che aiutano i cittadini
a fare le scelte !
Un possibile punto di vista …..
21.
22. ASPETTI DELLA QUALITÀ DELLA VITA NEL MODELLO OCSE
Abitazione
Reddito
Lavoro
Comunità e Famiglia
Educazione
Ambiente
Libertà politica e Impegno civico
Salute
Soddisfazione
Sicurezza
Bilanciamento lavoro-tempo libero
23. ESEMPI DI OPENDATA CON VALORE SOCIALE
• Salute → Sto bene
– Informazioni su Qualità degli ospedali
– Informazioni su Qualità dei medici di base
– Informazioni su Livelli di inquinamento e loro pericolosità
• Sicurezza → Sono protetto
– Informazioni su intensità dei reati e tipologie dei reati nelle
diverse aree di un territorio.
– Informazioni sugli incidenti automobilistici e loro tipologia sulla
rete dei trasporti.
• Lavoro → Ho un reddito per vivere
– Informazioni sulle opportunità di lavoro
• Ambiente → Vivo in un luogo salubre e
piacevole
– Informazioni su Aree verdi, trasporti, ingorghi.
24. IT’S AN OLD STORY …
John Snow studia l’epidemia di colera a Soho nel 1854, basandosi sui dati
dei morti e delle pompe dell’acqua
34. OPENDATA IN ITALIA
52.448 dataset pubblicati 660 Organizzazioni
Fonte: http://www.sciamlab.com/opendatahub/it (dati rilevati il 21-7-2019)
1. Regione Lombardia (4.381)*
2. Prov. Autonoma Trento (4.141)
3. Regione Val d’Aosta (2.166)
4. Regione Emilia Romagna (2.076)
5. ISTAT (1.819)
6. INPS (1.583)
7. Consorzio Lamma (1.550)
8. Ministero dell’Economia (1.393)
9. Comune di Firenze (1.363)
10.Regione Liguria (1.304)
11.Regione Piemonte (1.294)
12.Regione Sardegna (1.214)
13.Comune di Albano Laziale (1.189)
14.Roma Capitale (1.187)
15.Comune di Milano (964)
16.Comune di Palermo (825)
17.Regione Toscana (760)
18.Provincia Bolzano (699)
19.Comune di Pisa (675)
20.ENEL (657)
21. Regione Basilicata (499)
22. Comune di Torino (442)
23. Comune di Cesena (425)
24. Comune di Lecce (383)
25. Regione Veneto (375)
26. Città Metropolitana Firenze (373)
27. Regione Umbria (368)
28. Regione Lazio (362)
29. Regione FVG (329)
30. Comune di Arezzo (325)
31. Provincia di Lodi (308)
32. Città Metropolitana di Milano (279)
35. PORTALI DI PROGETTO
Opencantieri raccoglie, e integra fra loro, le informazioni
sulla realizzazione delle infrastrutture strategiche nazionali.
Geolocalizzazione degli immobili dello Stato
36. PORTALI DI PROGETTO
Il progetto “Scuola in chiaro” nasce nel 2011 per rispondere
all’esigenza di mettere a disposizione della collettività tutte
le informazioni disponibili relative alle scuole italiane di ogni
ordine e grado, in una forma organica e strutturata.
È online dati.consip.it, il portale dedicato alla valorizzazione e alla
diffusione del patrimonio informativo di Consip. Comunicazione,
collaborazione e aggregazione sono le parole chiave del progetto che nella
fase di lancio mette a disposizione di pubbliche amministrazioni, imprese
e cittadini i dati in formato aperto del Programma per la razionalizzazione
degli acquisti della Pubblica Amministrazione, realizzato dal Ministero
dell’Economia e delle Finanze attraverso Consip.
41. ALCUNI DATI RILEVANTI
Tutti i sensori qualità dell’aria, qualità delle acque e meteo dal
1968, oltre 650 milioni di record, aggiornati ogni 6 ore.
Decine di dataset della Sanità incluso dati di performance.
Sezione dedicata all’Osservatorio Epidemiologico
Parco Autoveicoli (8,5 mln), snapshot ogni 3 mesi
Catasto Impianti Termici (caldaie) – oltre 3 mln di record
Catasto Certificazioni Energetiche Edifici – oltre 1 mln di record
49. DUE «OSSESSIONI»
2. Qualità dei dati
Miglioramento continuo
Correzione di ogni segnalazione
Tool di verifica qualità
Progetto con Università Milano Bicocca
53. Dicembre 2012
Delibera Open Data
per Enti Locali
Luglio 2014
Primo elenco di
«dataset consigliati»
2014-2017
18 Enti Locali
INGAGGIO ENTI LOCALI – FASE 1
54. Ottobre 2017
Co-finanziamento
per Enti Locali
Dicembre 2017
136 enti locali
aderenti con > 1.500
datasets
Gen-Dic 2018
Formazione e
supporto
INGAGGIO ENTI LOCALI – FASE 2
55. Co-finanziamenti per gli Enti Locali che pubblicano Open Data
2 CONDIZIONI
10 o 25 dataset
scelti nel paniere definito
da Regione Lombardia
Processi di pubblicazione
automatizzati
AZIONI DI STIMOLO E SUPPORTO
57. STATO AVANZAMENTO PUBBLICAZIONE DATASET EELL
ENTI ADERENTI e FINANZIATI 120
ENTI CON UTENTE publisher registrato 120
ENTI con dataset pubblicati 120
ENTI che hanno raggiunto l’obiettivo 107
TOTALE DATASET PUBBLICATI 1.374
58. STATO AVANZAMENTO PUBBLICAZIONE DATASET EELL
TRASPARENZA 380 28%
TERRITORIO 281 20%
MOBILITA’ E TRASPORTI 197 14%
STATISTICA 179 13%
AMBIENTE 127 9%
COMMERCIO 70 5%
CULTURA 42 3%
TURISMO 34 2%
ENERGIA 32 2%
SICUREZZA 32 2%
59. STATO AVANZAMENTO PUBBLICAZIONE DATASET EELL
Nome Dataset NUM %
1 Rete viaria - Toponimi stradali 88 73%
2 Enti controllati – Società partecipate 68 57%
3 Provvedimenti degli organi di indirizzo politico 68 57%
4 Provvedimenti dei dirigenti 63 53%
5 Elenco immobili di proprietà 58 48%
6 Risultati elezioni comunali 56 47%
7 Pratiche edilizie 54 45%
8 Risultati elezioni regionali 52 43%
9 Risultati elezioni nazionali 51 43%
10 Aree Verdi Informazioni 48 40%
11 Parcheggi 46 38%
12 Quantità rifiuti prodotta 46 38%
13 Autoscuole 44 37%
14 Pratiche SUAP 40 33%
15 Centri revisione auto 40 33%
60. STATO AVANZAMENTO PUBBLICAZIONE DATASET EELL
Nome Dataset NUM %
16 Rete viaria - Numeri civici 39 33%
17 Contributi e sussidi 38 32%
18 Aree di sosta per disabili 37 31%
19 Elenco canoni di locazione 34 28%
20 Accompagnatori turistici 34 28%
21 Albo provinciale manutentori impianti termici 32 27%
22 Eventi 31 26%
23 HotSpot wifi 30 25%
24 Elenco degli impianti di depurazione 25 21%
25 Enti controllati – Enti pubblici vigilati 23 19%
26 Aree di sosta 21 18%
27 Condizione lavorativa 20 17%
28 Servizi alla persona 19 16%
29 Area per sgambatura cani 15 13%
30 Enti controllati – Enti di diritto privato controllati 15 13%
61. STATO AVANZAMENTO PUBBLICAZIONE DATASET EELL
Nome Dataset NUM %
31 Piste ciclabili 13 11%
32 Monitoraggio procedimenti 13 11%
33 Principali infrazioni al Codice della Strada 12 10%
34 Pubblici esercizi 11 9%
35 Beni artistici e architettonici 11 9%
36 Incidenti stradali 10 8%
37 Rete viaria - Dataset geografico 8 7%
38 Aree pedonali 8 7%
39 Aree Verdi 8 7%
40 Punti di ricarica veicoli 8 7%
41 Varchi ZTL 7 6%
42 Bike sharing 7 6%
43 Mappa ZTL 6 5%
44 Controlli in cantiere effettuati dalla Polizia Locale 6 5%
45 Cantieri stradali 4 3%
46 Provvedimenti adottati dalla Polizia Locale in materia di commercio 4 3%
47 Elenco beni confiscati 3 3%
48 Carta degli incendi 0 0%
49 Orario Trasporto Pubblico 0 0%
50 Flussi turistici 0 0%
62. Esempi di DATI
e di riutilizzi dei dati
del portale
www.dati.lombardia.it
63. MA C’È CHI RIUSA I DATI?
https://www.dati.lombardia.it/Government/Utilizzo-dei-dataset/m58v-fh6e
65. COLLABORAZIONI E RIUSI
Università e Ricerca : didattica, laboratori, tesi, ricerca
Civic hackers: diffusione, confronto
DataJournalism: diffusione, confronto, riuso
69. DATI SANITARI APERTI
▪Indicatori ricoveri per reparto
▪Prestazioni Ambulatoriali
▪Casi di ricovero e Accessi di DH per DRG
▪Ricoveri ripetuti all’interno dello stesso ospedale
▪Casi ordinari con degenza di 2-3 giorni
▪Casi ordinari con degenza di 4-5 giorni
▪Procedure effettuate in ambulatorio
▪Numero di accessi per Day Hospital
▪Casi di ricovero e Accessi di DH per Struttura erogante il ricovero
▪Mobilità attiva per Regione
▪Casi di ricovero e Accessi di DH per Asl di Residenza del cittadino
▪Conteggio Cittadini Esenti per Territorio di Residenza
▪Casi di ricovero e Accessi di DH per Reparto
▪Casi complicati
87. I CITTADINI SI ORGANIZZANO
«La campagna di rilevazione dell’NO2 condotta dai cittadini ci ha
offerto l’opportunità unica di sviluppare un modello di machine
learning sui dati al fine di stimare le concentrazioni medie annue di
NO2 sull’intera area di Milano», spiega Massimo Stafoggia, del
Dipartimento di Epidemiologia - Servizio Sanitario Regione Lazio, «Si
tratta della prima volta in Italia in cui una tecnica di questo tipo viene
“addestrata” sui dati rilevati dai cittadini ed “esportata” sull’intero
territorio comunale. Essa presenta il vantaggio unico di “imparare” dai
dati misurati, e predire i livelli di inquinamento a una elevata
risoluzione spaziale, con margini di incertezza contenuti. Inoltre, la
quantità di dati misurati, oltre 200 punti di misura, ha permesso lo
sviluppo di un modello robusto e riproducibile. Le stime di
inquinamento ottenute hanno permesso di quantificare l’impatto
dell’NO2 sulla popolazione dell’intera città di Milano, fornendo
evidenze uniche e preziose ai decisori a livello comunale».
88. ESEMPI DI DATAJOURNALISM CON I NOSTRI DATI
Varese News – Auto diesel sottoposte a fermo
https://www.varesenews.it/2018/10/limitazioni-auto-diesel-1-10-veicoli-coinvolti-
provincia/759011/
Varese News – Strutture ricettive in provincia di Varese
https://www.varesenews.it/2018/06/nelle-strutture-ricettive-del-varesotto-24mila-posti-letto-
turisti/721716/
Varese News – Piste da Sci
https://www.varesenews.it/2017/11/le-mete-lombarde-andare-sciare/673366/
Varese News – Analisi parco autoveicoli provincia di Varese
http://www.varesenews.it/2017/09/unauto-ogni-due-abitanti-nei-garage-varesini/649917/
90. ESEMPI DI DATAJOURNALISM CON I NOSTRI DATI
Eco di Bergamo – Negozi Storici
https://www.ecodibergamo.it/stories/bassa-bergamasca/negozi-storici-48-nuovi-
riconoscimentibergamo-entrano-cornaro-e-le-delizie_1202616_11/
Eco di Bergamo – ZTL
https://www.ecodibergamo.it/stories/Cronaca/citta-alta-stop-alle-auto-
abusivetelecamere-ai-varchi-ecco-dove_1147545_11/
Eco di Bergamo – Incidenti stradali
https://www.ecodibergamo.it/stories/bergamo-citta/incidenti-stradali-a-bergamo-nel-
2015ecco-la-mappa-dei-punti-piu-a-rischio_1179902_11/
Eco di Bergamo – Siti contaminati in provincia di Bergamo
https://www.ecodibergamo.it/stories/bassa-bergamasca/siti-contaminati-e-a-rischio-
incidenteecco-dove-sono-in-provincia-di-bergamo_1278302_11/
Eco di Bergamo – Precipitazioni eccezionali fine ottobre 2018
https://www.ecodibergamo.it/stories/isola/rischio-frana-altri-10-sfollati-a-valleve-i-dati-
arpa-spiegano-il-record-maltem_1293374_11/
97. ESEMPI DI DATAJOURNALISM CON I NOSTRI DATI
Gruppo netweek – Centri antiviolenza
https://bresciasettegiorni.it/attualita/violenza-sulle-donne-in-lombardia-crescono-i-casi-e-il-coraggio-di-denunciarli/
https://giornaledisondrio.it/cronaca/violenza-sulle-donne-in-lombardia-crescono-i-casi-e-il-coraggio-di-denunciarli/
https://giornaleditreviglio.it/cronaca/violenza-sulle-donne-in-lombardia-crescono-i-casi-e-il-coraggio-di-denunciarli/
https://lamartesana.it/altro/violenza-sulle-donne-in-lombardia-crescono-i-casi-e-il-coraggio-di-denunciarli/
https://giornaledilecco.it/cronaca/violenza-sulle-donne-in-lombardia-crescono-i-casi-e-il-coraggio-di-denunciarli/
https://giornaledicomo.it/attualita/violenza-sulle-donne-in-lombardia-crescono-i-casi-e-il-coraggio-di-denunciarli/
https://giornaledimonza.it/cronaca/violenza-sulle-donne-in-lombardia-crescono-i-casi-e-il-coraggio-di-denunciarli/
https://varesesettegiorni.it/cronaca/violenza-sulle-donne-in-lombardia-crescono-i-casi-e-il-coraggio-di-denunciarli/
https://giornaledimantova.it/cronaca/violenza-sulle-donne-in-lombardia-crescono-i-casi-e-il-coraggio-di-denunciarli/
https://giornaledicremona.it/cronaca/violenza-sulle-donne-in-lombardia-crescono-i-casi-e-il-coraggio-di-denunciarli/
98. ESEMPI DI DATAJOURNALISM CON I NOSTRI DATI
Monza Today – Strade obbligo catene in provincia di Monza
http://www.monzatoday.it/cronaca/quali-strade-obbligo-catene-brianza.html
Lecco Notizie – Sagre e fiere
https://www.lecconotizie.com/attualita/da-oggi-tutte-le-sagre-e-le-fiere-di-lombardia-in-un-click-
376146/
Milano Città Stato – Impianti sportivi
http://www.milanocittastato.it/featured/fare-sport-a-milano/
LombardiaSociale – Analisi servizi sociali
http://www.lombardiasociale.it/2015/05/08/i-servizi-residenziali-in-lombardia-tra-dotazione-ed-
equita-territoriale/
SaluteInternazionale.info – Pazienti cronici
http://www.saluteinternazionale.info/2018/04/lombardia-in-che-mani-finiranno-i-pazienti-cronici/
Tableau Public – Analisi demografiche Bergamo
https://public.tableau.com/views/Bergamodemographicstatistics/Dash?%3Aembed=y&%3AshowVi
zHome=no&%3Adisplay_count=y&%3Adisplay_static_image=y&%3AbootstrapWhenNotified=true
99. ESEMPI DI RIUSO – APP SAGRE IN LOMBARDIA
https://play.google.com/store/apps/details?id=org.altervista.luma23.sagrelombarde