1. Open data Strikes again
Carlo Batini
carlo.batini@unimib.it
14 Marzo 2011
Universita’ degli Studi di Milano Bicocca
@ Carlo Batini 1
2. Contenuti
1. Cosa e’ stato fatto nel recente
passato?
2. Quali lezioni abbiamo appreso, e
come orientano il futuro?
@ Carlo Batini 2
3. Dati pubblici e rapporto
pubblico-privato-cittadino
Collettivita’
Servizio
Mercato
pubblico
Back
office Pubblico Riuso Privato
@
3 Carlo Batini
4. Questo grafico e’ del 1962
Rsappresenta i flussi informativi tra Amministrazioni
@ Carlo Batini 4
5. I principali eventi normativi
• Freedom of Information Act – USA – 1966
• Rapporto Mandelkern: D. Mandelkern,Diffusion
des données publiques et révolution numérique
Commissariat général du Plan, 1999.
• Libro verde sull’informazione del settore pubblico
nella società dell’informazione” della Commissione
europea, 2000
• Legge 240/2000 di semplificazione
• Data Quality Act – USA – 2001 (quality,
objectivity, utility, and integrity of information)
• European directive on the re-use of public sector
documents, 2003 (2012, in corso di revisione)
• Iniziative della Autorita’ per la Informatica nella
PA, anni 2000-2003.
@ Carlo Batini 5
7. Definizioni dei dati pubblici - 1
Dati accessibili pubblicamente Servizio pubblico
•riflette un aspetto legato alla legittimità della
consultazione da parte di soggetti comunque interessati.
Dati detenuti da un soggetto pubblico Riuso e mercato
•natura pubblica del titolare del trattamento (ad esempio:
dati anagrafici di persone e imprese) che può
eventualmente esserne anche il produttore. Accezione
adottata dalla UE.
Dati di interesse di un soggetto pubblico Back office
•natura pubblica del fruitore nell’interesse della
collettività e riguarda informazioni che, anche se
detenute da un soggetto privato, devono essere in
determinate condizioni rese accessibili ai soggetti pubblici
per il perseguimento di fini istituzionali.
@
7 Carlo Batini
8. Dati essenziali
Dati essenziali sono i dati pubblici dei quali i
cittadini, le imprese e altri operatori privati devono
poter disporre per esercitare i propri diritti. I dati
essenziali possono essere
•Dati generalmente conoscibili, anonimi, come le
norme e molti dati statistici
– Es. quale e’ la legge vigente?
•Dati a conoscibilita’ limitata o personali (la maggior
parte dei dati amministrativi); per questi ultimi è
necessario mettere a punto regole che ne
assicurino la protezione senza ostacolarne la
conoscibilità da parte degli aventi diritto Es.:
Dove e a che punto e’ la mia pratica?
@
8 Carlo Batini
10. Costo delle transazioni bancarie
$6,00
$5,00
$5,00
$ Cost per transaction
$4,00
$3,40
$3,00
$2,00
$1,00
$0,30
$0,10 $0,01
$0,00
Visit to Client goes Client goes Banking by Internet
Client to Teller to ATM Phone Banking
Fonte: Belltech - “America Economia”, Nov. 19, 1998, p. 209
@ Carlo Batini
10
11. Paradosso del Poligrafico Costo di consultazione
della GU 2000: Costava piu’ la informazione
elettronica di quella cartacea
L. 4.000
L. 3.500 L. 3.200
L. 3.000
Costo in L. per pagina
L. 2.500
L. 2.000
L. 1.500
L. 1.000
L. 500
L. 30
L. 0
Edizione su carta Edizione telematica
Fonte: elaborazione da dati IPZS - Il Sole-24 Ore, nov. 2000
@
11 Carlo Batini
12. Risultato
• Gazzetta Ufficiale Europea gratuita per
45 giorni
• Gazzetta Ufficiale Italiana gratuita per
60 giorni
@ Carlo Batini 12
13. Il back office G2G
Legge 340/2000 art. 25 comma 2
Le pubbliche amministrazioni di cui all’articolo 1,
comma 2, del decreto legislativo n. 29 del 1993
hanno accesso gratuito ai dati contenuti in
pubblici registri, elenchi, atti o documenti da
chiunque conoscibili
@ Carlo Batini 13
15. New interactions and technological
layers in G2C and G2B relationships
Data and services Common front office
service oriented layer
Front office Front office Front office
Central PA Local PA1 Local PA2
Front office Front office Front office
Back office Back office Back office
Central PA Local PA1 Local PA2
Central PA Local PA1 Local PA2
Back office Back office Back office
Central PA Local PA1 Local PA2
Internal information flows
Common back office
cooperative layer
a. Technological architecture b. Technological architecture
in the traditional interaction in the new interaction
@ Carlo Batini 15
16. Gli open data devono essere
collegati tra loro:
open linked data
@ Carlo Batini 16
17. May 2007 September 2008 July 2009
LOD Datasets
on the Web
September 2011
@ Carlo Batini 17
19. I dati sono tante nuvolette scollegate……
@ Carlo Batini 19
20. Primo livello: ai dati vanno associati indirizzi
in modo che siano “linked”
http://www.grgad.dd http://www.httyud.dd
http://www.ffrrt.gf http://www.jypt.gf
http://www.dsfad.dd
http://www.ffrrt.gf
http://www.bbbyud.dd
http://www.htread.dd
http://www.ffoot.gf
http://www.fkurrt.gf
http://www.cvbyud.dd
http://www.ffopt.gf
@ Carlo Batini 20
21. Primo livello: ai dati vanno associati indirizzi
in modo che siano “linked”
http://www.grgad.dd http://www.httyud.dd
http://www.ffrrt.gf http://www.jypt.gf
http://www.dsfad.dd
http://www.ffrrt.gf
http://www.bbbyud.dd
http://www.htread.dd
http://www.ffoot.gf
http://www.fkurrt.gf
http://www.cvbyud.dd
http://www.ffopt.gf
@ Carlo Batini 21
22. Secondo livello: ai dati vanno dati nomi
in modo che siano “linkable”
Decreto Legislativo Legge 23 agosto
5 dicembre 2003, n. 343
? 1988, n. 400
Capo I Gli organi del Governo
Art. 1
Sono prioritariamente inseriti
Gli Organi del Governo -
nel ruolo di cui al comma 1 i
Formula di giuramento
dirigenti già inquadrati nelle
1. Il Governo della Repubblica è
soppresse tabelle allegate alla
composto del Presidente del
legge 23 agosto 1988, n.
Consiglio dei ministri e dei
400, i dirigenti vincitori di
ministri, che costituiscono
concorso presso la Presidenza
insieme il Consiglio dei ministri.
e i dirigenti con incarico di
2. Il decreto di nomina del
prima fascia. La collocazione
Presidente del Consiglio dei
dei dirigenti nella posizione
ministri è da lui controfirmato,
soprannumeraria non comporta
insieme ai decreti di
alcun pregiudizio giuridico,
accettazione delle dimissioni
economico e di carriera.
del precedente Governo.
@ Carlo Batini 22
23. Assegnazione di nomi uniformi nel progetto
sulla Rete delle Leggi (Normainrete)
Uniform Resource Name (URN)
•consente di individuare i provvedimenti normativi, in base
ad elementi identificativi univoci
•circolare AIPA/CR/35 pubblicata su GU 10 novembre 2001
Esempio: legge 127 del 15 maggio del 1997:
urn:nir:stato:legge:1997-05-15;127
Autorità emittente Tipo di
provvedimento estremi
@ Carlo Batini 23
24. Secondo livello: ai dati vanno dati nomi
in modo che siano “linkable”
Decreto Legislativo
nir:stato:legge: Legge 23 agosto
nir:stato:legge:
5 dicembre 2003, n. 343
2003-12-05;343 1988, n. 400
1988-08-23;400
Capo I Gli organi del Governo
Art. 1
Sono prioritariamente inseriti
Gli Organi del Governo -
nel ruolo di cui al comma 1 i
Formula di giuramento
dirigenti già inquadrati nelle
1. Il Governo della Repubblica è
soppresse tabelle allegate alla
composto del Presidente del
legge 23 agosto 1988, n.
Consiglio dei ministri e dei
400, i dirigenti vincitori di
ministri, che costituiscono
concorso presso la Presidenza
insieme il Consiglio dei ministri.
e i dirigenti con incarico di
2. Il decreto di nomina del
prima fascia. La collocazione
Presidente del Consiglio dei
dei dirigenti nella posizione
ministri è da lui controfirmato,
soprannumeraria non comporta
insieme ai decreti di
alcun pregiudizio giuridico,
accettazione delle dimissioni
economico e di carriera.
del precedente Governo.
@ Carlo Batini 24
25. Terzo livello: i links devono essere individuabili
in modo che i dati siano “interlinked”
Trova CF dei contribuenti che
Dichiarano <= 30.000 € e
Hanno >= 1 Barche
Barca
Contribuente
possiede
dichiara
Contribuente
Reddito
@ Carlo Batini 25
26. Gli open data
devono essere corretti, completi,
aggiornati, consistenti
di qualita’
@ Carlo Batini 26
27. La stessa impresa è vista diversamente
alle Camere di Commercio, all’Inails, all’Inps
@ Carlo Batini 27
28. Gli open data
devono avere valore sociale
@ Carlo Batini 28
29. I dati su www.il.data.gov (Illinois)
@ Carlo Batini 29
33. Map of rest areas in Illinois
@ Carlo Batini 33
34. Gli open data devono essere riutilizzabili, ovvero
devono trasformarsi in open services*
*vedi Alfonso Fuggetta, Cefriel su
http://www.lavoce.info/articoli/pagina1002897.html
@ Carlo Batini 34
41. Freedom of Information Act – USA - 1966
• Il Freedom of Information Act (FOIA), "atto
per la libertà di informazione", è una legge sulla
libertà di informazione, emanata negli
Stati Uniti il 4 luglio 1966 dal presidente
Lyndon B. Johnson, che impone alle
amministrazioni pubbliche una serie di regole per
permettere a chiunque di sapere come opera il
Governo federale, comprendendo l'accesso
totale o parziale a documenti classificati.
@ Carlo Batini 41
42. Tipologie di dati essenziali
(Rapporto Mandelkern, Francia, 1995)
• Dati giuridici (atti normativi, la giurisprudenza)
• Dati statistici
• Dati geografici
• Dati ambientali
• Dati meteorologici
• Dati economici e finanziari
• Registri
@
42Carlo Batini
43. Public data available in UK - 1
• legislation - both primary and secondary
• explanatory notes on legislation
• Bills of Parliament
• Statutory Codes of Practice (eg the Highway
Code)
• annual reports and accounts
• policy circulars
• papers printed by the Command of Parliament
• court judgments
• tribunal reports
• proceedings of Parliament
• directories (Civil Service Year Book)
@
43Carlo Batini
44. Public data available in UK - 2
• historical information (including photographs and
official histories)
• guides (ie How to Pass Your Driving Test, Guide to
Public Records)
• statistical data about social and economic issues
• information which is available on public registers (e.g.
birth, death and marriage certificates)
• forms
• leaflets, brochures and newsletters
• manuals of procedure (eg manuals relating to the
application of VAT)
• mapping data and products
• scientific papers and articles
• medical classifications
• ministerial papers and speeches
@
44Carlo Batini
45. Data Quality Act – USA - 2001
• The Data Quality Act (DQA) passed through the
United States Congress in Section 515 of the
Consolidated Appropriations Act, 2001 (Pub.L. 106-554).
Because the Act was a two-sentence rider in a spending
bill, it had no name given in the actual legislation. The
Government Accountability Office calls it the
Information Quality Act, while others call it the Data
Quality Act.
• The DQA directs the Office of Management and Budget
(OMB) to issue government-wide guidelines that "provide
policy and procedural guidance to Federal agencies for
ensuring and maximizing the quality, objectivity, utility,
and integrity of information (including statistical
information) disseminated by Federal agencies".
@ Carlo Batini 45
46. Esempio
urn:nir:stato:legge:
Decreto Legislativo urn:nir:stato:legge:
Legge 23 agosto
5 dicembre 2003, n. 343
2003-12-05;343 1988-08-23;400
1988, n. 400
Sono prioritariamente inseriti Capo I Gli organi del Governo
nel ruolo di cui al comma 1 i Art. 1
dirigenti già inquadrati nelle Gli Organi del Governo - Formula di
soppresse tabelle allegate alla giuramento
legge 23 agosto 1988, n. 400, i 1. Il Governo della Repubblica è
dirigenti vincitori di concorso composto del Presidente del
presso la Presidenza e i dirigenti Consiglio dei ministri e dei ministri,
con incarico di prima fascia. La che costituiscono insieme il Consiglio
collocazione dei dirigenti nella dei ministri.
posizione soprannumeraria non 2. Il decreto di nomina del
comporta alcun pregiudizio Presidente del Consiglio dei ministri
giuridico, economico e di è da lui controfirmato, insieme ai
carriera. decreti di accettazione delle
dimissioni del precedente Governo.
@ Carlo Batini 46
47. Esempio: fiscalita’ locale
e contrasto alla evasione
Contribuente Barca
dichiara possiede
Reddito Contribuente
Trova CF dei contribuenti che
Dichiarano <= 30.000 € e
Hanno >= 1 Barche
@ Carlo Batini 47
48. Map of rest areas in Illinois
@ Carlo Batini 48