Data.gov.uk l'ouverture des données publiques au royaume uni
1. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
data.gov.uk
L’ouverture des données publiques au Royaume-Uni
Etalab
20 juillet 2011
Pierre Chrzanowski
pierre.chrzanowski@ambascience.co.uk
2. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
A l’origine, le mouvement open data
L’association de référence
Conférence annuelle OKCon
Définition de l’open data (opendefinition.org)
Nombreux projets (CKAN, wheredoesmymoneygo, opendatachallenge)
Les figures influentes
Tim Berners-Lee a convaincu Gordon Brown de lancer data.gov.uk
Co-auteurs des public data principles
Tim Berners-Lee, Nigel Shadbolt, Conseillers auprès du gouvernement
MIT Université de
Southampton
Le journal qui a popularisé l’open data au Royaume-Uni
Organisateur de la campagne Free our data
Pionnier du datajournalisme (guardian.co.uk/data)
MySociety.org
Plateforme d’applications « démocratiques »
2
3. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Les dates clés
Avril 2003 Juin 2010
Création des National Archives Création du Public Sector Transparency
Création de l’APPSI Board
(Advisory Panel on Public Sector
Information) Fin 2011 …
Création de la
Novembre 2003
Public Data Corporation
Directive européenne sur la
réutilisation des données publiques
Septembre 2010
Janvier 2005* Création de
Freedom of Information Act l’Open Government Licence (OGL)
Mars 2009 Janvier 2010
Gordon Brown : « Ok, let’s do it » Lancement officiel de data.gov.uk
2000 2005 2010
Janvier 2011
Lancement de la crime map sur
police.uk
Septembre 2009
Lancement du site wheredoesmymoneygo.org
Mars 2006
Campagne Free our data du Guardian
Mai 2004
Création de l’Open Knowledge Foundation
(OKFn)
(*) Date d’entrée en vigueur
3
4. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
L’open data au cœur de la politique britannique
Transparence améliorer l’image de l’État
scandale des notes de frais des députés, mai 2009
outil d’audit des administrations
Service public l’open data comme outil de la « Big Society* »
plus de pouvoir pour les citoyens
des services publics plus performants
Innovation: l’open data comme moteur de la croissance
marché de l’open data britannique évalué à 7 Md€**
… sans oublier l’émulation avec les États-Unis (data.gov)
et les projets locaux (London datastore)
(*) Mise en place par David Cameron
(**) Selon l’étude de l’Université de Cambridge, février 2008 : http://www.berr.gov.uk/files/file45136.pdf 4
5. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Lancement de data.gov.uk
6 développeurs à temps plein pendant 7 semaines
Septembre 2009: private beta
Janvier 2010: open beta (lancement officiel)
Comparaison des audiences de data.gov.uk, data.gov et london datastore en pourcentage du
nombre total d’internautes. Source : alexa.com
6. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Gouvernance et rôle des administrations Conseille le gouvernement sur
l’open data et la transparence
PM David Cameron Public Sector Transparency
Conseille le gouvernement Board
Cabinet office
sur les données publiques Représentants de l’open data
Transparency and Digital Team et des administrations
APPSI
Représentants du secteur de Elaboration / Mis en œuvre
l’information (public et privé)
Gère l’agenda
The National Archives
de data.gov.uk
(National Archives + OPSI + HMSO)
Practionners Group
Supporte la publication des données publiques
Ministerial and non-ministerial Department for Communities and Public Data Corporation
Ministerial and non-ministerial
departments
Ministerial and non-ministerial Local Government (en cours de création)
departments
departments
23 Trading Funds
Local governments
Administrations locales
Administrations locales Met Office
Ordnance Survey
L’administration choisit les données. L’administration choisit les données.
Publication sous licence OGL par défaut. Publication sous licence OGL
recommandée mais non obligatoire. Choix des licences et données
au cas par cas
Data.gov.uk
Catalogue de données publiques sous licence gratuite
6
7. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Architecture technique
data.gov.uk ne stocke pas les données, seulement les métadonnées
Datasets download Catalog of datasets download
http://data.gov.uk/data (rdf, json) Applications
http://data.gov.uk/data/dumps
SPARQL requests for linked data
Browse data
http://services.data.gov.uk/{theme}/sparql API requests
Acces to ckan repository
from data.gov.uk
Data.gov.uk
Data.gov.uk Ckan drupal module package ckan
Drupal website
Metadata synchronisation (*)
Data.gov.uk
Data catalog
Download data from url sources Acces data from url sources
{---}
{---}
{---}
+ {---}
{---}
{---}
Public Sector Information Raw data
(xls, rdf, csv, xml)
Metadata
(rdf, json)
Administrations servers
8. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Publication des données
1. Le producteur de données se déclare sur Exemples de jeux de données disponibles
data.gov.uk (création d’un compte publisher)
‐ Ensemble du budget de l’État (COINS)
‐ Dépenses supérieures à 25000£ pour les
administrations centrales
Compte validé
par l’équipe du ‐ Codes postaux géolocalisés
Cabinet Office ‐ Carte du Royaume-Uni (Ordnance Survey)
‐ Production de déchets par secteur et par ville
‐ Infections nosocomiales dans les hôpitaux
‐ Résultats du recensement
2. Référencement du jeu de données (url) ‐ Conseils aux voyageurs du FCO
et ajout des métadonnées associées ‐ etc.
3. Jeu de données disponible
sur le catalogue data.gov.uk
8
9. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Plus de 7200 jeux de données*
1200
Répartition par administration
989
1000
784
800 705
600
416
400 331
276 259 239 235 213 176 168 162 157 152 140 138
200 134 103 95
0
(*) au 11/07/2011, source data.gov.uk 9
10. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Des formats de diverses qualités
Qualité des données, classement du W3C
asp ★
unverified Publier vos données sur le web sous
4% xls
13% licence ouverte (peu importe le format)
25%
★★ ★★ Publier des données structurées
pdf
6% ★ (Excel au lieu de PDF)
html
★★★ Utiliser des formats non propriétaires
5%
★★★★
(CSV au lieu de Excel)
rdf 4% ★★★★ Utiliser des URIs pour identifier vos
(linked data) ★★★ données, et pouvoir les référencer
xml csv
★★★★★ Lier vos données à d’autres données
3% 40%
pour leur donner plus de sens (contexte)
Formats des jeux de données sur data.gov.uk* Source: www.w3.org/DesignIssues/LinkedData.html
(*) Statistiques établies au 11/07/2011 sur 3673 jeux de données.
Les données peuvent être disponibles sous différents formats. Source: data.gov.uk 10
11. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
160 applications*
Fix My Street Nestoria Air text
Signaler les dégradations urbaines Recherche immobilière Information temps réel
aux autorités locales Utilisation des données locales sur la qualité de l’air
fixmystreet.com nestoria.co.uk airtext.info
Find Pharmacies, Postbox, etc. Live train map Crime map
Trouver le plus proche … Position des métros en temps réel Délits et crimes recensés
Applications pour smartphone Utilise les API de TFL** dans un quartier
elbatrop.com traintimes.org.uk/map/tube police.uk
(*) déclarées sur data.gov.uk au 11/07/2011; (**) Transport For London. 11
12. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Des outils pour la transparence
Business Plans Who does what in Whitehall Open Spending
Suivi du plan d’action du Organigramme des Ministères Budget de l’État
Gouvernement et des Ministères avec postes et salaires des par département
hauts fonctionnaires
data.gov.uk/business_plans data.gov.uk/organogram openspending.org
12
13. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Bilan un an après, un sentiment de frustration …
Transparence Budget de l’État, dépenses et organigrammes des
administrations en ligne
Des résultats visibles, un premier bilan positif
Service public Période de réformes : Big Society et réductions budgétaires
L’open data n’a pas encore démontré sa capacité
à améliorer les services publics et engager les citoyens
Innovation Ni indicateurs, ni études d’impact. Des applications
prometteuses mais trop peu de services innovants
Développement d’un marché de l’open data:
toutes les barrières ne sont pas encore levées
« Les pouvoirs publics ont mis l’accent sur les données concernant la
transparence au dépend de données plus pratiques au quotidien»
Paul Clarke, The Guardian, janvier 2010
13
14. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
… aujourd’hui, une nouvelle impulsion du gouvernement
« l’ambition du Royaume-Uni est de devenir le leader mondial de l’open data »
Discours de George Osborne, Chancelier de l‘Échiquier, 17 mai 2011
Transparence Engagement du Premier Ministre pour l’ouverture de nouvelles données, juillet 2011
Transport, éducation, santé, justice
Service public Livre blanc « Open public services », juillet 2011
L’open data pour permettre aux citoyens de mieux choisir
les services publics qu’ils utilisent (médecins, écoles, etc.)
Innovation Création de la Public Data Corporation, fin 2011
Favoriser l’innovation
Libérer les données des Trading Funds
Arbitrage sur les licences et business models
14
15. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Points clés de la démarche open data britannique
Fondations
Choix d’une licence par défaut unique et ouverte en accord avec les standards open data (OGL)
Rédaction d’une charte open data non contraignante (Public Data Principles)
Pilotage administratif structuré (National Archives, Public Sector Transparency Board, Public Data
Corporation)
Mise en œuvre
Adoption des méthodes agiles
Choix de logiciels libres, gratuits (Drupal) et adaptés à l’open data (CKAN)
Architecture décentralisée et processus de publication souple
Ouverture des données
Bonne implication des administrations centrales (NHS, Bureau des Statistiques, Ministères)
Participation plus faible pour les collectivités territoriales
Absence de la plupart des Trading Funds, importants producteurs de données
Réutilisation
Absence d’indicateurs pour évaluer data.gov.uk (innovation, service public, transparence)
Implication encore trop faible des entrepreneurs (l’organisation de concours ne suffit pas)
Trop peu de données au format linked data pour en exploiter le potentiel
15
16. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Quels enseignements pour data.gouv.fr ?
Définition d’un cadre juridique clair avec une licence open data unique
Adoption des Public Data Principles
Processus de publication des données décentralisé, incrémental et participatif
Mise en place d’indicateurs pour évaluer data.gouv.fr
Les données les plus demandées par les développeurs sont les données locales et
géolocalisées
Développement d’un marché européen de l’open data: interopérabilité des licences,
promotion des formats standards, coopération entre gouvernements et acteurs locaux
Adaptation des services publics (collectivités territoriales, EPA, EPIC):
anticiper et saisir l’opportunité
16
17. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Dossier : data.gov.uk, l’ouverture des données publiques au
Royaume Uni, avril 2011: http://bit.ly/kfRqoA
www.ambascience.co.uk
17
18. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Annexe 1
Public Data Principles (principaux points)
l’ouverture des données doit être commandée par les citoyens et les
entrepreneurs ;
publier les données sauf si vous avez une bonne raison de ne pas le faire ;
publier les données avec une bonne granularité ;
publier les données dans des formats réutilisables ;
publier les données dans un seul format de licence, gratuit, ouvert et permettant
la réutilisation commerciale.
data.gov.uk/wiki/Public_Data_Principles
18
19. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Annexe 2
Arguments anti-open data entendus pour data.gov.uk*
It's held separately by n different organisations and we can't join it up
It will make people angry and scared without helping them
It is technically impossible
We do not own the data
The data is just too large to be published and used
Our website cannot hold files this large
We know the data is wrong, and people will tell us when it's wrong
People will draw superficial conclusions from the data without understanding the wider picture
People will construct league tables from it
It will generate more Freedom of Information requests
It might be combined with other data to identify individuals/sensitive information
It will cost too much to put it into a standard format
Our IT suppliers will charge us a fortune to do an ad hoc extract
19
(*) Andrew Stott, OKCon 2011
20. Service pour la Science et la Technologie
Ambassade de France au Royaume-Uni
Annexe 3
Exemple de métadonnées
www.hm-treasury.gov.uk/d/transparency_annexb100910.xls
Package Name
Title
Notes
Date released
Date updated
Update frequency
Geographical Granularity
Geographic coverage
Temporal Granularity
Temporal Coverage
URL Download URL
Download file format
Download description
Department Author
Licence Tags
20