A.M. Digrandi, Raccolta dati e produzione di informazione statistica ufficiale sul trasporto marittimo - Micro e big data per le analisi economiche sul trasporto marittimo

Micro e big data per le analisi economiche sul
trasporto marittimo
Angela Maria Digrandi
Responsabile dell’Ufficio territoriale per le Marche, l’Abruzzo e la Puglia | Istat
L’informazione statistica ufficiale sul trasporto marittimo tra integrazione e
innovazione
Ancona | 27 febbraio 2019 Sala Marconi | Molo Santa Maria
Ancona- Autorità portuale 27 febbraio 2019

Acquisizione e trattamento dei dati: fonti amministrative e strumenti
• Implementazione e gestione degli archivi amministrativi
• Strumenti statistici di controllo e correzione degli errori
La rete territoriale per la produzione dei dati
• Organizzazione
• Rapporti inter istituzionali
Le innovazioni
• Sperimentazione di sistemi innovativi per la raccolta dati
Indice

Utilizzo degli archivi amministrativi per l’identificazione dell’unità di
rilevazione e per la costruzione della filiera informativa
Attraverso il linkage con i dati contenuti nell’archivio Asia (Archivio
Statistico delle Imprese Attive) dell’Istat si è proceduto a:
- ricostruire i codici fiscali (attraverso i codici di partita IVA)
- inserire lo stato di attività o meno dell’impresa in Asia (ultimo stato data
inizio)
- Attribuire la corretta ragione sociale
Implementazione e gestione degli archivi amministrativi

Risultati
• una anagrafica delle unità di rilevazione costantemente aggiornata
• un archivio della struttura delle relazioni tra Soggetto
Gestore/Proprietario della nave e Agente marittimo/spedizioniere

ANAGRAFICA
AGENZIE
Codice Agenzia 3xxx
Ragione Sociale
Indirizzo
Corso Vittorio
Emanuele II
Cap 7xx123
Comune Taranto
Prov TA
Tel
Fax 099
E-mail a@i.net
P.IVA / C.F. yyyyyyyyyyyy
ARCHIVIO RISPONDENTI*
Codice Utente Agenzia TAR00
Stato Dell'utenza Attiva
Data Di Variazione Dello Stato ---
Password Iniziale tr99999978s
Ragione Sociale Agenzia xxxxsrl
P.IVA / C.F. Agenzia yyyyyyyyyy
Indirizzo Agenzia d@email.it
Cap Agenzia
Corso Vittorio
Emanuele II
Comune Agenzia 74123
Prov Agenzia Taranto
Ragione Sociale Compilatore TA
Referente Compilatore DAxx srl
E-mail Referente Dxxx
ANAGRAFICA SPEDIZIONIERI
Codice Spedizioniere 144
Ragione Sociale DAxxsrl
Indirizzo via Roma
Cap 74123
Comune Taranto
Prov TA
Tel 099
Fax 099
E-mail dxxx@email.it
Referente P Dxxx
Note

Archivio della struttura delle relazioni tra soggetto
Gestore/Proprietario della nave e Agente marittimo/
Spedizioniere
RISPONDENTI INFO ACCESSO SISTEMA
Codice Utente TAR0
Ragione Sociale Agenzia srl
Pwd Iniziale txxxxxxxxx
Accesso 2
Data Primo Accesso 2013-01-11 17:03:35
Data Ultimo Accesso 2019-01-04
Data Creazione Utente 2013-01-03 11:58:21
MODELLI INSERITI UTENTI
Codice TAR0000
Ordine xx
Tipo 2x
Anno 2018
Data Del Viaggio 05/12/2018
Imo 9xyyyyyyy
Nome Della Nave Vxxxxxxxxx
Codice Del Porto Dichiarante IT00ITTAR
Data Di Arrivo 20181206085833
Stato D
Modello Da Upload no
Ta1rec 0
Ta2rec 0
Ta3rec 0
Ta4rec 0
Ta51rec 0
Ta52rec 0
Ta6rec 1
Ta7rec 0
Ta7arec 0

A. AGENZIA MARITTIMA (SOGGETTO ACCREDITATO)
NOME e COGNOME _____________________________________________________________________
RAGIONE SOCIALE ______________________________________________________________________
INDIRIZZO SOCIETÀ ____________________________________________________________________
P. IVA ___________________________________________________________________________________
COD. FISC. ______________________________________________________________________________
CITTA’____________________PROVINCIA_______________________________ CAP________________
tel.  fax. 
E-mail ________________________________________________________
Posta elettronica certificata (PEC)_________________________________
B. EVENTUALE SOGGETTO INCARICATO ALL’INVIO DEI DATI
NOME e COGNOME _____________________________________________________________________
RAGIONE SOCIALE ______________________________________________________________________
INDIRIZZO SOCIETÀ____________________________________________________________________
P. IVA ___________________________________________________________________________________
COD. FISC. ______________________________________________________________________________
CITTA’____________________PROVINCIA_______________________________ CAP________________
tel.  fax. 
E-mail ________________________________________________________
Posta elettronica certificata (PEC)_________________________________
Titolaredeidatieresponsabiledeltrattamento
Aisensidell’art.24delRegolamento(UE)2016/679,titolaredeltrattamentodeidatipersonaliraccolticonlapresenteindagine
l’Istat – Istituto nazionale di statistica, Via Cesare Balbo, 16 – 00184 Roma che per le fasi del processo statistico di rispetti
competenzahaattribuitospecificicompitiefunzioniconnessialtrattamentodeidatipersonali(art.2–quaterdeciesd.lgs.196/200
alDirettorecentraleperlestatisticheambientalieterritorialieilDirettorecentraleperlaraccoltadatidell’Istat.
https://indata.istat.it/tramar,
marestat@istat.it,

L’identificazione dell’unità di rilevazione e la costruzione della filiera
informativa:
Le unità di rilevazione sono i rispondenti (Agenti marittimi), ma le unità di
analisi sono i viaggi di arrivo e partenza di ciascuna nave che rientri nel
campo di osservazione dell’indagine TRAMAR.
Il record dei microdati dell’indagine TRAMAR contiene:
• Le informazioni sul porto O/D
• I dati identificativi del rispondente, cioè un’anagrafica costituita da
ragione sociale dell’agenzia-Indirizzo della sede - Codice Fiscale – Partita
IVA (la doppia informazione su C.F. e P. IVA viene richiesta dal 2019)
• Il codice identificativo del singolo viaggio di arrivo e partenza (VISIT ID)
rilasciato dalla Capitaneria
• Il codice di accesso al sistema protetto di inserimento dati reso
disponibile da Istat, INDATA

Criticità preliminari all’applicazione di strumenti statistici:
1. Valutazione di completezza e tempestività: presenza di dati mancanti
al tempo t1 (mese di riferimento dell’evento); ritardo nel
completamento della rilevazione ( t3, a 3 mesi dalla data di
riferimento dell’evento)
2. Difficoltà nell’ottenimento di una misura accurata dai dati mancanti o
incongruenti; imprecisione/assenza di variabili strategiche
caratterizzanti l’evento
3. Difficoltà nell’individuazione di viaggi eventualmente mancanti: viaggi
registrati con dati parzialmente differenti tra i vari sistemi di
acquisizione; viaggi registrati da Agenzie/Spedizionieri che utilizzano
riferimenti a ragioni sociali parzialmente o del tutto diversi per
indicare gli stessi attori
Strumenti statistici di controllo e correzione degli errori

L’identificazione dell’unità di rilevazione e la costruzione della filiera
informativa: criticità…
• informazioni sul porto O/D. Criticità: erronea codifica/mancata codifica
• Dati identificativi del rispondente (Ragione sociale-Indirizzo-Codice
Fiscale–Partita IVA. Criticità: mancato aggiornamento delle variazioni
anagrafiche e/o delle modifiche di forma societaria. Richieste di nuovi ID
di accesso al sistema senza comunicazione degli ID da eliminare
• Codice identificativo del singolo viaggio, VISIT ID, rilasciato dalla
Capitaneria. Criticità: assenza del VISIT ID; casi isolati di VISIT ID
duplicati per viaggi diversi di una stessa nave.

• Imputazione di osservazioni mancati al tempo t1 (check mirror)
• Data cleaning process attraverso l’uso di algoritmi che eliminano la
ridondanza e l’errore sistematico
• Linkage con fonti informative di pari livello al tempo t1 e al tempo t-1

Analisi di copertura:
metodo del
check mirror
fra porti di origine e i
porti di destinazione:
il caso Puglia
• Imputazione di osservazioni mancati al
tempo t1 (check mirror)

• Linkage con fonti informative di pari livello al tempo t1 (sistemi
informativi delle Capitanerie) e al tempo t-1
Chiave di linkage: Tipo del
viaggio (A/P), Data del viaggio,
Codice IMO e Codice del Porto
Dichiarante
Esito record linkage v.a. %
Dichiarazioni NON presenti in Tramarint 1,248 37.91
1 Dichiar. Capitaneria : 0 Mod. Tram 1,243 37.76
2 Dichiar. Capitaneria : 0 Mod. Tram 5 0.15
Dichiarazioni presenti in Tramarint 2,044 62.09
1 Dichiar. Capitaneria : 1 Mod. Tram 2,024 61.48
Totale 3,292 100.00Data del linkage 26/10/2018

Chiave di linkage: Tipo del viaggio (A/P), Data del viaggio, Codice IMO
e Codice del Porto Dichiarante
Al 26/10/2018
Esito record linkage v.a. %
Modelli NON presenti nel file della
Capitaneria 394 16.16
1 Mod. Tram : 0 Dichiar. Capitaneria 389 15.96
Modelli presenti nel file della
Capitaneria 2,044 83.84
1 Mod. Tram : 1 Dichiar. Capitaneria 2,024 83.02
Totale 2,438 100.00
Modelli presenti in
TRAMAR relativi al
Porto di XXXXXX
per esito del linkage
con le Dichiarazioni
presenti nei file
della Capitaneria -
anno 2018

Data cleaning process attraverso l’uso di algoritmi che
eliminano la ridondanza e l’errore sistematico
24 52 97 115 63
24 52 97 115 63
18 45 28 18
18 45 28 18
Mag Giu Lug Ago Set
Porto A isola totale
agenzia X
Porto B terraferma totale
agenzia x
Caso:
Movimenti di navi in
Cabotaggio insulare

• Rete degli Uffici Territoriali Istat
• Rapporti inter istituzionali
Organizzazione
Abruzzo 4
Calabria 3
Campania 2
Emilia Romagna 2
Friuli 2
Lazio 1
Liguria 3
Marche 2
Puglia 9
Sardegna 4
Sicilia 4
Toscana 2
Veneto 2

Obiettivi:
Aprirsi alle collaborazioni per posizionarsi in breve sulla
frontiera internazionale dell’informazione statistica di
qualità sulla portualità e sull’economia del mare in genere
Conoscere bene il traffico portuale può avere ricadute
positive anche per le misure del turismo marino e costiero,
e della loro sostenibilità
Ancona- Autorità portuale 27 febbraio
2019

Le alleanze tra Compagnie di navigazione
determinano l’opportunità di scambio di informazioni
specifiche tra attori presenti nei porti e Uffici territoriali
dell’Istat.
Ad esempio una stessa nave, nello stesso viaggio, può avere
carichi che, in virtù delle alleanze fra compagnie es. (2M ),
vengono gestiti contestualmente da due Agenti marittimi
diversi. In un caso del genere, un solo modello TRAMAR di
arrivo nave potrebbe non coprire l’intera informazione…
Le reti

Titolo
Luogo, data
Rapporti inter istituzionali

Titolo

0,0 20,0 40,0 60,0 80,0 100,0 120,0
merce sbarcata - tonnellate (migliaia)
merce imbarcata - tonnellate (migliaia)
contenitori
rinfusa liquida
rinfusa solida
ro ro
passeggeri sbarcati (migliaia)
passeggeri imbarcati (migliaia)
Indicatori chiave dei movimenti merci e passeggeri nei Porti afferenti le ADSP.
Composizione percentuale rispetto al totale di tutti i porti italiani

• Procedure di security card
• Sistemi automatizzati di registrazione dei transiti di veicoli
e passeggeri
• Uso dei dati AIS per il monitoraggio della copertura
Sperimentazioni di sistemi innovativi e BIG Data

Interoperabilità e Open Data
Con il termine open data si fa riferimento alla pratica di mettere a
disposizione sul Web dati che possono essere liberamente
utilizzati, riutilizzati e redistribuiti, con la sola limitazione, al
massimo, del requisito di attribuzione e condivisione nello stesso
modo (http://opendefinition.org).
SEGRETO STATISTICO: i dati raccolti nell'ambito di rilevazioni statistiche
comprese nel programma statistico nazionale da parte degli uffici di
statistica non possono essere esternati se non in forma aggregata, in
modo che non se ne possa trarre alcun riferimento relativamente a
persone identificabili e possono essere utilizzati solo per scopi statistici.

Digitalizzazione delle informazioni e Big Data per applicazioni
marittime avrebbero ricadute informative su:
• Turismo
• Navigazione
• Sicurezza marittima
• Pesca
Tutti aspettano di poter accedere a dati digitalizzati ma… E’
necessaria la dovuta cooperazione tra le varie autorità civili e fra
queste e le autorità militari

WEB SEMANTICO: insieme di modelli e standard Web in cui le risorse
vengono descritte e correlate fra loro in modo formale attraverso l'uso
opportuno di metadati. In questo modo si abilitano gli agenti automatici a
comprendere il significato dei dati e delle informazioni
E’ possibile individuare tre livelli di interoperabilità:
1. Tecnica
2. Semantica
3. Organizzativa
LINEE GUIDA PER L’INTEROPERABILITÀ SEMANTICA ATTRAVERSO I
LINKED OPEN DATA

BIG DATA AIS: vari livelli territoriali di analisi
Centri VTS attivi a gennaio 2019
Messina- Villa S.G -Reggio Calabria
Bari
Brindisi
Genova
La Maddalena
La Spezia
Palermo
Savona
Taranto
Trapani
Trieste
Venezia
Movimenti nel
golfo di Napoli
ottobre 2018
Movimenti nel
Porto di Brindisi
ottobre 2018

I dati vengono pubblicati in tempo
reale su varie piattaforme Web come
Vessel Finder, Marine Traffic,
MyShipTracking che tracciano istante
per istante il traffico AIS a livello
mondiale.
Per diventare dati statistici
integrabili, tali dati devono essere
standardizzati, devono cioè essere
sottoposti ad analisi di coerenza delle
classificazioni, e devono essere
corredati dai necessari metadati.
DIG DATA: AIS

Titolo
BIG DATA AIS: vari livelli territoriali di analisi

Interoperabilità …a livello micro
- Condivisione di procedure di monitoraggio off line
- Adozione di sistemi di rilevazione dati che possano entrare nel
processo di integrazione (previa valutazione in termini di
tempestività, ampiezza delle serie di dati, stabilità e
accessibilità delle fonti utilizzate) consentendo lo scambio di
metadati
- Piano degli accosti per navi con rotte RoRo, Crociere,
Container

Conclusioni
Dobbiamo
necessariamente
arrivare a una
convergenza
tecnologica, ma il
percorso statistico
è complesso
perché nulla è
migliorabile se non
è misurabile
Buon
lavoro a
tutti noi
Ludwig Mies van der
Rohe (si trova pure in
un poema di Robert
Browning del 1855).

Conclusioni
Hanno contribuito alla
realizzazione
dell’intervento:
Beniamino Barile
Pasquale Cimmino
Tommaso Damiani
Lorena Galiè
Roberta Palmieri
Roberto Palumbo
Edoardo Patruno
Vincenzo Patruno
Buon
lavoro a
tutti noi

A.M. Digrandi, Raccolta dati e produzione di informazione statistica ufficiale sul trasporto marittimo - Micro e big data per le analisi economiche sul trasporto marittimo

Recomendados

Recomendados

Más contenido relacionado

La actualidad más candente

La actualidad más candente (12)

Similar a A.M. Digrandi, Raccolta dati e produzione di informazione statistica ufficiale sul trasporto marittimo - Micro e big data per le analisi economiche sul trasporto marittimo

Similar a A.M. Digrandi, Raccolta dati e produzione di informazione statistica ufficiale sul trasporto marittimo - Micro e big data per le analisi economiche sul trasporto marittimo (20)

Más de Istituto nazionale di statistica

Más de Istituto nazionale di statistica (20)

Último

Último (19)

A.M. Digrandi, Raccolta dati e produzione di informazione statistica ufficiale sul trasporto marittimo - Micro e big data per le analisi economiche sul trasporto marittimo