Fonti e metodo

Qui c’è tutto quello che sta dietro ai numeri del sito: da dove vengono i dati di ogni pagina, con quale licenza, quando sono stati scaricati e quali sono i loro limiti. In fondo c’è l’elenco dei dati che non esistono in forma aperta.

Come lavoriamo

• Dati aperti, scaricati tutti insieme. Si scarica l’archivio intero dal sito di chi lo pubblica e lo si elabora sul computer con dei programmi. Non si copia niente a mano.
• Ogni numero ha un file e un campo. Per ogni numero delle pagine si può risalire al file e alla colonna da cui viene (di solito nel file dei numeri della pagina).
• Confronti, non cause. Mostriamo quanto due cose vanno insieme o si somigliano. Non diciamo che una è la causa dell’altra.
• Niente registrazioni. Usiamo dati pubblici e diciamo da dove vengono, con i loro limiti. Se un sito chiede di registrarsi, non lo facciamo e lo scriviamo nella pagina.
• Le stime sono sempre segnate come stime. Quando un numero non viene direttamente da un file, ma è calcolato da noi, la pagina lo dice.
• Programmi e note sono pubblici. Ogni pagina si può rifare da capo: github.com/AndreottiVIII/milano-in-dati.

In numeri

Licenze: quante fonti per tipo

Le fonti più usate

Quante pagine usano ciascun editore. Clic sul nome per vedere le sue righe nella tabella.

Stato delle fonti

Un link che non risponde non vuol dire che il dato sia sbagliato o sparito: lo abbiamo già scaricato. Vuol dire solo che oggi il programma non ha ricevuto risposta. Un sito che rifiuta i programmi non è fuori uso: non lo controlliamo e non proviamo ad aggirare il blocco.

Limiti dei dati. «Dato aggiornato a» è scritto solo quando lo dice una fonte: per il catalogo del Comune è la data della scheda e dei file nel catalogo (la scheda può essere ritoccata anche senza nuovi dati); per le altre fonti è l’ultimo periodo coperto, come annotato da noi. Dove non c’è, scriviamo «non indicato». «Scaricato da noi» è il giorno in cui abbiamo preso il file: non dice a quando risale il dato. Il controllo avviene con un programma lanciato a mano: una richiesta per link, al massimo una ogni 2 secondi per sito, dopo aver letto il robots.txt, con il nome milano-in-dati/1.0.

Esito del controllo dei link, da scaricare

Pagina per pagina, fonte per fonte

Una riga per ogni pagina e ogni editore. Si può cercare, filtrare e ordinare (clic sul titolo di una colonna). Il segno + apre la frase originale della pagina e le note.

* La licenza non è scritta nella pagina: è quella dichiarata di solito dall’editore (per esempio ODbL per OpenStreetMap) o dai cataloghi che ripubblicano i file. «Uso con citazione, non aperta» vuol dire che l’editore non dà una licenza aperta: riportiamo solo numeri, sempre con la fonte. «Nessuna licenza dichiarata» vuol dire che abbiamo cercato sul sito di chi pubblica il dato e non c’è nessuna licenza: citiamo la fonte e riportiamo solo numeri. Se una data vale per tutta la pagina e non per la singola fonte, è segnato nel dettaglio.

Tabella delle fonti (si apre in Excel) · la stessa, per i programmi

I limiti dei dati, pagina per pagina

Per ogni pagina: le fonti in breve e i limiti dei dati scritti nella pagina stessa. Qui ne mostriamo i principali; l’elenco completo è nella sezione «Limiti dei dati» di ciascuna pagina.

Dati che non esistono in forma aperta

Frasi prese dalle pagine, dove abbiamo cercato un dato e non c’era (o non era aperto). Non vuol dire che il dato non esista: spesso lo ha un ente, ma non lo pubblica come dato aperto.