I dati sono ovunque e oltre l'80% dell'informazione in rete è presente in forma non strutturata. Una fonte di conoscenza di inestimabile valore che potrebbe essere resa fruibile in formato aperto.

1. (open) data
hacking
Pierpaolo Basile
Alumni Mathematica

2. Hello!
Pierpaolo Basile
Ricercatore in informatica (intelligenza
artificiale, elaborazione del linguaggio
naturale)
Socio di Alumni Mathematica
pierpaolo.basile@gmail.com

3. (OPEN) DATA
dati liberamente accessibili a tutti,
generalmente rilasciati da pubbliche
amministrazioni

4. HACKING
"Hacking in the sense of
deconstructing an idea, hardware,
anything and getting it to do
something it wasn’t intended or to
better understand how something
works."

5. Tre storie di data hacking
…e di disobbedienza

6. archivio online gratuito di oltre
51.000.000 di articoli scientifici

7. Alexandra Elbakyan

8. Aaron Swartz
4,8 milioni di articoli
scientifici dal database
accademico JSTOR

9. Julian Assange
WikiLeaks
Pubblicazione di documenti protetti dal
segreto di stato

10. Data Hacking Process
Acquisizione dei dati
Estrazione delle informazioni
e creazione di conoscenza
Pubblicazione dei dati

11. Acquisizione dei dati
Web Scraping
Estrazione di dati
da un sito web
attraverso
programmi
API o protocolli
Web
Estrazione di dati
attraverso
interfacce di
programmazione
o protocolli
specifici
Acquisione
digitale
Scansione di
documenti
cartacei
attraverso OCR
(Optical
Character
Recognition)

12. Web Scraping
Delibera Num. 675
Data: 18-05-2016
Oggetto: Seguito DGR 2421/2015. POR Puglia…
Struttura: Dipartimento Turismo, …
(download del file PDF)
Scraping

13. API o protocolli Web
Twitter API
user: BBCBreaking
text: France to declare state…
date: …
img: …
user: BBCBreaking
text: UK department store chain…
date: …
img: …

14. Acquisizione digitale
Scanner
OCR
Documento
Digitale
«…rock, and picking up this…»
Contenuto testuale

15. Estrazione delle informazioni
e creazione di conoscenza

16. 60secondionline…

17. L’80%dell’informazioneè
nonstrutturata…

18. …prevalentementetesto

19. ?
Le macchine
possono
comprendere il
testo?

20. Sentiment Analysis
@andreaiannone29 stavi indiavolato...
Bravo peccato per il rettilineo ma
meglio di così non potevi fare!!!
#Motomondiale
che schifo le castagne
Bologna-Palermo: ko Aguirregaray, c‘è
Della Rocca
neutrale

21. Entity Linking

22. Entity Linking

23. Comprensione automatica del testo
«Apple ha acquistato Beats»
Apple
(gruppo verbale)
ha:aux
acquistato:VBpp
Beats
soggetto oggetto
linking linking

24. Information Extraction
«Apple ha acquistato Beats per 2,5 miliardi di dollari»
«Apple ha comprato LearnSprout»
«Oracle ha acquisito Sun per 7,4 miliardi di dollari.»
Soggetto Oggetto Valore
Apple Beats 2,5
Apple LearnSprout ?
Oracle Sun 7,4
Acquisizioni

25. Pubblicazione dei dati

26. Pubblicazione dei dati
◦ Verificare il copyright dei dati
acquisiti (se non si vuole
disubbidire)
◦ Preferire formati aperti: XML,
JSON, CSV, RDF
◦ Licenza dei dati: creative
commons, (italian) open data
license, …

27. Grazie per l’attenzione!
DOMANDE?
pierpaolo.basile@gmail.com
www.alumnimathematica.org