big data: opportunità o minaccia?
TRANSCRIPT
![Page 1: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/1.jpg)
Made with love by Stefano Gatti
Big Data: opportunità o problema?
Un viaggio nel mondo dei dati1 Giugno 2016 – Polo Tecnologico Pavia
![Page 2: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/2.jpg)
2
Il ViaggioQualche dato su di me
Big Data: incominciamo dalla semantica …
La risposta!
La tecnologia
I problemi
Il futuro non è più quello di una volta …
Gli algoritmi
I dati
I datascientist
Le opportunità: abilitatori & nuovi business
![Page 3: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/3.jpg)
Qualche dato su di me …
![Page 4: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/4.jpg)
4
Qualcosa su di me …• Data-lover & blogger
• Agile organization & mindset supporter
• A knowledge sharing and open-culture passionate
• Co-founder of CoderDojo Voghera & Iria Geeks
• Head of Innovation & Data Sources in Cerved
• A runner or better an endurance sports lover
More about me … @micio1970 http://it.linkedin.com/in/gattistefano/ [email protected] My blog about data: https://agilebigdata.wordpress.com/ My website: http://www.stefanogatti.info/
![Page 5: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/5.jpg)
Big data incominciamo dalla semantica …
![Page 6: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/6.jpg)
6
Big data …
«Big data è il termine usato per descrivere una raccolta di dati così estesa in termini di volume, velocità e varietà da richiedere tecnologie e metodi analitici specifici per l'estrazione di valore»
Fonte: wikipedia
![Page 7: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/7.jpg)
7
Le tre V … anzi sei!
Veracity
Value
Viable
Volume
Velocity
V
a
r
i
e
t
y
![Page 8: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/8.jpg)
8
Le tre V “classiche”:qualche numero
![Page 9: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/9.jpg)
9
Le quattro direttrici del fenomeno “big data”
Approfondimenti: AgileBigData
Tecnologia Algoritmi
DatiUmano-organizzativa
![Page 10: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/10.jpg)
Opportunità o Problema?La risposta
![Page 11: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/11.jpg)
11Approfondimenti: Qui e Qui
![Page 12: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/12.jpg)
I dati
![Page 13: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/13.jpg)
13
Perchè tanti dati e quali?Come si generano i «big data»?
#Web-data (Web 2.0)
#OpenData
#Internet Of Things
![Page 14: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/14.jpg)
14
Web DataLe persone creano i contenuti …
![Page 15: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/15.jpg)
15
Open dataLe amministrazioni liberano i dati …
Fonti: Mckinsey : Open data: Unlocking innovation and performance with liquid information
![Page 16: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/16.jpg)
Open dataI problemi degli Open Data oggi
Autorevolezza fonte
Frequenza di aggiornamento Problemi di qualità del dato
Troppi formati differenti
Approfondimenti: qui
![Page 17: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/17.jpg)
Open dataUn’opportunità se sapremo unire …
Trasparenza e Civic Hacking Valore di business
![Page 18: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/18.jpg)
18
Internet Of Things DataE le cose «connesse» creano i dati …
![Page 19: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/19.jpg)
La tecnologia
![Page 20: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/20.jpg)
20
Font
e: h
ttp:/
/pin
.it/v
wY6
L_B
![Page 21: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/21.jpg)
21
![Page 22: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/22.jpg)
22
DataStorage nell’era dei big data: il ranking
Fonte: http://db-engines.com/en/
![Page 23: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/23.jpg)
23
La “killer big data technology”: il map reduce
Fonte: DataScienceCentral
![Page 24: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/24.jpg)
24
I trend nell’ambito della tecnologia “Big data”
#DataLake
#NoSQL
#GraphDatabase
#SQLinNoSQL
#NoSQLinSQL
#PolyglotPersistence
![Page 26: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/26.jpg)
Gli algoritmi
![Page 27: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/27.jpg)
27
Big data economyCosa accomuna questi unicorni? Dati e tecnologia …
![Page 28: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/28.jpg)
28
L’arrivo dell’algorithmic economyL’evoluzione della Big data economy
![Page 29: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/29.jpg)
29
Big Data & Algorithmic economyL’evoluzione della Big data economy
«Co-fondatore del MIT Media Lab, pioniere della human-machine interaction e fra i data scientist più importanti del mondo»
Sandy Pentland
Fonte: http://www.betterdecisions.it
![Page 30: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/30.jpg)
30
I leader corrono veloceE stanno cambiando il mondo
«La rete neurale è stata capace di riconoscere correttamente il 3.6% delle immagini a livello stradale e il 10.1% per quanto riguarda le città, indicando inoltre la nazione di provenienza per il 28.4% di esse, salendo al 48% per quanto riguarda il continente.»
Provate anche voi!
![Page 31: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/31.jpg)
31
I leader corrono veloceE stanno cambiando il mondo
![Page 32: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/32.jpg)
32
I leader corrono veloceE stanno cambiando il mondo
![Page 33: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/33.jpg)
33
Algoritmi & ValoreA cosa servono i dati …
Fonte: DatascienceCentral
![Page 34: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/34.jpg)
34
Trend di Algoritmi Datascience is eating the world …
#Machine learning
#Unsupervised learning
#Network Analisys
#Deep learning
#Intelligenza artificiale
![Page 35: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/35.jpg)
I datascientist
![Page 36: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/36.jpg)
36
Chi sono I data-scientist?The «sexiest» job of 21° century?
Immagine tratte da http://biwhiz.com/Who-is-a-Data-Scientist.html
Incrocio di competenze
Source: Drew Conway, Sept 2010.
![Page 37: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/37.jpg)
37
Cosa fanno i data-scientist?The «sexiest» job of 21° century?
#DataTelling
#DataIntelligence
![Page 38: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/38.jpg)
38
Dove stanno nelle organizzazioni?Esiste una risposta unica?
A rete con team in aree aziendali strategiche?
![Page 39: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/39.jpg)
Abilitatori & nuovi business
![Page 40: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/40.jpg)
40
Abilitatori e amplificatori dei “big data”Non solo big data …
Per approfondimenti: qui
#FacilitanoIntegrazione
#FormatoLeggero
#DataMonetization
API
![Page 41: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/41.jpg)
41
Abilitatori e amplificatori dei “big data”Non solo big data …
Per approfondimenti: qui
#FacilitaSetUp
#FacilitaScalabilità
#RendeCostiVariabili
Cloud
![Page 42: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/42.jpg)
42
Abilitatori e amplificatori dei “big data”Non solo big data …
Per approfondimenti: qui
#AdatteAllaComplessità
#FacilitanoApprendimento
#MinimizzanoIcostiErrori
Metodologie Agili
© Jurgen Appelo, Creative Commons 3.0 BY http://www.management30.com/
Martie
![Page 43: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/43.jpg)
43
Abilitatori e amplificatori dei “big data”Non solo big data …
Per approfondimenti: qui
Decentralizzazione
1969
Arpanet
1993
Internet Rete
distribuita
2004
Web 2.0Contenuti distribuiti
2008
HadoopComputazione
distribuita
2009
BitCoin - BlockchainTransazioni distribuite
![Page 44: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/44.jpg)
44
Nuovi MercatiIl dato ovunque … ed è la colla tra materiale e immateriale
#InternetOfThings
#DataMonetization
#DataLocalization #Manifattura 4.0
#Robotica
#Nanotecnologie
![Page 45: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/45.jpg)
45
Google Driverless Car & Big Data
![Page 46: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/46.jpg)
46
Altri “oggetti” Big Data
![Page 47: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/47.jpg)
I problemi
![Page 48: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/48.jpg)
48
Gli algoritmi possono essere neutrali?Condivisi sì … neutrali no!
![Page 49: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/49.jpg)
49
Ma di chi sono i dati?Copyright, privacy, diritto all’oblio e tanto altro …
#Copyright
#CreativeCommons Es: Wikipedia
![Page 50: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/50.jpg)
50
European Data Protection LawCopyright, privacy, diritto all’oblio e tanto altro …
Per approfondimenti: qui
4 Maggio 2016
25 Maggio 2018
![Page 51: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/51.jpg)
51
Copyright, privacy, diritto all’oblio e tanto altro …
Per approfondimenti: qui
European Data Protection Law
#DataInteroperability
#RightToBeForgotten
#DataProtectionByDefault
#DataProtectionByDesign
#EUDataLawHarmonisation
#EUDataLawAlsoOutsideEU
#EUDataLawSimplification
#BigDataTrustEnabler
![Page 52: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/52.jpg)
52
Internet è un ente sovrannazionale che sovverte regole consolidate …
Il diritto all’oblio …
Per approfondimenti: quiFonte: Repubblica.it
![Page 53: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/53.jpg)
53
Accelerazione esponenziale
Big data è anche … data-driven innovation!
Accelerazio
ne
Tecnologica
Innovazione
Digitalizz
azione
“I often say that when you can measure what you are speaking about, and express it in numbers, you know something about it; but when you cannot measure it, when you cannot express it in numbers, your knowledge is of a meagre and unsatisfactory Kind”
Lord Kelvin
“If you want to have good ideas you must have many ideas”
Linus Pauling
"The greatest shortcoming of the human race is our inability to understand the exponential function.“
Albert Allen Bartlett
![Page 54: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/54.jpg)
54
Accelerazione esponenziale
Big data è anche …
Immagine tratta da «the second age machine» book
![Page 55: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/55.jpg)
55
Produttività, disoccupazione … e tecnologia?
Big data è anche …
Immagine tratta da «the second age machine» book
![Page 56: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/56.jpg)
56
Allargamento «spread culturale»
Big data è anche …
Immagine tratta da «the second age machine» book
![Page 57: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/57.jpg)
57
Martec’s Law
Big data è anche …
![Page 58: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/58.jpg)
58
Skill shortage
Big data è anche …
Fonte: Studio McKinsey
#1DeepAnalyticalTalents
#2DataSavyManagers
#3SupportingTechnologyPersonnel
![Page 59: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/59.jpg)
Il futuro non è più quello di una volta …
![Page 60: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/60.jpg)
60
L’importanza della consapevolezza …Per affrontare il futuro che è qui …
Fonte: «Costruire il domani» - S.Quintarelli
«Il futuro è già qui, solo che non è distribuito in modo uniforme»
W.Gibson
![Page 62: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/62.jpg)
62
Big data e non solo …Un consiglio alle nuove generazioni
“Non si può sfuggire al futuro. Qualsiasi esso sia. Il futuro che leggete potrebbe esistere oppure no, io credo di sì. Le “macchine” danno l’opportunità di penetrare l’informazione nella più incomparabile piegatura spazio temporale mai concepita. Usatele queste macchine, usatele come si usano le cose, ma fatelo criticamente, altrimenti esse useranno voi. La differenza sarà il vostro approccio, e talvolta questione di metodo, ma sappiate essere distaccate, pesare le informazioni, interrompere il flusso di scambio, recuperare la vostra dimensione. Si tratta della vostra vita”.
Fonte: «Costruire il domani» - S.Quintarelli
![Page 63: Big data: opportunità o minaccia?](https://reader036.vdocumenti.com/reader036/viewer/2022062401/58f1d0911a28ab22468b45d9/html5/thumbnails/63.jpg)
Grazie!
Dove non esplicitato le immagini della presentazione sono di © Jurgen Appelo, Creative Commons 3.0 BY http://www.management30.com/
Stefano Gatti
[email protected]: @micio1970