Philip E. Tetlock, professore della Wharton School University della Pennsylvania, ed il coautore Dan Gardner offrono un capolavoro di previsione, frutto di decenni di ricerca e di risultati su larga scala, fondato su competizioni di previsioni.
Essi mostrano che alcuni esperti hanno dimostrato una reale preveggenza.
“The Good Judgement Project” coinvolge decine di migliaia di persone comuni che si sono proposte di prevedere eventi globali.
Alcuni dei volontari si sono dimostrati estremamente bravi.
Essi sono i “superforecaster”.
"Superforecasting, the Art and Science of Prediction" di Philip Tetlock e Dan Gardner
1. Philip E. Tetlock, professore della Wharton School
University della Pennsylvania, ed il coautore Dan
Gardner offrono un capolavoro di previsione,
frutto di decenni di ricerca e di risultati su larga
scala, fondato su competizioni di previsioni.
Essi mostrano che alcuni esperti hanno
dimostrato una reale preveggenza.
“The Good Judgement Project” coinvolge decine
di migliaia di persone comuni che si sono
proposte di prevedere eventi globali.
Alcuni dei volontari si sono dimostrati
estremamente bravi.
Essi sono i “superforecaster”.
Superforecasting è destinato a divenire un
classico moderno.
Buona lettura!
2. www.ambrosettiam.com
UNO SCETTICO OTTIMISTA
Ogni giorno, ciascuno di noi prende decisioni critiche sulla base di previsioni la cui qualità è sconosciuta.
Fare previsioni è una capacità che può essere coltivata.
L’esperto medio è tanto accurato quanto uno scimpanzé che lancia delle freccette.
Coloro che predicono non hanno idea di quanto le loro previsioni siano buone. La ragione? I consumatori di previsioni non
richiedono evidenze sull’accuratezza. Quindi non vi è una misurazione, il che significa nessun aggiustamento.
E senza aggiustamenti, non ci può essere un miglioramento.
Potresti pensare che l’obiettivo del fare previsioni sia di prevedere accuratamente il futuro, ma spesso questo non è l’obiettivo o
almeno non il solo. A volte le previsioni sono pensate per intrattenere.
Tutto ciò che dobbiamo fare è fissare un obiettivo chiaro ed essere molto seri nel misurare.
In totale abbiamo raccolto oltre un milione di giudizi individuali sul futuro.
In molti casi gli algoritmi statistici battono i giudizi soggettivi.
Il punto è quindi indiscutibile: quando disponi di un valido algoritmo statistico, usalo!
2
Penso che sarà sempre più strano per le persone ascoltare i consigli di esperti le cui idee sono generate solamente da
un proprio giudizio soggettivo. Per cui ciò che desidero è che gli esperti umani si uniscano ai computer per superare i
limiti cognitivi e i bias umani.
3. www.ambrosettiam.com
LE ILLUSIONI DELLA CONOSCENZA
Perchè le persone non sono in grado di capire che la sola intuizione non può essere la base per solide conclusioni?
Questa cosa è sconcertante.
Troppo spesso, la previsione nel ventunesimo secolo è molto simile alla medicina del diciannovesimo secolo. Ci sono teorie,
asserzioni e argomenti ma c’è poca sperimentazione, o qualsiasi cosa che potrebbe essere chiamata scienza e noi ne paghiamo il
prezzo.
TENENDO IL PUNTEGGIO
Ovviamente, la previsione senza un time frame non ha senso. Solamente questo problema rende ogni giorno le previsioni non
verificabili. Analogamente, le previsioni si basano spesso su idee implicite di termini chiave, piuttosto che su definizioni esplicite
ed anche questo rende le previsioni non verificabili.
Le previsioni devono avere termini e scadenze ben definiti. Devono usare i numeri.
Questo è quello che ho deciso di fare a metà degli anni ottanta, 284 seri professionisti, anonimi, con
time-frame da uno a cinque a dieci anni. In totale, i nostri esperti hanno prodotto all’incirca 28.000
previsioni. I risultati finali sono apparsi nel 2005, 21 anni dopo.
I dati rilevarono una correlazione inversa tra fama e accuratezza: il più famoso era un esperto ed era quello meno accurato.
Ciò che avrei dovuto fare è guardare al problema da entrambe le prospettive – sia dalla prospettiva logica sia da quella
psicologica – e combinare quanto ho visto.
3
4. www.ambrosettiam.com
SUPERFORECASTER
Nel giro di quattro anni, quasi cinquecento domande riguardanti affari internazionali sono state fatte a migliaia di previsori del
GJP - The Good Judgement Project- generando ben oltre un milione di valutazioni sul futuro.
Un grande interrogativo: perchè i superforecaster sono così bravi?
SUPERQUANTS?
L'unica impostazione che rimane è forse l'unica impostazione che le persone intuitivamente vogliono evitare.
"Il forse" è stato suddiviso in diversi gradi di probabilità.
Il pensiero probabilistico è essenziale per una previsione accurata. Più il forecaster abbracciava il pensiero probabilistico, più
questo era accurato.
DROGATI DA NOTIZIE?
Le previsioni sono giudizi che si basano su informazioni disponibili e che dovrebbero essere aggiornate alla
luce dei cambiamenti di informazione. La previsione aggiornata per riflettere l'ultima informazione
disponibile è probabilmente più vicina alla verità rispetto ad una previsione che non è così aggiornata.
Ci sono due pericoli: il primo è di non dare abbastanza importanza alla nuova informazione, l'altro è di darne troppa.
I superforecaster potrebbero avere un vantaggio inaspettato: non sono esperti o professionisti, ma hanno un piccolo ego
investito in ogni previsione.Non sono profondamente devoti ai loro giudizi e questo rende molto più facile ammettere quando la
previsione è errata e modificarla. E ciò aiuta ad evitare una scarsa reazione quando le nuove evidenze chiamano ad aggiornare le
proprie convinzioni.
4
5. www.ambrosettiam.com
5
BETA INFINITO
Per essere un eccellente forecaster è essenziale migliorare la propria mentalità. Il miglior esempio è l'uomo che "Quando i fatti
cambiano, io cambio la mia opinione".
Provare, fallire, analizzare, aggiustare e riprovare di nuovo: noi impariamo nuove abilità con la pratica. Noi diventiamo più abili
provando e riprovando.
Per dimostrare i limiti di apprendimento dalle letture, il buon filosofo ed insegnante Michael Polanyi scrisse una spiegazione
dettagliata della fisica dell'andare in bicicletta. Per imparare ad andare in bicicletta, noi dobbiamo provarci almeno una volta.
Per imparare a prevedere, devi provare a prevedere. Leggere libri sulle previsioni non sostituisce l’esperienza reale.
L’esperienza non è sufficiente. Deve essere accompagnata da un chiaro feedback.
Sfortunatamente, molti previsori non ottengono valutazioni di alta qualità che aiutano i meteorologi e i giocatori di bridge a
migliorare.
Ci sono due grandi ragioni:
• la prima è l’utilizzo di un linguaggio ambiguo, termini vaghi come “probabilmente” e “presumibilmente” non permettono di
giudicare le previsioni. Un linguaggio vago è un linguaggio elastico. La lezione per i previsori che desiderano giudicare le loro
vaghe previsioni è la seguente: non illuderti!
• il secondo grande ostacolo per le valutazioni è lo scarto temporale.
Superforecasting sembra essere all’incirca il 75% fatica e il 25% ispirazione.
6. www.ambrosettiam.com
6
SUPERTEAM
I gruppi possono causare terribili errori. Mettendo in un team delle persone con un’ampia larghezza di vedute si otterrà una
squadra con una grande apertura mentale, al contrario mettendo persone con minor larghezza di vedute si otterrà una squadra
con un’apertura mentale inferiore.
I donatori sono coloro che offrono agli altri di più di quanto ricevono, gli equilibrati sono coloro che danno tanto quanto
ottengono e i ricevitori sono coloro che offrono meno di quanto ricevono.
IL DILEMMA DEL LEADER
Le qualità che un buon leader dovrebbe avere sono: sicurezza, risolutezza, visione. I leader devono essere previsori e leader, ma
sembra che ciò che è necessario per avere successo in un ruolo possa danneggiare l’altro.
SONO DAVVERO COSI’ ECCELLENTI?
In principio le persone possono usare il sistema di riflessione due per catturare gli errori derivanti dal
sistema uno rapido e inconscio. I Superforecaster dedicano un grande sforzo nel fare questa cosa.
I Superforecaster non sono altro che “sistemi due” generati da alcune previsioni fallite.
Il time frame è lo scopo delle previsioni.
WYSIATI – Ciò che vedi è tutto lì, la madre di tutte le illusioni cognitive.
Müller-Lyer illusion
I Superforecaster non solo dedicano attenzione al time frame in questione, ma anche ad altri possibili periodi di tempo.
7. www.ambrosettiam.com
7
QUAL’É IL PROSSIMO?
L’apprendimento efficace mediante l’esperienza non può avvenire senza una valutazione definita e non si può avere un chiaro
feedback a meno che le previsioni siano inequivocabili e misurabili.
Nel mondo degli affari una buona previsione può essere la differenza tra la prosperità ed il fallimento.
I consumatori di previsioni non saranno più ingannati da esperti con buone storie ed inizieranno a chiedere come sono andate le
loro previsioni passate e a respingere le risposte consistenti in aneddoti e credenze. Proprio come noi ora attendiamo che una
pillola venga testata su altri simili prima di assumerla, così ci aspetteremmo che i forecaster testino i risultati delle loro previsioni
con rigore e accuratezza prima di seguire i loro consigli.
Potrebbe essere vastissima una rivoluzione “evidence based forecasting” simile alla rivoluzione “evidence based medicine” con
conseguenze altrettanto significative.
L’unico obiettivo della previsione dovrebbe essere l’accuratezza.
In realtà l’accuratezza è solo uno dei tanti obiettivi ed alcune
volte è irrilevante.
Utilizza i numeri e si rischia di essere ingiustamente accusati.
Attieniti a frasi confuse come una nuvola di fumo e sei al sicuro.
“L’obiettivo della previsione non è
vedere che cosa sta arrivando.
E’ far avanzare gli interessi del
forecaster e della sua tribù”.
- Vladimir Lenin-
Tieni i punteggi. Analizza i risultati. Impara che cosa funziona e cosa no. Ma questo richiede numeri, e i numeri renderebbero
vulnerabile l’intelligenza scientifica fondata sull’indeterminatezza del “forse” privandola di ogni copertura.
8. www.ambrosettiam.com
Buona Performance!
APPENDICE: 10 comandamenti per un aspirante superforecaster
1. Triage. Noi potremmo fallire nel provare a prevedere il potenzialmente prevedibile o potremmo sprecare il nostro tempo
provando a predire l’imprevedibile.
2. Rendi i problemi apparentemente irrisolvibili in sotto problemi controllabili.
3. Trova il giusto equilibrio tra punti di vista interni ed esterni. I superforecaster sanno che non c’è nulla di nuovo sotto il sole.
Nulla è unico al 100%.
4. Trova il giusto equilibrio tra il non reagire ed il reagire eccessivamente. L’aggiornamento delle proprie convinzioni è per una
buona previsione come lo spazzolino e il filo interdentale per una buona igiene orale. Potrebbe essere noioso, ogni tanto
spiacevole, ma paga nel lungo termine.
5. Cerca le cause contrastanti per ogni previsione.
6. Sforzati di distinguere tanti dubbi quanti il problema ne consente, non di più.
7. Trova il giusto equilibrio tra debolezza ed eccessiva sicurezza, tra prudenza e risolutezza.
8. Cerca gli errori che stanno dietro ai tuoi sbagli ma fai attenzione a non ripeterli.
9. Porta alla luce il meglio negli altri e lascia che gli altri portino alla luce il meglio di te.
10. Controlla che la bicicletta sia in equilibrio. Per l’apprendimento è necessaria la pratica, con una buona valutazione che non
lascia alcuna ambiguità su ciò che è successo.
11. Non trattare i comandamenti come comandamenti.
8