HOW TO WIN AT FORECASTING
Philip Tetlock
Citation (APA): Tetlock, P. (2014). HOW TO WIN AT FORECASTING [Kindle Android version]. Retrieved from Amazon.com
Parte introduttiva
Evidenzia ( giallo) - Posizione 2
HOW TO WIN AT FORECASTING By Philip Tetlock
Evidenzia ( giallo) - Posizione 6
even though nobody predicted the direction that Gorbachev was taking the Soviet Union, virtually everybody after the fact had a compelling explanation for it.
Nota - Posizione 7
ESEMPIO DI RAZIONALIZZAZIONE
Evidenzia ( giallo) - Posizione 7
People drew whatever lessons they wanted from history.
Nota - Posizione 8
CON QUESTE PREMESSE.....
Evidenzia ( giallo) - Posizione 8
There is quite a bit of skepticism about political punditry, but there's also a huge appetite for it.
Nota - Posizione 9
LE PREVISIONI IN POLITGICA
Evidenzia ( giallo) - Posizione 9
I'm struck now by how little interest there is in holding political pundits who wield great influence accountable
Nota - Posizione 9
LA COSA STUPEFACENTE
Evidenzia ( giallo) - Posizione 12
It's undeniably true that he was more accurate. He was using more rigorous techniques in analyzing and aggregating data
Nota - Posizione 12
NATE SILVER VS EDITORIALISTI
Evidenzia ( giallo) - Posizione 16
political pundits are often more in the business of bolstering the prejudices of their audience
Nota - Posizione 17
IL RUOLO DEI COMMENTATORI
Evidenzia ( giallo) - Posizione 18
forecasting tournaments
Nota - Posizione 18
SONO COMINCIATI 30 ANNI FA
Evidenzia ( giallo) - Posizione 19
what, if anything, distinguishes political analysts who are more accurate from those who are less accurate on various categories of issues?
Nota - Posizione 20
LA DOMANDA A CUI SI VOLEVA RISPONDERE
Evidenzia ( giallo) - Posizione 21
it's very hard for political analysts to do appreciably better than chance when you move beyond about one year.
Nota - Posizione 22
PRIMA SCOPERTA
Evidenzia ( giallo) - Posizione 22
political analysts think they know a lot more about the future than they actually do.
Nota - Posizione 23
SECONDA SCOPERTA...OVERCONFIDENCE....SE DICONO AL 90 SONO AL 70
Evidenzia ( giallo) - Posizione 24
political analysts were disinclined to change their minds
Nota - Posizione 24
TERZA SCOPERTA...ACCAMPANO SCUSE
Evidenzia ( giallo) - Posizione 32
start thinking seriously about the challenge of creating accuracy metrics and for monitoring
Nota - Posizione 32
UNA CONSEGUENZA DEL LIBRO
Evidenzia ( giallo) - Posizione 34
from 2011 to 2015,
Nota - Posizione 34
UN NUOVO PROGETTO
Evidenzia ( giallo) - Posizione 36
If pundits feel that their accuracy is benchmarked they will be more careful
Nota - Posizione 37
UNA CONSEGUENZA DELL ENTRATA IN SCENA DEI SUPERFORCASTER
Evidenzia ( giallo) - Posizione 39
I was assuming that political analysts were in the business of making accurate predictions,
Nota - Posizione 39
ACCUSA A TETLOCK: SEI NAIF
Evidenzia ( giallo) - Posizione 40
They're in the business of flattering the prejudices of their base audience
Nota - Posizione 40
L IPOTESI CINICA...ALTERNATIVA
Evidenzia ( giallo) - Posizione 41
They don't want to be caught in making an overt mistake
Nota - Posizione 41
INOLTRE....SONO MAESTRI NELLA CAUTELA E NEL LINGUAGGIO AMBIGUO
Evidenzia ( giallo) - Posizione 42
They don't say there's a .7 likelihood of a terrorist attack
Nota - Posizione 42
Cccccccccc
Evidenzia ( giallo) - Posizione 43
What they say is if we go ahead with the administration's proposed tax increase there could be a devastating recession
Nota - Posizione 44
ESEMPIO DI VAGHEZZA
Evidenzia ( giallo) - Posizione 45
"We could be struck by an asteroid in the next 25 seconds," which people might interpret as something like a .0000001 probability, or "this really could happen,"
Nota - Posizione 47
ESEMPIO DI INTERPRETAZIONE AMBIGUA
Evidenzia ( giallo) - Posizione 47
insulate themselves from accountability
Nota - Posizione 47
L ARTE DELL ANALISTA
Evidenzia ( giallo) - Posizione 48
They can often be wrong, but never in error.
Nota - Posizione 48
Cccccccccc
Evidenzia ( giallo) - Posizione 52
How do people react when they're actually confronted with error?
Nota - Posizione 53
INTERESSANTE
Evidenzia ( giallo) - Posizione 53
Some people just don't have any problem saying, "I was wrong.
Nota - Posizione 53
PRIMA TIPOLOGIA...IN GENERE CONFESSANO SUL QUANTUM MA NN SULLA BONTÀ DEI LORO ASSUNTI
Evidenzia ( giallo) - Posizione 56
A surprising fraction of people are reluctant to acknowledge there was anything wrong with what they were saying.
Nota - Posizione 56
SORPRESA!
Evidenzia ( giallo) - Posizione 57
"I was wrong, but I made the right mistake."
Nota - Posizione 58
TIPICA REAZIONE DI CHI NN CONFESSA
Evidenzia ( giallo) - Posizione 59
he was acting, essentially, as a cheerleader
Nota - Posizione 59
È UNA CONFESSIONE DI MILITANZA
Evidenzia ( giallo) - Posizione 66
forecasting tournaments can play a vital role in improving the quality of public debate.
Nota - Posizione 66
LA QUALITÀ DEL DIBATTITO
Evidenzia ( giallo) - Posizione 68
One line of objection would be grounded more in Nassim Taleb's school of thought, the Black Swan view of history:
Nota - Posizione 68
PRIMA OBIEZIONE AI TORNEI
Evidenzia ( giallo) - Posizione 69
no one could have foreseen.
Nota - Posizione 69
IMPOSSIBILE PREVEDERE
Evidenzia ( giallo) - Posizione 71
history is best understood in tems of a punctuated equilibrium model.
Nota - Posizione 71
IL MODELO TALEB
Evidenzia ( giallo) - Posizione 72
violent exogenous shocks
Nota - Posizione 72
IL TUTTO È PUNTEGGIATO
Evidenzia ( giallo) - Posizione 73
we may be lulling people into a kind of false complacency by giving them the idea that you can improve your foresight
Nota - Posizione 74
NN RESTA ALLORA CHE ILLUDERE
Evidenzia ( giallo) - Posizione 77
There is, of course, no evidence to support that claim.
Nota - Posizione 77
CONTROBIEZIONE
Evidenzia ( giallo) - Posizione 80
Another interesting variant of that argument is that it's possible to learn in certain types of tasks, but not in other types of tasks.
Nota - Posizione 80
ALTRA OBIEZIONE
Evidenzia ( giallo) - Posizione 80
It's possible to learn, for example, how to be a better poker player.
Nota - Posizione 81
ESEMPIO
Evidenzia ( giallo) - Posizione 82
You learn to be a good poker player because you get repeated clear feedback and you have a well-defined sampling universe from which the cards are being drawn. You can actually learn to make reasonable probability estimates
Nota - Posizione 84
COSA SIGNIFICA ESSERE UN BUON POKERISTA
Evidenzia ( giallo) - Posizione 85
Is world politics like a poker game?
Nota - Posizione 85
DA VERIFICARE
Evidenzia ( giallo) - Posizione 86
This is an empirical question of whether people can learn to become better at these types of tasks.
Nota - Posizione 87
LA SCOMMESSA DEI TORNEI
Evidenzia ( giallo) - Posizione 87
evidence is that people can learn to become better.
Nota - Posizione 87
ORA LO SAPPIAMO
Evidenzia ( giallo) - Posizione 95
skeptics have argued that social phenomena are more cloudlike.
Nota - Posizione 95
PIUTTOSTO CHE IL POKER
Evidenzia ( giallo) - Posizione 96
cloud versus clock distinction
Nota - Posizione 96
GREAT DIVIDE
Evidenzia ( giallo) - Posizione 99
no matter how theoretically prepared the observer is, the observer is not going to be able to predict very well.
Nota - Posizione 100
SE LA SOCIETÀ FOSSE UNA NUVOLA
Evidenzia ( giallo) - Posizione 101
you're not going to be able to do much better than a dart-throwing chimpanzee.
Nota - Posizione 102
PREVEDERE LE NUVOLE
Evidenzia ( giallo) - Posizione 102
forecasters who suspected that politics was more cloudlike were actually more accurate in predicting
Nota - Posizione 103
UNA COSA È CERTA
Evidenzia ( giallo) - Posizione 104
Forecasters who were more modest about what could be accomplished predictably were actually generating more accurate predictions than forecasters who were more confident
Nota - Posizione 105
ALTRA CARATTERISTICA DEL BUON PREDITTORE....NN SI SPECOALIZZA TROPPO
Evidenzia ( giallo) - Posizione 105
We called these theoretically confident forecasters "hedgehogs." We called these more modest, self-critical forecasters "foxes,"
Nota - Posizione 106
BATTESIMO
Evidenzia ( giallo) - Posizione 107
strong inferences about accuracy from isolated episodes.
Nota - Posizione 107
IL PERICOLO DELL ISTRICE
Evidenzia ( giallo) - Posizione 112
There's a disciplined Bayesian belief adjustment process that's appropriate in response to mis-calibrated forecasts.
Nota - Posizione 113
NN CAMBIARE MA AGGIUSTARE...SE GLI EVENTI CI SMENTISCONO
Evidenzia ( giallo) - Posizione 113
What we see instead is overreactions.
Nota - Posizione 113
E INVECE
Evidenzia ( giallo) - Posizione 119
There's one school of thought that puts a lot of emphasis on the advantages of blink, on the advantages of going with your gut.
Nota - Posizione 120
LA SCUOLA DELL INTUITO
Evidenzia ( giallo) - Posizione 120
another school of thought that puts a lot of emphasis on the value of system
Nota - Posizione 121
ALTRI
Evidenzia ( giallo) - Posizione 121
For me it is really a straightforward empirical question
Nota - Posizione 121
CHI VINCE?
Evidenzia ( giallo) - Posizione 122
style of thinking
Nota - Posizione 122
LA GUERRA DEGLI STILI
Evidenzia ( giallo) - Posizione 123
a hard time finding support for the usefulness of fast and frugal simple heuristics.
Nota - Posizione 123
NELLE RICERCHE COSS EMERGE?
Evidenzia ( giallo) - Posizione 123
forecasters who are more thoughtful and self-critical do a better job
Nota - Posizione 124
DI SOLITO
Evidenzia ( giallo) - Posizione 125
situations when we don't have time
Nota - Posizione 125
MA IN ALCUNE SOTUAZIONI MEGLIO L INTUITO
Evidenzia ( giallo) - Posizione 128
what are we capable of learning from history
Nota - Posizione 128
TORNIAMO ALLA DOMANDA CHIAVE
Evidenzia ( giallo) - Posizione 133
You can make a false positive prediction or you can make a false negative prediction.
Nota - Posizione 133
I DUE ERRORI POSSIBILI
Evidenzia ( giallo) - Posizione 135
false positive on weapons of mass destruction
Nota - Posizione 135
ES DI FALSO POSITIVO
Evidenzia ( giallo) - Posizione 135
a lot of people would call 9/ 11 a serious false negative.
Nota - Posizione 136
ES DI FALSO NEGATIVO...SAPEVANO MA NN HANNO PREVISTO
Evidenzia ( giallo) - Posizione 138
If an organization has been recently clobbered for making a false positive prediction, that organization is going to make major efforts to make sure it doesn't make another false positive.
Nota - Posizione 139
OVEREACTION
Evidenzia ( giallo) - Posizione 142
a system for learning from history that's not simply programmed to avoid the most recent mistake
Nota - Posizione 143
QUELLO CHE CI OCCORRE
Evidenzia ( giallo) - Posizione 155
Nate Silver
Nota - Posizione 155
PRIMO ESTREMO
Evidenzia ( giallo) - Posizione 155
Nassim Taleb's
Nota - Posizione 156
SECONDO ESTREMO
Evidenzia ( giallo) - Posizione 156
The truth is somewhere in between
Nota - Posizione 156
TETLOCK
Evidenzia ( giallo) - Posizione 160
would you be willing to devote one percent of your annual budget to efforts to improve judgment and choice?
Nota - Posizione 160
LA SFIDA MAI RACCOLTA LANCIATA DA KANEHMAN ALLE GRANDI ORGANIZZAZIONI
Evidenzia ( giallo) - Posizione 162
more eagerness in participating in these exercises among people who are younger and lower in status
Nota - Posizione 162
LA MIA ESPERIONZA
Evidenzia ( giallo) - Posizione 165
Level playing field forecasting exercises are radically meritocratic.
Nota - Posizione 165
MERITOCRAZIA
Evidenzia ( giallo) - Posizione 166
Tom Friedman no longer has an advantage over an unknown columnist,
Nota - Posizione 166
Cccccccccc
Evidenzia ( giallo) - Posizione 166
If Tom Friedman's subjective probability estimate for how things are going in the Middle East are less accurate than those of the graduate student at Berkeley,
Nota - Posizione 167
T IMMAGINI CHE FIGURA?
Evidenzia ( giallo) - Posizione 168
radically status-destabilizing
Nota - Posizione 168
PURTROPPO I NS TORNEI NN INCONTRANO
Evidenzia ( giallo) - Posizione 172
From a sociological point of view, it's a minor miracle that this forecasting tournament is even occurring.
Nota - Posizione 173
GIÀ TANTO SE ESISTIAMO
Evidenzia ( giallo) - Posizione 174
It would be embarrassing if it turns out that thousands of amateurs working on relatively small budgets are able to outperform professionals
Nota - Posizione 175
NIENTE FINANZIAMENTI...SAREBBE IMBARAZZANTE X LA BUROCRAZIA
Evidenzia ( giallo) - Posizione 176
If it turns out that the CEO is not nearly as good as people two or three tiers down
Nota - Posizione 177
MA ANCHE X IL PRIVATO
Evidenzia ( giallo) - Posizione 177
Things that bring transparency to judgment are dangerous to your status.
Nota - Posizione 178
CONCLUSIONE
Evidenzia ( giallo) - Posizione 179
doctors are going to rely more and more on the algorithms– otherwise
Nota - Posizione 179
UN SETTORE PARALLELO DOVE QLCS AI MUOVE
Evidenzia ( giallo) - Posizione 180
When the healthcare system started to approach 20 to 25 percent of the GDP, very powerful economic actors started pushing back and demanding accountability for medical judgment.
Nota - Posizione 181
Cccccccccc
Evidenzia ( giallo) - Posizione 182
maintain a certain mystique about their judgment.
Nota - Posizione 183
L OBBIETTIVO DEGLI INCUMBENT
Evidenzia ( giallo) - Posizione 184
Level playing field forecasting tournaments are going to spread. They're going to proliferate. They're fun. They're informative. They're useful in both the private and public sector.
Nota - Posizione 186
PREVISIONE...OTTIMISMO
Evidenzia ( giallo) - Posizione 204
An important part of this forecasting tournament is moving from interesting issues to testable propositions
Nota - Posizione 204
IL DIFFICILE
Evidenzia ( giallo) - Posizione 207
If you think that the Eurozone is going to collapse– if
Nota - Posizione 207
DIFFICILE DA TESTARE UNA SIMILE PREVISIONE GENERICA
Evidenzia ( giallo) - Posizione 210
we have to translate that hedgehog like hunch into a testable proposition
Nota - Posizione 210
Cccccccc
Evidenzia ( giallo) - Posizione 211
will Greece leave the Eurozone or formally withdraw from the Eurozone by May 2013?
Nota - Posizione 211
ESEMPIO
Evidenzia ( giallo) - Posizione 216
For example, if you have a generic theory of world politics known as "realism" and you believe when there's a dominant power being threatened by a rising power– say the United States being threatened by China– it's
Nota - Posizione 217
LE TEORIE SERVONO A BOCO POICHÈ NN SONO TESTABILI
Evidenzia ( giallo) - Posizione 218
If you're a fox and you believe there's some truth to the generalization that rising powers and hegemons tend to come into conflict with each other, but there are lots of other factors
Nota - Posizione 220
LO STILE COGNITIVO DELLA VOLPE È PIÙ ADATTO AI TORNEI
Evidenzia ( giallo) - Posizione 223
Can we train people in certain principles of probabilistic reasoning that will allow them to become more accurate? The answer is, to some degree we can.
Nota - Posizione 224
CONCENTRARSI SULLA PSICOLOGIA PIÙ CHE SULLA TEORIA
Evidenzia ( giallo) - Posizione 226
you've got a lot of interesting predictions at the individual level, what are you going to do with them? How are you going to combine them to make a formal prediction in the forecasting tournament?
Nota - Posizione 227
CHE FARE UNA VOLTA CHE HO UNA GERARCHIA?
Evidenzia ( giallo) - Posizione 229
wisdom of the crowd
Nota - Posizione 229
NN VALORIZZARE SOLO IL MEGLIO
Evidenzia ( giallo) - Posizione 233
simple averaging of the individual forecasters helps.
Nota - Posizione 234
LA LEGGE DI GALTON È INTERESSANTE...I TORNEI CONFERMANO
Evidenzia ( giallo) - Posizione 234
But you can take it further, you can go beyond individual averaging and you can move to more complex weighted
Nota - Posizione 234
ESEMPIO PREDICTION MARKET
Evidenzia ( giallo) - Posizione 237
In "Moneyball" algorithms destabilized the status hierarchy.
Nota - Posizione 237
UNA PARABOLA
Evidenzia ( giallo) - Posizione 239
literature– the tension between human based forecasting and machine or algorithm based forecasting.
Nota - Posizione 239
UN CLASSICO
Evidenzia ( giallo) - Posizione 241
Over the last 58 years there have been hundreds of studies done comparing human based prediction to algorithm or machine based prediction and the track record doesn't look good for people.
Nota - Posizione 242
LA GARA UOMO MACCHINA
Evidenzia ( giallo) - Posizione 243
we're turning our forecasters into algorithms and those algorithms are outperforming the individual forecasters by substantial margins.
Nota - Posizione 244
QUEL CHE ESISTE GIÀ IN MEDICINA ESISTERÀ ANCHE IN POLITICA
Evidenzia ( giallo) - Posizione 248
In our tournament, we've skimmed off the very best forecasters in the first year, the top two percent.
Nota - Posizione 249
SUPERFORCASTER COME CAVIE
Evidenzia ( giallo) - Posizione 253
My initial hunch was that they might be able to do better.
Nota - Posizione 253
SUPERFORCASTER VS MACCHINA
Evidenzia ( giallo) - Posizione 259
"unemployed news junkies."
Nota - Posizione 259
IL DISPREZZO SU CHI PARTECIPA A QS TORNEI
Evidenzia ( giallo) - Posizione 260
They're very skillful at finding information, synthesizing it, and applying it, and then updating the response to new information. And they're very rapid updaters.
Nota - Posizione 261
UN IMMAGINE PIÙ FEDELE
Evidenzia ( giallo) - Posizione 262
"life only makes sense looking backward, but it has to be lived going forward."
Nota - Posizione 262
IL MIO MOTTO
Evidenzia ( giallo) - Posizione 265
I'd had a long standing interesting in marrying political science and psychology.
Nota - Posizione 265
LA MIA PASSIONE
