Ateities spėjimas ne žaliems – superforecasting

Superforecasting: The Art and Science of Prediction. By Philip Tetlock and Dan Gardner

Ateities spėjimas visada yra komplikuotas. Dažniausiai jis nepasiteisina. Deja, priimti sprendimus turime nuolat. Knyga yra pakankamai šviežia, todėl ir joje minimos didžiausios nesėkmės yra lengvai atsimenamos – S. Balmer teigimas, kad žmonės niekada nepirks iPhone ar žvalgybos analitikų įsitikinimas, kad S. Huseinas savo rūmus buvo išpuošęs sodrinto urano galvutėmis.

Knygą labai gražiai pristato HBR ir The Economist.

Panašu, kad spėjimas arba sprendimų priėmimas spėjant įvykius nėra susijęs su antgamtiškomis savybėmis, o kad  ekspertus spėjant dažnai pralenkia šimpanzės ar žuvytės, jau žino turbūt visi. Anot autorių, yra keletas svarbių savybių, kurias būtina vystyti, siekiant kaip galima tikslesnio spėjimo:

  • Sveikas skepticizmas
  • Atsisakyti iliuzijos, kad žinai kažką daugiau nei iš tiesų žinai – čia verta paminėti D. Kahneman teoriją apie pirmąją greitą ir antrąją lėtą sistemas.
  • Matuoti ir turėti istorinius duomenis apie spėjimus ir jų sėkmingumą.
  • Suprasti, kad statistika ir rezultatas yra skirtingai suvokiami. Pavyzdžiui, jei buvo nustatyta 70% tikimybė, kad įvykis nutiks, o taip nebuvo, tai ir matuoti reikia statistiškai, o ne faktą taip/ne.
  • Nuolat tikslinti savo prognozę, vos tik gaunama papildomų duomenų.
  • Geriausi prognozuotojai, kurių rezultatai gerokai skiriasi nuo vidutinių, nėra profesionalai, išmokyti spėjimo mokyklose. Panašu, kad jų gebėjimas rinkti informaciją, ją suvokti ir panaudoti kompiuterio pateikiamus duomenis yra esminis geram sprendimui priimti.
  • Bandos įtaka (crowd wisdom), inkaravimas ir kitos realybę iškreipiančios ydos – būtina sveikai suvokti, kur faktai, o kur nuomonės ar įsitikinimai.
  • Labai dažnai knygoje minima IARPA – agentūra, apie kurią, tiesą sakanti, iki šiol nebuvau girdėjęs.

Prognozuotojų apibūdinimas:

  • Cautious
  • Humble
  • Nondeterministic
  • Actively open-minded
  • Intelligent and knowledgeable with a need-for-cognition
  • Reflective, introspective and self-critical
  • Numerate
  • Pragmatic (vs Big Idea)
  • Analytical (capably of seeing multiple perspectives)
  • Dragonfly-eyed (value multiple perspectives) So important they bullet-pointer it twice! 🙂
  • Probabilistic
  • Thoughtful updaters
  • Good intuitive psychologists (aware of and able to compensate for common biases)
  • Growth mindset
  • Grit

Patarimai prognozuotojams (paėmiau iš čia):

  1. Triage. Focus on questions where extra attention is likely to improve accuracy. Not too hard, not too easy. Weigh the consequences of wasting time on an unpredictable event vs failing to predict a predictable event before deciding whether to invest effort on a problem.
  2. Break seemingly intractable problems into tractable sub-problems ie use Fermi estimates.
  3. Strike the right balance between the inside and outside views.
  4. Strike the right balance between under- and over-reacting to new evidence.
  5. Look for the clashing causal forces at work in each problem. Weigh all the perspectives.
  6. Strive to distinguish as many degrees of doubt as the problem permits, but no more ie get comfortable using fine-grained estimates for fine-grained problems.
  7. Strike the right balance between under- and over-confidence, between prudence and decisiveness.
  8. Look for the errors behind your mistakes but beware of rearview-mirror hindsight biases. Own your failures!
  9. Bring out the best in others and let others bring out the best in you. Team dynamics matter as much as team composition.
  10. Master the error-balancing bicycle. These commandments are not enough – you need deep, deliberative practice.
  11. Don’t treat commandments as commandments.