Carte
Developing expert political judgment: The impact of training and practice on judgmental accuracy in geopolitical forecasting tournaments
de Welton Chang, Eva Chen, Barbara Mellers, Philip E. Tetlock · 2016 · 1 fișă de lectură
1 fișă
Developing expert political judgment: The impact of training and practice on judgmental accuracy in geopolitical forecasting tournaments · 2016
Antrenamentul probabilistic de o oră a scăzut scorul Brier cu 6–11% față de control, iar numărul acesta există doar pentru că cineva a ținut un grup de control.
În primul an, GJP a testat două module de circa 45 de minute: antrenament probabilistic și antrenament pe scenarii. Ambele au bătut grupul fără antrenament, iar cel probabilistic l-a bătut pe cel cu scenarii (Mellers et al. 2014); beneficiul a ținut două sezoane, fiecare de 8–10 luni. Modulul probabilistic se rezuma prin acronimul CHAMP: clase de comparație, tendințe istorice, medierea mai multor estimări, modele matematice și biasuri previzibile. Din anul al treilea a devenit CHAMPS KNOW: S pentru alegerea întrebărilor și a efortului, plus patru reguli de raționament politic — cine sunt actorii și ce vor, normele instituțiilor, alte perspective, evenimentele neprevăzute (Chang et al. 2016). Cât a contat? Rezumatul lui Chang et al. dă 6–11% scor Brier mai bun decât controlul; pe ani, textul raportează 10–11% în primul, 12% în al doilea, 6% în al treilea și 7% în al patrulea. Abilitatea cognitivă și exersarea au contribuit separat, fără interacțiuni semnificative, iar autorii socotesc efectele o limită inferioară a ce ar da un antrenament mai lung. Partea care se uită cel mai des e designul: participanții au fost repartizați aleator în antrenament sau control, pe aceleași întrebări. Fără asta, «după curs am prognozat mai bine» poate însemna doar că anul a fost mai ușor.
“Deși antrenamentul a durat mai puțin de o oră, a îmbunătățit constant acuratețea (scorurile Brier) cu 6 până la 11% față de condiția de control.”