Newsletter - Dobrý Úsudek - Červenec
Červenec 22, 2024
Vítejte u Dobrého Úsudku
prvního českého newsletteru o úsudkovém forecastingu
a souvisejících tématech od think-tanku České priority
České priority se rozvíjením úsudkového forecastingu a souvisejících metod zabývají od roku 2020, především skrze turnaje OPTIONS a FORPOL. V červenci 2023 jsme sestavili Odborný Predikční Tým (OPT) složený z nejúspěšnějších účastníků našich turnajů, který pomáhá připravenosti veřejných institucí a volbě informanějších rozhodnutí o budoucnosti.
Forecastingové a foresightové workshopy Českých priorit
České priority nově nabízí workshopové cykly zaměřené na různé metody strategického foresightu (horizon scanning, scenario making, delphi, …), mezi které spadá také forecasting. Pokud byste vy a nebo organizace kolem vás měly zájem proniknout hlouběji do problematiky a nebo se o ní dozvědět alespoň základy, tyto workshopy jsou pro obojí ideální příležitostí. Více si můžete přečíst zde, případně se neváhejte zeptat na emailu foresight@ceskepriority.cz.
Zapojte se do predikování na FORPOL Open
Pokud máte zájem s úsudkovým forecastingem experimentovat (případně ho trénovat), můžete tak učinit na naší volně přístupné platformě FORPOL Open. Stačí si pouze založit účet na platformě Metaculus a přihlásit se na jeho subdoméně.
Otázky, zpravidla v počtu 3-5, nově přidáváme vždy přibližně 10. den v měsíci a vyhodnocujeme je za necelý měsíc, takže budete mít rychlou zpětnou vazbu a vždy něco nového k zamyšlení. Příležitostně pak publikujeme i dlouhodobější otázky - případně můžete pokládat i otázky vlastní.
Novinky ze světového forecastingu
Platforma Metaculus přechází na open source formát
Metaculus, který patří mezi nejdůležitější aktéry v oblasti forecastingu, se otevře a dá veřejně k dispozici veškerý svůj kód. To dovolí uživatelům primárně skrze GitHub navrhovat řešení (případně zefektivnění) pro stávající výzvy a tím platformu komunitně vylepšovat. Zároveň umožní vyšší míru transparentnosti, jednodušší vhled do toho, jak jsou některé typy otázek implementovány, což povede k hlubšímu porozumění procesům na platformě. Tým Metaculu sám píše, že čekal na dostatečné otestování nového způsobu skórování než přistoupil k tomuto plánovanému roku, nyní věří, že open source přístup nebude možné zneužít.
Lovte “bugy” na predikčních trzích
Platforma Kalshi nově zavádí tzv. “market bug bounty” program, ve své podstatě jde o motivaci k identifikování potenciálních problémů u konkrétních otázek, které by mohly vést ke zvýhodnění části uživatelů nebo dezinterpretaci sledovaného fenoménu. Koncept je v IT prostředí dobře známý, a to i v oblasti predikčních trhů - např. Polymarket jím taktéž disponuje. Zpravidla se ale podobné aktivity zaměřují na technické aspekty - především bezpečnostní chyby (tak je tomu i u zmíněného Polymarketu).
V tomto je Kalshi unikátní, jelikož odměnu nabízí například za odhalení protichůdných informací v otázce a nebo za zvyšování specificity, která pomůže zajistit jasnou interpretovatelnost.
Potrénujte své forecastingové dovednosti!
Na platformě Good Judgment Open před několika týdny začal turnaj In the News 2025, který se věnuje aktuálním tématům z různých oblastí. Obdobně pak 8.7. začal Quarterly Cup na Metaculu. Ani jeden turnaj není za odměnu, ale nabízí kvantitu otázek napříč mnoha obory, což je ideální forecasterské cvičení.
Zamyšlení nad forecastingem pomocí nástrojů umělé inteligence
Quantified Uncertainty Research Institute (QURI) je malou organizací, která se věnuje především forecastingu a jeho zlepšování. Jeho hlavním projektem je aktuálně vyvíjení jednoduchého programovacího jazyka Squiggle, který je určen k pravděpodobnostnímu odhadování. Ve svém blogovém příspěvku shrnuje některé argumenty úzce související s diskuzí o zapojování/nezapojování různých chatbotů do forecastingového procesu. QURI také vytvořilo nástroj MetaForecast, který umožňuje na jediném místě rychle porovnávat predikce napříč různými forecastingovými platformami, doporučuji vyzkoušet.
Zajímavá forecastingová otázka ze zahraničí
Zpravidla se při výběru otázek držíme v dobře známých vodách Good Judgment Open, Metaculu a nebo Manifold Markets, dnes ale vybíráme v tomto roce co do počtu účastníků nejpopulárnější otázku na platformě INFER, které se zatím účastní 177 forecasterů. Otázka se dotazuje na to, zda do konce letošního roku Microsoft ukončí činnost své laboratoře umělé inteligence v Číně (Microsoft Research Asia). Pravděpodobnost, kterou tomuto scénáři forecasteři INFERu přisuzují si můžete přečíst níže.
Odlišné formy forecastingu
Pouze několik týdnů probíhá “experiment” především stavějící na zkušenostech forecasterů skupiny Samotsvety. Jde o Sentinel Team, který má konstantně monitorovat vývoj ve světě predikovat budoucí vývoj. V případě, že rozpozná, hrozbu zásadní katastrofické události, aktivuje tzv. Emergency Response Team (ERT), který může okamžitě začít pracovat na doporučeních vedoucích k co nejvhodnějšímu omezení negativních dopadů. Aktuálně ERT shání “rezervisty”, kteří by jej posílili.
Zatím se zdá, že informace bude uskupení zveřejnovat postupně, v tomto okamžiku totiž mnoho jasného není, nicméně věřím, že takový projekt může některé z čtenářů zaujmout.
Pokud se vám Dobrý Úsudek líbí, budeme rádi, pokud dáte vědět svým známým o možnosti jeho odebírání, například přes odkaz níže. Na další číslo newsletteru se můžete těšit přibližně za měsíc.
Za tým Českých priorit,
Pavel Hanosek