AI poráží lidi v předpovídání budoucnosti

Umělá inteligence se rychle učí předpovídat události, které ovlivňují celý svět a v některých případech už překonává běžné lidské odhady. Na platformě Metaculus, kde se lidé snaží odhadnout pravděpodobnosti geopolitických událostí, se nedávno objevila novinka – AI model od startupu Mantic dosáhl osmého místa v soutěži mezi 549 účastníky. Tento úspěch překvapil i samotné tvůrce, protože před zahájením soutěže očekávali, že AI dosáhne jen zhruba 40 procent výkonu nejlepších lidských prognostiků, ale nakonec to bylo přes 80 procent.

Každé tři měsíce se na Metaculus koná soutěž nazvaná cup, kde účastníci odhadují pravděpodobnosti událostí jako vojenský puč v Thajsku před zářím 2025 nebo izraelský útok na íránskou armádu v Íránu před stejným datem. Cílem není jen říct ano nebo ne, ale přesně odhadnout procentuální šanci a to týdny nebo měsíce dopředu. Lidé na Metaculus už dříve úspěšně odhadli datum ruské invaze na Ukrajinu dva týdny předem nebo dali 90procentní šanci na zrušení Roe v. Wade skoro dva měsíce před rozhodnutím. V letní soutěži, jejíž vítězové byli oznámeni ve středu, se do top 10 dostal právě AI od Mantic, což je poprvé, kdy bot obsadil tak vysokou pozici v této sérii soutěží.

Co přináší AI do předpovídání

Toby Shevlane, šéf startupu Mantic z Velké Británie, který AI vyvinul, řekl, že tento výsledek je ohromující. Soutěž obsahovala 60 otázek a AI se umístil na osmém místě z 549 soutěžících. Nathan Manzotti, který pracoval na AI a analýzách dat pro ministerstvo obrany USA a další vládní agentury, vysvětluje, že předpovídání je všude – v každé vládní agentuře se nějakým způsobem odhaduje budoucnost. Anthony Vassalo z think tanku RAND dodává, že forecastery pomáhají institucím předvídat události a dokonce je měnit. Například aktualizují odhady na základě nových politik, což umožňuje rozhodovatelům upravit směr, pokud se situace vyvíjí špatně.

Předpovídání složitých geopolitických otázek je obtížné, protože zahrnuje mnoho propojených faktorů. Deger Turan, šéf Metaculus, říká, že strojové učení (machine learning) se dlouho osvědčilo v oblastech s bohatými daty, jako je předpověď počasí nebo obchodování na burze. Ale u geopolitiky nebo technologického pokroku často stačí lidský úsudek, který je dostupnější. Velké jazykové modely (large language models) však pracují se stejnými chaotickými informacemi jako lidé a dokážou napodobit jejich úsudek. Navíc se zlepšují podobně jako lidé – trénují na mnoha otázkách, sledují výsledky a upravují metody, jen v mnohem větším měřítku.

Výzvy a výhody AI oproti lidem

Ben Turtel ze společnosti LightningRod, která vyvíjí AI pro předpovídání, zdůrazňuje, že předpovídání budoucnosti je ověřitelný problém, podobně jako se učí lidé. Jejich model trénoval na 100 000 otázkách. V červnu se bot postavený na modelu o1 od OpenAI umístil na 25. místě v soutěži. Ben Wilson z Metaculus, který srovnává AI a lidi, upozorňuje, že výsledky je třeba brát opatrně – soutěž má jen malý vzorek otázek a mnoho účastníků jsou amatéři, kteří odhadují jen málo. AI má navíc výhodu v "pokrytí" – boduje za brzké odhady, množství otázek a časté aktualizace, což lidé nedokážou.

Další informace z internetu potvrzují, že současné AI modely dosahují nebo překonávají průměrný dav na Metaculus, ale stále zaostávají za elitními lidskými prognostiky, nazývanými superforecastery. Například v benchmarkových testech mají AI lepší Brier skóre (měřítko přesnosti, kde nižší hodnota znamená lepší výkon) než střední uživatel, ale horší než profesionál. V čtvrtém čtvrtletí 2024 měl nejlepší bot skóre -8,6 oproti profesionálům, což je zlepšení z -11,3 v předchozím čtvrtletí. Odborníci odhadují, že AI by mohlo dosáhnout úrovně superforecasterů kolem poloviny 2026, s širokým rozptylem od října 2025 do 2030.

Pro Vassala z RAND je klíčové, že AI nemusí být na úrovni superforecasterů – stačí, aby bylo stejně dobré jako dav. Komunitní předpověď na Metaculus, která agreguje všechny odhady, by se umístila na čtvrtém místě, kdyby byla člověk. V soutěži Mantic zaostal za touto komunitní předpovědí o pět míst. Spolehlivý AI by mohl sledovat stovky otázek najednou, což by umožnilo nasadit lidské experty jen na ty nejdůležitější.

Budoucnost předpovídání s AI

Předpovídání slouží jako podpora rozhodování, jak říká Manzotti, ale mnoho lídrů se řídí intuicí místo dat. To je problém, který AI nevyřeší. Nicméně AI už teď pomáhá v rychlých odhadech a pokrývání více témat. V soutěži je cena kolem 5 000 dolarů (112 500 kč). Pro organizace jako RAND by to znamenalo úsporu času – lidské předpovědi na jednu otázku mohou trvat dny a stát desítky tisíc dolarů.

Tento vývoj otevírá dveře k rychlejším a dostupnějším předpovědím, které mohou pomoci předcházet překvapením v geopolitice. Zatímco AI ještě nedosahuje vrcholu lidských schopností, jeho růst naznačuje, že brzy bude nepostradatelným nástrojem pro ty, kdo chtějí nahlédnout do budoucnosti.

Zdroj: time.com