Forecasting
Norsk Youtube-pionér spår nederlag for Trump med AI og prediksjonsmodeller
Kristian Fagerlie bruker AI-modeller til å spå utfallet av det amerikanske mellomvalget. Han vil bygge en virksomhet rundt prognoser for politikk, geopolitikk og finans, men først må han bevise at modellen kan slå markedet.
Publisert
Når amerikanerne går til urnene tirsdag, har Kristian Fagerlie allerede satt tall på utfallet.
Modellen hans anslår 64 prosent sannsynlighet for at Demokratene får kontroll over Senatet, og rundt 90 prosent for Representantenes hus.
Fagerlie understreker at dette er tidlige prognoser, og at det er usikkert hvor godt de vil treffe. Men det er også litt av poenget. Resultatene kan måles og sammenlignes med prediksjonsmarkeder og eksperter.
– Det er veldig artig å jobbe med noe du i det hele tatt kan få feedback på, sier han.
Foreløpig bruker Fagerlie de største kommersielle AI-modellene i systemet sitt. Ambisjonen er et opplegg som kan ta imot ulike spørsmål, særlig om politikk, geopolitikk, finans, valg og makroøkonomi. Han sammenligner det med en værmelding for framtiden.
På nettsiden ligger det nå spådommer på utfall innen alt fra møte mellom von der Leyen og Putin til hvorvidt Kina lander en astronaut på månen innen 2030.
Alle prediksjonene er etterprøvbare og sammenlignet med sannsynlighetene i prediksjonsmarkeder.
Ble stor på YouTube
Fagerlie fattet tidlig interesse for generativ AI og startet en YouTube-kanal sommeren 2022 mens han jobbet i Nordsjøen. Dette var noen måneder for ChatGPT-øyeblikket i november det året.
Da ChatGPT lanserte modellen for alle, fantes det ifølge ham lite innhold om språkmodeller på nettet. Kanalen vokste raskt, og han gikk etter hvert over til innholdsproduksjon og konsulentoppdrag på heltid.
I dag har Fagerlie et par hundre tusen følgere på YouTube og har laget innhold i samarbeid med store teknologiselskaper.
Håpet er at erfaringen og distribusjonen fra kanalen kan bli en fordel når han nå utvikler et nytt produkt med prediksjonsmodellene sine.
Bak ligger en tro på at AI kan tallfeste sannsynligheten for framtidige hendelser uten at menneskelige følelser farger vurderingene på samme måte.
Veien inn i prognosearbeidet gikk via prediksjonsmarkeder som Polymarket og Kalshi hvor man kan sette penger på alle tenkelige verifiserbare utfall.
Slike markeder er ikke lovlige å drifte i Norge da det ligner for mye på gambling, men nordmenn har lov å bruke de utenlandske markedene.
Så langt er Fagerlies prediksjoner om mellomvalget i tråd med de internasjonale markedene, men det har vært betydelige svingninger.
For ett år siden pekte modellene på republikansk seier i senatet, men siden midten av september i år har det vært dårligere «avkastning» på å vedde på demokratisk seier enn republikansk. Og dagen før valget ligger den anslåtte sannsynligheten for demokratisk seier på 73 prosent på Kalshi.
Data før modell
Foreløpig bruker Fagerlie mest tid på datainnsamling. Han lagrer øyeblikksbilder av hvordan verden ser ut på et gitt tidspunkt, blant annet spørsmål, informasjon og markedsdata. Slik kan han senere teste hvordan prognosene ville gjort det med bare den informasjonen som var tilgjengelig da.
Han mener datagrunnlaget kan bli viktigere enn valget av språkmodell. Samtidig har han begynt å teste hvordan han kan trene en egen modell basert på en åpen kildekode.
Målet er å komme i gang med dette fra januar når han har mer data.
Prosjektet, som han kaller Sikt Intelligence, er ennå ikke registrert som aksjeselskap. Han har verken kunder eller investorer, men forteller om rundt 300 personer på venteliste.
Før han går til investorer, mener han at han må kunne vise at modellen har en faktisk fordel.
– Du må ha data på at du faktisk har noe som gir verdi, sier han.
Selskapet ligger altså et stykke fram. Først vil Fagerlie publisere prognosene, følge med på hvordan de treffer og sammenligne resultatene med markedet og andre prognoser. YouTube-kanalen gir ham en start på distribusjonen. Om det kan bli en forretning, avhenger av om han klarer å dokumentere at prognosene er gode nok.
Så langt er det i hvert fall nokså lovende. Fagerlies prediksjoner ligger fortsatt på topp 50 av 600 AI-systemet i turneringen til Metaculus hvor vinneren stikker av med en halv million kroner.
