Månadens profil: Johanna Björklund

Multimodala data, nya sätt att utvärdera AI och smartare AI-modeller. Det är frågor som engagerar Johanna Björklund, professor vid Institutionen för datavetenskap vid Umeå universitet och medlem i Språkbankens styrgrupp.

Vad gör du på jobbet?

– Jag arbetar med semantisk analys av multimodala data, det vill säga datorsystem som tolkar och skapar sammansatt media som text, bild, och ljud. Min forskning rör sig i skärningspunkten mellan formella språk, maskininlärning och semantik. Jag är till exempel projektledare för WARA media och språk, en forskningsarena inom WASP, Wallenberg AI, autonoma system och mjukvaruprogram, med fokus på AI i multimodala sammanhang. Vidare är jag medgrundare till tre mediateknikföretag, Codemill, Aeterna Labs och DeepTensor, och även engagerad i Språkbankens styrgrupp. För att träna modeller krävs stora mängder data och här kommer Språkbanken, som redan är en viktig del av svensk forskningsinfrastruktur, att ha en nyckelroll i framtiden.

Vad händer just nu?

–Jag arbetar med ett nytt forskningsprojekt finansierat av Vetenskaprådet, Inlärning av graftransformationer genom algebraiska omskrivningar, vars mål är att utveckla ett nytt tillvägagångssätt inom maskininlärning för att förstå och bearbeta grafer – matematiska strukturer som används för att representera allt från vägnät till molekyler. I stället för att låta en AI-modell direkt förändra en graf tränas ett neuralt nätverk att bygga ett formellt regelsystem som arbetar med algebraiska representationer av grafer – så kallade termer som, enligt vissa matematiska regler, kan omvandlas till grafer. Genom att kombinera klassiska regelbaserade metoder och metoder baserade på neurala nätverk kan vi skapa modeller som blir begripliga, snabba och matematiskt verifierbara – egenskaper som är sällsynta i dagens AI-system.

Och vad är på gång framöver?

– Vi lever i extremt spännande tider när det gäller AI. En för mig viktig satsning är projektet Measuring what matters som sprungit ur Wallenberg Scientific Forum 2025 (WASF). Fokus ligger på att hitta nya och bättre sätt att utvärdera generativ AI eftersom de metoder som används i praktiken avgör vilka system vi till slut får. Vår ansats är att forskare, företag och samhälle måste samarbeta så att de utvärderingar som görs speglar de avsedda tillämpningarna. En utmaning är att generativa modeller sällan producerar ett enda ”korrekt” resultat. Det innebär att det inte är tillräckligt att jämföra modellernas svar med ett i förväg givet ”facit”, i stället är det nödvändigt med mänsklig återkoppling. Bäst blir det när vi kan koppla samman mänskligt och automatiserat beslutsfattande på ett effektivt, robust och transparent vis. Initiativet kommer bland annat att resultera i vetenskapliga publikationer och praktiska verktyg, och vi planerar för ett nytt event i ett annat format nästa år.

Vad driver dig?

–Jag är nyfiken, vill utvecklas och har en vilja att bygga nya saker. Redan som barn gillade jag matte och problemlösning. På dagis byggde jag en kvadratmeter av ett skepp, en liten del av vad jag tänkte skulle bli en bog i naturlig storlek. Mina planer är ofta lite väl storslagna, men de är inspirerande och jag lär mig mycket när jag försöker realisera dem.