Forskare söker efter nya lösningar för att förbättra stora språkmodeller (LLM). Transformatorn, som introducerades av Google för nio år sedan, har blivit en flaskhals när LLM blir större och bättre. Fyra nya idéer för att lösa transformatorproblemet presenteras, som kan göra LLM snabbare, mer effektiva och kanske till och med smartare.

Samtidigt pågår en förändring inom akademisk AI-forskning. Universitetsforskare inom AI står inför nya utmaningar och möjligheter, och initiativ som Schmidt Sciences AI2050-program stödjer akademiker som arbetar med AI.