Microsoft viser lille AI-model, der selv styrer computeren

Microsoft har offentliggjort Mage-VL-Cowork, en AI-model, der kan styre en computer næsten som et menneske. Den kan se og bruge programmer via skærmen og samtidig skrive og køre kode og kommandoer i en terminal. Det sker i én samlet model med 4 milliarder parametre. Parametre er de indstillinger, en model lærer under træning, og tallet er et groft mål for modellens størrelse.

Resultater ifølge Microsoft

På testen OSWorld-Verified opnår modellen ifølge Microsoft 66,0 procent, når den må bruge højst 50 trin pr. opgave. Microsoft kalder det det højeste resultat blandt modeller på 4 milliarder parametre. Delresultaterne er 87,5 procent på opgaver i styresystemet og 62,7 procent på opgaver, der går på tværs af flere programmer.

Alle tal er Microsofts egne og er ikke uafhængigt efterprøvet.

Sådan er modellen bygget

Mage-VL-Cowork bygger på Microsofts grundmodel Mage-VL. Den bruger synsdelen Mage-ViT og sprogmodellen Qwen3-4B. Modellen har et kontekstvindue på 32.768 tokens, altså hvor meget tekst den kan holde styr på på én gang. Dens hukommelse vægter de seneste skærmbilleder tungest.

Træningen foregår i fem trin med blandt andet finjustering og forstærkningslæring, hvor modellen lærer af forsøg og resultater. Forløbet går fra at lære grafiske brugerflader over at mestre terminalen til at blande de to. Træningsdata er lavet med værktøjet Mage-CUA-Forge, som ifølge Microsoft har skabt 293.806 opgaver fordelt på 6.915 færdigheder samt 318.837 blandede forløb.

Microsoft oplyser, at træning med online hybrid forstærkningslæring giver 10,16 procentpoint mere end ren finjustering. Samtidig falder antallet af modelkald med 13,0 procent og antallet af outputtokens med 25,4 procent.

Kun til forskning og med forsigtighed

Modellen er udgivet under Apache-2.0-licens og ligger på Hugging Face. Ifølge README-filen er den til forskningsbrug og ikke beregnet til drift i produkter eller tjenester.

Microsoft skriver, at modellen er designet og testet i isolerede sandkassemiljøer, som kan kasseres. Den kræver streng sikkerhed, blandt andet containerisolering og menneskelig godkendelse af handlinger, der ikke kan fortrydes.

Mage-VL-Cowork er ikke det samme som Microsoft 365 Copilot Cowork, som er et andet produkt. Den præcise udgivelsesdato fremgår ikke af kilderne.