OpenAI vil hjælpe virksomheder med at måle AI-værdi

Mange virksomheder har taget ChatGPT og Codex, som er OpenAIs værktøj til programmering, i brug blandt medarbejderne. Men de fleste kan ikke svare klart på, om det egentlig betaler sig. Derfor har OpenAI udgivet en guide og flere analyseværktøjer i sin administrationsside, kaldet Admin Console, som skal gøre det lettere at koble AI-forbrug til konkrete resultater i virksomheden.

Første skridt er at se, hvor forbruget ligger. Et værktøj kaldet Workspace Analytics viser, hvor mange medarbejdere der bruger AI, hvor mange beskeder de sender, og hvor meget det koster fordelt på afdelinger. Det giver it-afdelingen og indkøb et overblik over, hvor de skal sætte ind med support og budget.

Dernæst kan man undersøge, hvad AI bliver brugt til. Et værktøj kaldet Usage Insights sorterer samtaler i kategorier som udkast, opsummeringer eller research, ud fra stikprøver af den daglige brug. Det viser, om medarbejderne rent faktisk bruger AI til det, virksomheden havde håbet, eller om brugen ligger et andet sted.

For udviklingsteams findes et værktøj, der følger med i, hvor meget kode Codex har bidraget til, blandt andet hvor stor en andel af den færdige, godkendte kode AI har været med til at skrive. Men OpenAI understreger selv, at godkendt kode ikke automatisk er det samme som værdi, og at antal linjer kode ikke siger noget om kvaliteten. Det skal ses sammen med, hvor lang tid det tager at gennemgå koden, og hvor mange fejl der opstår.

Har virksomheden allerede egne systemer til at analysere data, kan tallene hentes ud og kobles sammen med virksomhedens egne nøgletal, for eksempel i en rapport til ledelsen. Der findes også en funktion, der automatisk kan sætte forbrug og adoption op i en færdig præsentation.

Det vigtigste skridt er dog at koble forbrugstallene til det, der faktisk betyder noget for forretningen: leveringstid, kvalitet, kundetilfredshed eller omkostninger. OpenAI nævner selv et eksempel fra en kundeserviceafdeling, hvor man sammenholder AI-brug med data fra kundesager for at se, om AI-hjælp til at skrive svar rent faktisk gør svartiden kortere, uden at flere sager bliver genåbnet.

Her kommer også den vigtigste advarsel, som både OpenAI og uafhængige analytikere gentager: at folk bruger AI-værktøjerne meget, er ikke det samme som bevis for, at arbejdet er blevet bedre eller hurtigere. Analytiker Biswajeet Mahapatra fra analysehuset Forrester siger til magasinet CIO, at det ikke er nok kun at måle, hvor meget AI bliver brugt, fordi det kun viser aktivitet og ikke effekt. Analysehuset Gartner peger på det samme: virksomheder bør også se på konkrete forretningsmål som vækst i indtjening og produktivitet, frem for kun at tælle forbrug.

OpenAI konkluderer da også selv, at de nye analyseværktøjer skal ses som et udgangspunkt for en samtale i virksomheden, ikke som et endeligt svar. Værktøjerne kan vise, hvem der bruger AI, og til hvad. Men det er stadig op til lederne i virksomheden at vurdere, hvad det reelt er værd.