OpenAI lanserar benchmark för AI inom mental hälsa

AI-företaget OpenAI har lanserat MentalHealthBench, ett öppet benchmark som är utformat för att testa hur AI-system presterar i realistiska konversationer om mental hälsa. Initiala tester genomfördes den 23 september.

OpenAI uppger att benchmarken utvecklades i samarbete med över 80 licensierade experter inom mental hälsa från 22 länder. Systemet använder syntetiska chattar som täcker olika scenarier, från icke-akuta samtal till nödsituationer, och inkluderar användare som vuxna, tonåringar, vårdgivare och kliniker över flera språk och regioner.

Företaget utvärderar AI-modellernas svar mot expertkriterier med hjälp av en automatiserad granskare kallad GPT-5.6 Sol. OpenAI genomförde även en separat studie med 44 vuxna från 16 länder som använt AI för stöd kring mental hälsa. Resultaten visade att användarna prioriterade tonfall och konkreta nästa steg, medan experterna lade större vikt vid att samla in kontext och tolka tvetydiga situationer.

Lanseringen sker i en tid av ökad granskning av AI:s roll inom vården, inklusive riktlinjer från amerikanska FDA för digitala verktyg för mental hälsa och rättsfall som rör AI-chattbottars potentiella påverkan.