Hjärnimplantat kombinerar tal och gester med AI
Forskare har utvecklat ett hjärnimplantat som samtidigt kan läsa av avsedda tal- och gestkommandon och omvandla dem till text och avatar-rörelser. AI löser överlappningen av hjärnområden.
Enligt en rapport från det nyzeeländska teknikpublikationen Fast Company kan ett hjärnimplantat för första gången samtidigt läsa av en förlamad persons försök att tala och gestikulera. Enheten använder artificiell intelligens (AI) för att omvandla hjärnimpulser till text och rörelser för en digital avatar, vilket utgör ett betydande framsteg inom hjärna-dator-gränssnitt (BCI).
Hittills har BCI-system endast kunnat avkoda en typ av kommando åt gången, antingen tal eller gester. Den partiella överlappningen av hjärnområden som styr tal och handrörelser har skapat utmaningar för samtidig tolkning.
Det nya systemet från forskare vid University of California, San Francisco (UCSF) hanterar tal och gester tillsammans med hjälp av AI. Även om systemets vokabulär är begränsat och noggrannheten ännu inte är perfekt, möjliggör det en bredare kommunikation och interaktion för personer som har förlorat sin rörlighets- eller talförmåga.
Forskaren Samantha Brosler uppger att det långsiktiga målet är att utveckla en "helkropps-BCI" som återställer flera kommunikations- och rörelseformer. Avkodade signaler skulle kunna användas för att styra en virtuell avatar, andra hjälpmedel eller till och med en fysisk robot-surrogat, vilket ger personer med förlamning större flexibilitet i hur de interagerar med världen.