Tencent släpper öppen källkod för realtidsöversättning

Tencent har publicerat sin modell Hy-SimulMT med öppen källkod. Systemet är byggt för att bearbeta tal i realtid och kan generera översättningar i både text- och talformat, komplett med röstkloning som syftar till att bevara talarens röstkaraktär.

Enligt interna tester uppnår modellen en fördröjning på cirka tre sekunder vid långformad ljudanalys. Företaget rapporterar att Hy-SimulMT presterar bättre än flera befintliga öppna alternativ och fyra av fem jämförda kommersiella gränssnitt. För att aktivera röstgenerering krävs dock en separat konfiguration för text-till-tal.

Paketet omfattar modellvikter, programvara för slutledning samt verktyg för träning. För de som vill testa tekniken finns den tillgänglig via företagets applikation Hy Translate.