Amazon Bedrock julkaisi mallien arviointityökalut

Amazon Web Services (AWS) on tuonut yleiseen käyttöön Amazon Bedrock -alustan mallien arviointityökalun, joka julkaistiin alun perin esikatseluversiona AWS re:Invent -tapahtumassa vuonna 2023. Tämä uusi ominaisuus on suunniteltu auttamaan kehittäjiä valitsemaan tehokkaasti parhaat perusmallit (foundation models) generatiivisen tekoälyn sovelluksiinsa.

AWS:n mukaan mallien arviointi on kriittinen vaihe tekoälysovellusten kehitysprosessissa. Uusi työkalu tarjoaa kehittäjille mahdollisuuden kokeilla eri malleja pelikenttäympäristössä, nopeuttaa iterointia automaattisten arviointien avulla ja varmistaa laadun ihmisarviointien kautta ennen julkaisua.

Mallinarviointityökalun avulla käyttäjät voivat luoda arviointitehtäviä valitsemalla arviointimenetelmän (automaattinen tai ihmisarviointi), haluamansa perusmallin, tehtävätyypin ja arviointimetriikat. Automaattisissa arvioinneissa voidaan hyödyntää metriikoita, kuten tarkkuutta, vankkuutta ja toksisuutta. Käyttäjät voivat myös määritellä omia metriikoitaan, kuten ystävällisyyttä, tyyliä tai ohjeiden noudattamista.

Palvelu on saanut palautetta esikatseluvaiheen aikana, ja AWS on hyödyntänyt sitä parantaakseen ominaisuuksia ennen yleistä julkaisua. Amazon Bedrock on pilvipohjainen palvelu, joka tarjoaa pääsyn useisiin eri tekoälymalleihin, mahdollistaen asiakkaille joustavan tavan hyödyntää generatiivista tekoälyä.