Cloudflare sallii haun, kieltää tekoälyn koulutuksen
Cloudflare esittelee uusia sääntöjä tekoälybotteille. Sivustojen omistajat voivat nyt estää sisältönsä käytön tekoälymallien koulutukseen samalla kun hakukoneet saavat jatkaa indeksointia.
Verkkoturvayhtiö Cloudflare on ottanut käyttöön uusia sääntöjä tekoälyyn liittyville roboteille. Uudistuksen myötä verkkosivustojen ylläpitäjät voivat erikseen määritellä, saako sivuston sisältöä käyttää tekoälymallien koulutukseen vai ei. Samalla hakukoneiden, kuten Googlen ja Bingin, sallitaan jatkaa sisällön indeksointia tiedonhakua varten.
Uusi "Disallow AI Training" -asetus on suunnattu erityisesti monikäyttöisille boteille, kuten Applebot, Googlebot ja Bingbot, jotka hoitavat sekä tiedonhakua että mahdollisesti tekoälyn koulutusta. Aiemmin tällaisen botin estäminen olisi tarkoittanut myös sen estymistä hakutuloksissa. Cloudflaren uusi lähestymistapa julkaistaan robots.txt-tiedostossa, ja se luokittelee saapuvat botit niiden käyttötarkoituksen mukaan.
Puhdasta tekoälyn koulutukseen tarkoitettuja botteja Cloudflare estää jo infrastruktuuritasollaan. Monikäyttöisten bottien kohdalla on kuitenkin odotettavissa, että ne noudattavat robots.txt-tiedostossa annettua koulutuskieltoa samalla kun ne jatkavat sivuston indeksointia hakutarkoituksiin. Cloudflare on jakanut botit kolmeen luokkaan: haku (search), koulutus (training) ja agentti (agent). Tämä eriyttäminen mahdollistaa aiempaa tarkemman hallinnan.
Muutokset astuivat voimaan 15. syyskuuta. Aikaisempi yleinen "Block AI Bots" -asetus korvataan tarkemmilla kategorioilla. Cloudflare pyrkii siirtämään olemassa olevat asetukset automaattisesti uusiin toimintoihin. Yritys luokittelee Applen, Googlen ja Microsoftin "vastuullisiksi" toimijoiksi, koska nämä tarjoavat erillisiä hallintamahdollisuuksia tekoälyn koulutuksen estämiseksi tai tekevät sitoutumuksia läpinäkyvyyteen ja hakunäkyvyyden ylläpitämiseen koulutuskiellosta huolimatta.