Databricks pyrkii korvaamaan erilliset reaaliaikaiset tietokannat Lakehouse//RT:llä

Databricks on julkaissut Lakehouse//RT-moottorin, jonka tavoitteena on mahdollistaa reaaliaikainen analytiikka suoraan Delta Lake- ja Apache Iceberg -tauluilla. Uuden teknologian on tarkoitus poistaa tarve erillisille palvelujärjestelmille ja erikoistuneille reaaliaikaisille tietokannoille, joiden avulla sovellukset ja tekoälyagentit voisivat käyttää dataa suoraan Lakehouse-ympäristöstä.

Markkinat, joilla yritykset tarvitsevat nopeaa datan saatavuutta, ovat perinteisesti olleet erikoistuneiden järjestelmien, kuten ClickHousen, Apache Pinotin tai Apache Druidin, hallitsemia. Näiden järjestelmien käyttöönotto analyysialustojen rinnalla datan pienten vasteaikojen varmistamiseksi kasvattaa yritysten monimutkaisuutta ja kustannuksia tietokopioiden ja synkronointiprosessien vuoksi.

Lakehouse//RT pyrkii ratkaisemaan näitä haasteita tarjoamalla millisekuntien vasteaikoja suoraan Delta Lake- ja Iceberg-tauluille. Databricks perustelee uudistusta erityisesti tekoälyagenttien kasvavalla käytöllä, jotka vaativat jatkuvasti ajantasaista tietoa matalalla viiveellä. Lakehouse//RT mahdollistaa datan käytön suoraan Lakehouse-ympäristöstä ilman ylimääräisiä kopiointiprosesseja.

Teknologian keskiössä on uusi Reyden-suoritusmoottori, joka hyödyntää asynkronista suoritusmallia. Databricksin mukaan se saavuttaa noin 10 millisekunnin vasteajat pienillä datoilla ja alle 100 millisekunnin suuremmilla tietomäärillä. Lakehouse//RT integroituu Databricksin Unity Catalogiin, mikä varmistaa yhdenmukaisen hallinnan ja turvallisuuden reaaliaikaisille kyselyille.