DataPelago accélère Apache Spark sur Amazon EKS
DataPelago Accelerator for Spark (DPA-S) est désormais disponible sur Amazon EKS, promettant une exécution jusqu'à 10 fois plus rapide et jusqu'à 80 % de réduction des coûts pour les charges de travail Apache Spark.
Amazon Web Services (AWS) et son partenaire DataPelago ont introduit une solution pour accélérer de manière significative les charges de travail Apache Spark sur Amazon Elastic Kubernetes Service (Amazon EKS). DataPelago Accelerator for Spark (DPA-S) fournirait jusqu'à dix fois plus de vitesse d'exécution et jusqu'à 80 % de réduction des coûts sans nécessiter de modifications aux applications existantes ou aux pipelines de données.
L'offre s'adresse aux entreprises qui traitent de grands ensembles de données et utilisent l'intelligence artificielle et l'analytique. Historiquement, les performances d'Apache Spark ont été un goulot d'étranglement en raison de sa conception pour des environnements basés uniquement sur les CPU, même si les centres de données modernes intègrent de plus en plus de GPU et d'autres unités de traitement spécialisées.
DataPelago, un partenaire AWS ISV, intègre ses capacités d'accélération directement dans Amazon EKS. Cela permet aux clients de secteurs tels que les médias sociaux, le commerce électronique et les services financiers d'améliorer l'efficacité de leur traitement de données sans recoder leurs applications. Les premiers environnements de production ont démontré des améliorations de performance substantielles.
AWS et DataPelago offrent aux clients la possibilité de tester la solution dans le cadre de projets de preuve de concept (PoC) au sein de leur propre infrastructure. Cela permet de quantifier les avantages potentiels avant un déploiement plus large.