Le générateur vidéo Kling AI combine texte et images pour une qualité cinématographique
Kling AI de Kuaishou Technology, lancé en juin 2024, propose une génération vidéo avancée. Sa dernière version, Kling 2.6, permet la génération audio-visuelle simultanée, optimisant la création de contenu.
La société technologique chinoise Kuaishou Technology a développé une plateforme de génération vidéo par IA nommée Kling AI. Lancée en juin 2024, la dernière itération de la plateforme, Kling 2.6, introduit la génération simultanée d'audio et de vidéo, améliorant considérablement le flux de travail des créateurs de contenu sur les réseaux sociaux.
Kling AI transforme les descriptions textuelles et les images statiques en vidéos de haute qualité cinématographique. Il utilise une architecture Diffusion-Convolutional Neural Network combinée à un mécanisme 3D Spatiotemporal Joint Attention, lui permettant de comprendre le mouvement dans l'espace et le temps.
Une fonctionnalité plus récente, Kling Video O1, utilise le raisonnement "Chain of Thought" pour "comprendre" la physique et la logique des invites avant le rendu. Elle prend également en charge l'édition basée sur le texte, permettant aux utilisateurs d'échanger des objets ou de modifier des arrière-plans sans avoir à refaire le tournage.
Les utilisateurs peuvent télécharger des images fixes et les animer avec des mouvements étonnamment naturels. Le système "Elements" permet en outre de combiner jusqu'à quatre images de référence pour maintenir la cohérence des personnages dans les vidéos générées. Le niveau gratuit de Kling AI offre des crédits limités, tandis que les forfaits payants commencent à environ 10 $ par mois, offrant une meilleure qualité et plus de fonctionnalités.