CrePal publie un guide pour une utilisation efficace du modèle vidéo IA HappyHorse 1.0

CrePal a publié un nouveau guide axé sur l'utilisation efficace de son modèle vidéo IA, HappyHorse 1.0. Le modèle, qui a atteint le sommet des classements vidéo IA de manière inattendue et sans annonce préalable, nécessite des instructions spécifiques (prompts) pour réaliser son plein potentiel, selon le guide.

Le guide explique que si les prompts basiques ne produisent que des résultats moyens, l'intégration d'instructions détaillées sur le travail de caméra, le timing et la mise en scène améliore considérablement la qualité vidéo. HappyHorse se distingue de nombreux autres modèles IA par son respect strict de la structure des prompts, s'appuyant sur son architecture Transformer unifiée à 40 couches qui traite simultanément le texte, l'image, la vidéo et l'audio.

Cette architecture permet une compréhension approfondie des entrées utilisateur, mais exige une grande précision dans la formulation des prompts. Les clips vidéo étant limités à 5-8 secondes, chaque seconde doit être intentionnelle. Le guide suggère que les prompts efficaces doivent combiner des éléments tels que le sujet, le mouvement, la caméra, l'éclairage et l'ambiance, allant au-delà de simples descriptions pour devenir des instructions de réalisation.

Un aspect clé est la spécification d'éléments tels que le type de plan, le mouvement de caméra, la qualité de l'éclairage et l'ambiance souhaitée. Le guide souligne également l'importance des indications de timing, comme la durée et le rythme de la scène dans le prompt, ce qui aide le modèle à gérer efficacement la courte durée du clip. Des exemples incluent des prompts détaillés pour des portraits en gros plan, des plans d'établissement et des séquences d'action.

Alors qu'HappyHorse démontre de solides capacités en matière de cohérence visuelle et de détails, notamment pour les gros plans et les plans d'environnement, le guide reconnaît des limitations dans les séquences d'action complexes. La capacité du modèle à maintenir l'identité des personnages sur plusieurs plans est notée comme un avantage significatif par rapport à certains autres outils de génération vidéo IA.