Kling 3.0 est lancé mondialement avec la vidéo 4K, l’audio natif et la génération multi-plans
Kuaishou a déployé Kling 3.0 dans le monde entier après l’avoir annoncé pour la première fois le 4 février. Cette mise à jour apporte une sortie 4K/HDR native, un son synchronisé avec synchronisation labiale, la génération de récits multi-plans et un contrôle des mouvements qui permet d’extraire les mouvements d’une vidéo pour les appliquer à des personnages entièrement différents.
Présentation des nouvelles fonctionnalités de Kling 3.0
4K avec audio natif
Kling 3.0 génère directement des vidéos en résolution 4K (3840x2160) à 30 FPS lors du processus de diffusion. Aucune mise à l’échelle n’est effectuée après la génération. La génération audio est intégrée à la même passe, y compris les dialogues avec synchronisation labiale dans cinq langues : anglais, chinois, japonais, coréen et espagnol. Les versions précédentes nécessitaient des étapes distinctes de doublage et de synchronisation audio. Ce n’est désormais plus le cas.
Séquences narratives multi-plans
La fonctionnalité phare est la génération multi-plans. Vous pouvez générer une série allant jusqu’à 6 plans reliés au cours d’une même session, le modèle préservant la cohérence des personnages, de l’éclairage et de l’espace entre les coupes. Chaque plan peut durer jusqu’à 15 secondes.
Cette fonctionnalité vise directement les contenus narratifs courts. Au lieu de générer des clips individuels, puis d’essayer de les assembler — tout en gérant les inévitables variations des personnages entre les générations —, vous décrivez une séquence et obtenez des plans qui semblent appartenir à la même scène.
Contrôle et transfert des mouvements
Kling 3.0 peut extraire les mouvements d’une vidéo de référence et les appliquer à de nouveaux personnages. Vous pouvez prendre une séquence de danse, une chorégraphie de combat ou un geste précis dans une vidéo et les transposer sur un personnage généré. Le modèle comprend un pinceau de mouvement pour un contrôle image par image, ainsi que des commandes de caméra sur 6 axes pour composer précisément les plans.
Il existe également une syntaxe d’invite avec @ qui permet de désigner par leur nom des personnages ou éléments précis. Si vous avez établi un personnage lors d’une génération, vous pouvez le réutiliser dans les invites suivantes.
Analyse approfondie de ce que Kling 3.0 change pour la vidéo générée par IA
L’éditeur 7-en-1
Kling 3.0 est livré avec ce que Kuaishou appelle un « éditeur multimodal 7-en-1 ». Il regroupe dans un seul espace de travail la génération de texte en vidéo, d’image en vidéo et de vidéo en vidéo, ainsi que le transfert de mouvements, la synchronisation labiale, l’extension et la reprise de plans. L’objectif est d’éliminer la chaîne d’outils fragmentée généralement requise pour produire des vidéos par IA, qui nécessite habituellement des outils distincts pour la génération, le doublage, l’harmonisation des couleurs et l’assemblage des plans.
Comparaison
Kling 3.0 rivalise directement avec Sora 2 Pro d’OpenAI et Veo 3.1 de Google. Sur le papier, Kling bénéficie d’un avantage en matière de résolution — 4K native contre 1080p pour Sora — et de prix — 0,07 à 0,14 $ par seconde contre 0,10 à 0,50 $ pour Sora. Il propose également une formule gratuite généreuse de 66 crédits par jour, tandis que Sora n’en offre aucune.
Sora 2 reste en tête pour la simulation physique et reproduit de manière plus convaincante la réfraction de la lumière, la dynamique des fluides et les collisions. Il obtient également de meilleurs résultats en matière de fidélité visuelle de base dans les comparaisons côte à côte. La plupart des critiques recommandent, en pratique, d’utiliser les deux et de choisir le meilleur résultat pour chaque plan.
Pour les créateurs de jeux, la génération multi-plans et le transfert de mouvements de Kling 3.0 sont les fonctionnalités les plus intéressantes. La possibilité de générer une séquence cohérente de plans cinématiques, avec des personnages et un éclairage homogènes entre les coupes, est directement applicable à la production de bandes-annonces et au prototypage de cinématiques.