Seedance 2 Reference to Video

Seedance 2 Reference to Video est le modèle de référence à la vidéo le plus avancé de ByteDance, conçu pour transformer vos références créatives en clips cinématographiques entièrement réalisés, avec un son synchronisé. Plutôt que de partir de zéro, ce modèle vous permet de guider chaque génération avec un riche mélange de références — en combinant des textes, jusqu'à 9 images, 3 vidéos et 3 extraits audio au sein d'un même projet. Résultat : un outil puissant pour les conteurs qui souhaitent un contrôle précis sur les personnages, les styles, les mouvements et l'atmosphère, tout en s'appuyant sur les médias qu'ils possèdent déjà.

Au cœur du modèle, on retrouve la création de vidéo courte à partir d'une consigne écrite. Décrivez la scène souhaitée — par exemple, une pieuvre découvrant un ballon de football dans l'océan, puis invitant ses amis à jouer avant de passer à un match de football sous-marin — et le modèle la met en images animées. Ce qui distingue cette version, c'est sa capacité à puiser directement dans vos médias de référence. Vous pouvez importer des images fixes et les mentionner dans votre prompt via @Image1, @Image2, etc., guider le mouvement et le style avec des vidéos via @Video1, @Video2, et modeler l'univers sonore avec des extraits audio référencés comme @Audio1, @Audio2. Ce système permet d'indiquer clairement et intuitivement au modèle exactement quels éléments respecter lors de la génération. Vous pouvez combiner jusqu'à 12 fichiers de référence au total (images, vidéos, audio), selon les besoins de votre projet.

L'une des fonctionnalités phares est la génération sonore native. Par défaut, le modèle produit un son synchronisé avec la vidéo — incluant des effets sonores, des ambiances et des dialogues synchronisés sur les lèvres. Il est donc particulièrement précieux pour les créateurs qui souhaitent des personnages parlants, des ambiances immersives ou des instants musicaux, sans avoir à rajouter le son en post-production. Si vous préférez gérer le son vous-même, il suffit de désactiver la génération audio. Lorsque vous fournissez vos propres extraits audio de référence, le modèle s'en sert comme guide, mais il faut impérativement joindre au moins une image ou une vidéo de référence.

Le modèle offre aux réalisateurs et designers un contrôle significatif sur le rendu final. Vous pouvez choisir parmi différentes résolutions selon vos besoins : un mode rapide pour les brouillons, un équilibré pour le travail quotidien, un mode haute qualité pour un rendu soigné et une option ultra-haute qualité pour les projets les plus exigeants. Vous définissez également la durée (de 4 à 15 secondes, ou laissez le modèle choisir la durée idéale selon votre consigne). Les formats d’image incluent paysage large, portrait vertical, carré, classique, et ultra-large cinémascope, ainsi qu'une option automatique où le modèle choisit la forme la plus adaptée. Pour des résultats encore plus nets, vous pouvez exiger une sortie en haute qualité, produisant un fichier plus riche et détaillé.

Cette combinaison de fonctionnalités fait de Seedance 2 Reference to Video un choix idéal pour de nombreux professionnels créatifs. Réalisateurs et vidéastes peuvent l'utiliser pour des séquences cinématographiques à la caméra, des transformations stylisées, et des scènes à dialogues synchronisés. Designers et créateurs de contenus produisent aisément des clips verticaux pour les réseaux sociaux, des formats carrés, ou des extraits cinémascope ultra-larges. Grâce à la prise en charge de la transformation stylisée et des workflows de synchronisation labiale, c’est aussi un outil de choix pour les histoires animées, les contenus centrés sur les personnages, les scènes musicales ou dialoguées, et les concepts imaginatifs mélangeant de vraies références et des images générées. Toute personne désirant remixer sa propre bibliothèque d’images, de vidéos ou d’audio trouvera ce système de référence particulièrement puissant.

En pratique, le workflow est simple et créatif avant tout. Commencez par une consigne descriptive exposant l’action, le décor et l’ambiance. Attachez ensuite les images, vidéos ou fichiers audio de référence, et citez-les directement dans votre prompt pour indiquer au modèle comment chaque élément doit apparaître ou se comporter. Vous réglez ensuite la résolution, la durée, le format et l’option audio synchronisée, puis générez. Le modèle livre une vidéo finie, prête à être visionnée, ainsi qu'une valeur de seed permettant de revenir sur un résultat précis ou d’en générer des variantes.

Quelques considérations pratiques sont à garder à l’esprit. Les images de référence doivent être en formats courants comme JPEG, PNG ou WebP (jusqu’à 9 images). Les vidéos de référence peuvent être en MP4 ou MOV (jusqu’à 3), avec une durée totale combinée de 2 à 15 secondes en résolution standard ou équilibrée. L’audio de référence peut être en MP3 ou WAV (jusqu’à 3 fichiers), pour un total ne dépassant pas 15 secondes. Notez que le nombre total de fichiers de référence (tous types confondus) doit rester dans la limite de 12, et que l’ajout d’un audio nécessite au moins une image ou une vidéo. Les clips générés font entre 4 et 15 secondes, ce qui en fait un outil axé sur le format court à fort impact, plutôt que sur la production longue durée.

Grâce à cette approche multi-référence, au son synchronisé natif, au contrôle cinématographique de la caméra et à la flexibilité des paramètres de sortie, Seedance 2 Reference to Video offre aux créateurs une manière expressive et maîtrisée de transformer leurs idées et médias existants en vidéos abouties, riches en son. Que vous conceviez une scène de personnage stylisée, un clip vertical prêt pour les réseaux sociaux ou un instant cinémascope ultra-large, le modèle vous donne les leviers créatifs pour façonner votre résultat tout en gérant la complexité du mouvement et du son.