Seedance 2 Reference to Video

Seedance 2 Reference to Video is ByteDance's meest geavanceerde referentie-gedreven videomodel, gebouwd voor makers die generatie willen sturen met echt bronmateriaal in plaats van alleen tekst. In plaats van alles vanaf nul te beschrijven, geef je het model een mix van referentiebestanden: tot 9 afbeeldingen, 3 video's en 3 audioclips (met een totaal van 12 bestanden over alle typen heen), en verweef ze met een geschreven prompt. Je wijst elke asset direct aan in je prompt met eenvoudige tags zoals @Image1, @Video1 of @Audio1, zodat het model precies weet welk gezicht, welke omgeving, beweging of welk geluid je wilt respecteren. Het resultaat is een enkele continue cinematografische clip die je referenties eer aan doet en tegelijkertijd de wereld eromheen invult.

Het opvallendste kenmerk is native audio. In één generatiepas produceert het model gesynchroniseerd geluid naast het beeld: omgevingsgeluiden, geluidseffecten, muziek en zelfs lip-synced dialoog. Er is geen aparte stap nodig om later geluid toe te voegen. Dat betekent dat een bruisende menigtescène kan arriveren met overlappende kreten, camerashutter-klikken, verre sirenes en een stationerende motor al ingebakken en getimed op de actie op het scherm. Je kunt audiogeneratie aan laten staan voor een volledig afgewerkte clip, of uitzetten als je zelf geluid wilt toevoegen.

Creatieve controle is een groot sterk punt. Je dirigeert de camera via je prompt met cinematografische taal, door te vragen om dolly zooms, tracking shots, handheld beweging met natuurlijke micro-shake, POV-switches en ooghoogte- of verhoogde perspectieven. Het model interpreteert deze aanwijzingen zoals een cameraman dat zou doen. Het beheert ook realistische fysica, zodat vloeistofdynamica, kledingbeweging en karaktermotion geloofwaardig verlopen. Een bijzonder nuttige functie is multi-shot editing: binnen één generatie van maximaal 15 seconden kan het model natuurlijke cuts maken, waardoor je sequenties krijgt die vloeiend tussen shots overlopen in plaats van een enkel vast frame.

Omdat het beeldreferenties accepteert, blinkt het model uit in consistentie. Geef een karaktereferentie en het rendert hetzelfde gezicht en dezelfde outfit gedurende de hele scène, zelfs als je het onderwerp vertaalt naar een andere visuele stijl. Voorbeelden tonen een hybride look waarin gestileerde 3D-geanimeerde personages naadloos worden gecomponeerd in een volledig fotorealistische live-action-omgeving, waarbij het gerefereerde personage een perfect consistent gezicht en exact dezelfde outfit uit de bronafbeelding behoudt, terwijl het geloofwaardig interageert met echt licht, flitsreflecties, straatlantaarnhoogtepunten en schaduwen. Dit maakt het een sterke keuze voor iedereen die een terugkerend personage, specifiek product of vaste look betrouwbaar wil houden over een scène heen.

Wat uitvoeropties betreft, kun je genereren in 480p voor snellere verwerking, 720p voor een balans tussen snelheid en kwaliteit, of 1080p voor hoogwaardige resultaten. De duur is flexibel van 4 tot 15 seconden, of je kunt het model automatisch laten beslissen op basis van je prompt. Het beeldformaat is even aanpasbaar: kies 16:9 voor landscape, 9:16 voor verticaal en social formaten, 1:1 voor vierkant, 21:9 voor ultrawide cinematografische framing, 4:3, 3:4 of auto om het model te laten kiezen. Je kunt ook een hogere kwaliteit encoding aanvragen voor een groter, schoner bestand, en een seed-waarde vastzetten om een gewenst resultaat te reproduceren, hoewel lichte variatie mogelijk blijft.

De referentie-inputs hebben verstandige limieten die goed zijn om te kennen. Afbeeldingen kunnen JPEG, PNG of WebP zijn tot 30 MB per stuk, met maximaal 9 toegestaan. Video's kunnen MP4 of MOV zijn, met een gecombineerde duur tussen 2 en 15 seconden, totaal onder 50 MB, en elke video tussen 480p en 720p resolutie, met maximaal 3 toegestaan. Audio kan MP3 of WAV zijn, tot 3 clips met een gecombineerde duur van maximaal 15 seconden en maximaal 15 MB per stuk. Belangrijke regel: als je audioreferenties levert, moet je ook minstens één referentieafbeelding of -video toevoegen. En ongeacht hoe je ze mixt, mag het totale aantal referentiebestanden over alle modaliteiten niet meer dan 12 bedragen.

Wie profiteert ervan? Filmmakers en videoregisseurs krijgen een manier om korte cinematografische sequenties te previsualiseren of te produceren met echte camerataal en afgewerkt geluid. Contentmakers en socialmedia-producenten kunnen een enkele karaktereferentie omzetten in consistente verticale clips. Adverteerders en productmarketeers kunnen een productafbeelding droppen in een gestileerde, belichte omgeving met een gecontroleerde camerabeweging. Animators en mixed-media-artiesten kunnen gestileerde personages blenden in fotorealistische werelden, precies het hybride workflow dat in de voorbeelden wordt uitgelicht. Omdat het put uit je eigen afbeeldingen, video's en audio, is het ideaal wanneer merkconsistentie, karakteridentiteit of een specifieke look belangrijker is dan pure text-to-video giswerk.

Een paar best practices volgen vanzelf uit hoe het werkt. Schrijf prompts als een regisseur: beschrijf de stijl, belichting en omgeving, het onderwerp, de actievolgorde en het gewenste audio, en refereer expliciet aan je assets met @-tags zodat het model weet wat het moet behouden. Houd je videoreferenties binnen de duur- en resolutielimieten voor schoon gebruik, en onthoud dat audio leveren minstens één visuele referentie vereist om het te ankeren. Voor de meest gepolijste resultaten, leun op gedetailleerde actiebeschrijvingen en camerainstructies, want het model reageert goed op dat niveau van specificiteit, zoals te zien in het uitgewerkte menigte- en konvooivoorbeeld. Met doordachte referenties en duidelijke regie levert Seedance 2 Reference to Video afgewerkte, geluid-complete cinematografische clips die trouw blijven aan het materiaal dat je aanlevert.