Problemen met Seedance AI-video verhelpen: zes symptomen en de promptregel erachter

Een symptoomgerichte probleemanalyse voor Seedance AI-video: waar elk artefact in een afgewerkte clip in de prompt op wijst, en de kleinste ingreep die het wegneemt.

Problemen met Seedance AI-video verhelpen: zes symptomen en de promptregel erachter

De meeste Seedance-clips die tegenvallen, zijn niet slecht geschreven. Ze zijn in de verkeerde volgorde geschreven, of ze beschrijven een sfeer waar het model een shot nodig had. Het nuttige van tekst-naar-video is dat een afgewerkte clip ook een diagnoserapport is: een frame dat vervormt terwijl de camera beweegt, wijst naar de camera-zin; een prop die tussen twee shots verandert, wijst naar hoe je die prop hebt benoemd; en een dialoogregel die onder ongewenste ondertitels verdwijnt, wijst naar het audioblok. Lees de output zo, en de meeste reparaties zijn één zin lang.

Dit is een symptoomgerichte ronde in plaats van een berg templates. Elke sectie benoemt iets wat je in de speler ziet, de promptgewoonte erachter, en de kleinste wijziging die het wegneemt. De referentiepunten zijn ByteDance's eigen richtlijnen voor de Seedance-modellen en gepubliceerde promptgidsen die deze aanpak in de praktijk testen.

Seedance-prompts hebben twee lagen, en die falen verschillend

Runway's Seedance-gids beschrijft de prompt als twee lagen met verschillende taken. De buitenste laag is structureel: de clip valt uiteen in gelabelde shots, geschreven in de volgorde waarin de gebeurtenissen plaatsvinden, zodat het model het tempo kent voordat het de inhoud kent. De binnenste laag is beschrijvend: binnen elk shot dekken doorlopende zinnen wie er is, wat die doet, waar, in welk licht, en hoe de camera zich gedraagt.

Fuser, dat ByteDance's eigen materiaal samenvat, geeft de binnenste laag een volgorde die het onthouden waard is: onderwerp en actie, dan scène en omgeving, dan visuele stijl, dan camerabeweging en shotwissels, dan geluid, met aan het eind een regel met beperkingen. Runway's uitgewerkte voorbeeld behandelt hetzelfde terrein in acht elementen en sluit af met kwaliteit, stijl en een negatieve instructie over ondertitels en watermerken.

Bijna elke fout hieronder is een van die twee lagen die breekt. Een prompt zonder shotplan wordt één ongedifferentieerde glijbeweging. Een prompt zonder beschrijving levert technisch bewegende frames op waar niemand in zit die het bekijken waard is. Als je een slechte clip opent, bepaal dan eerst naar welke laag je kijkt, want de oplossing zit voor elk van de twee in een ander deel van de prompt.

Symptoom één: de clip is prachtig en bijna stil

Je vroeg om "cinematic, moody, high detail, shallow depth of field" en kreeg een foto die ademt. Stijlwoorden overtreffen actiewoorden met vier tegen één, dus het model rendert de look en improviseert de beweging, en wat het improviseert is klein en voorzichtig.

De reparatie is je woorden besteden aan één actie met een snelheid en een kracht, gekoppeld aan een lichaamsdeel. Runway's voorbeeld doet precies dat: een pottenbakker zet met beide handen langzaam de rand van een kom recht. Het bijwoord draagt het tempo en de handen dragen de beweging, dus er valt niets meer te raden. Is het onderwerp een product in plaats van een persoon, benoem dan de ene beweging die het maakt, zoals een rotatie van dertig graden, en zeg wat eromheen stil blijft staan.

Symptoom twee: het frame buigt terwijl de camera beweegt

Dit is het meest voorkomende Seedance-artefact, en het minst mysterieuze. ByteDance's richtlijn voor Seedance 2.0 waarschuwt dat een push, een pull, een pan en een move tegelijk vragen de beeldinstabiliteit vergroot. Vier instructies vechten om één frame, dus randen vervagen, rechte lijnen buigen en gezichten verliezen hun geometrie.

Eén beweging per shot is de regel, en een tweede beweging hoort in een tweede shot, niet in dezelfde zin. Heb je een push-in nodig die op een close-up eindigt, schrijf dan de push-in en laat de kadrering zich oplossen, of label Shot 1 en Shot 2 en geef elk zijn eigen cameraregel. De andere helft van de reparatie is de camera benoemen in filmtermen die het model al leest: kadergrootte, hoek en één beweging, in plaats van een alinea sfeer die beweging impliceert zonder die te specificeren.

Een storyboardvel met drie gelabelde shotpanelen, elk met één camerapijl en een actienotitie van één regel

Symptoom drie: cuts komen waar je er nooit om vroeg

Een prompt die zegt "op twee seconden draait ze zich om, op vier seconden gaat de camera naar wijd" gaat ervan uit dat het model een klok leest. ByteDance's Seedance 2.0-gids zegt dat het reageert op shotnummers in plaats van exacte duur, en waarschuwt dat het forceren van precieze duur kan leiden tot abnormale generatieresultaten. De latere 2.5-generatie leest bereiken van hele seconden, zoals een shot van nul tot twee seconden, wat een ander contract is.

De diagnose hangt dus af van welke versie je prompt. Zit je prompt vol met instructies per seconde en verzint de clip extra cuts of slikt hij hele beats in, dan overplan je een model dat shotnummers wil. Nummer de shots, zet de beats in de volgorde waarin ze gebeuren, en laat het tempo zich oplossen. Leest jouw versie wel tijdstempels, houd de tijdlijn dan continu zonder gaten, en vul een bereik niet zo strak dat het model een cut moet toevoegen om alles erin te krijgen.

Symptoom vier: de prop verandert tussen twee shots

Fuser's gepubliceerde testrun is de schoonste illustratie die er is: een pottenbakker gegenereerd over twee shots, met de pot als een lage open kom in de close-up en een hoge cilinder in het medium shot. De prompt veranderde de beschrijving van het object tussen de shots zonder dat door te hebben.

De oplossing is een naamgevingsdiscipline. Beschrijf het object één keer, in dezelfde woorden, overal waar het voorkomt, en geef de voorkeur aan een concrete inventaris boven een bijvoeglijk naamwoord: de hoofdband, twee oorschelpen, het matte havermoutglazuur, de afgebroken linkse rand. Waar het object commercieel van belang is, koppel je een afbeeldingsreferentie en zeg je wat die aanstuurt, in plaats van te hopen dat het proza het vasthoudt. Runway's gids voegt een verwant punt toe voor mensen: één samengevoegde afbeelding met gezicht, outfit, pose en achtergrond geeft de gezichtskenmerken een te klein aandeel van het frame om op te ankeren, dus een gezichtsreferentie moet in de eerste plaats een gezichtsreferentie zijn.

Symptoom vijf: de emotionele beat wordt leeg

Je schreef "ze kijkt trots" en kreeg een neutraal gezicht met een mooie huid. Woorden als trots, verdrietig en nerveus beschrijven een innerlijke toestand; er zit niets in dat een renderer kan plaatsen. Runway's richtlijn is hier bot over: toon emotie als fysiek gedrag.

Herschrijf de beat als een zichtbare actie met een begin en een eind. Haar schouders zakken. Hij ademt uit en kijkt weg van de lens. Ze stopt midden in een gebaar en haar hand komt tot rust op tafel. Dezelfde regel redt productvideo: "premium" is niet te renderen, maar een langzame lichtveeg over een geborstelde metalen rand wel.

Symptoom zes: dialoog komt binnen onder ondertitels die je niet bestelde

Bij de Seedance-generaties die audio in dezelfde ronde als het beeld produceren, hoort geluid binnen de prompt, niet in een apart blok dat erachteraan wordt toegevoegd. Fuser noteert ByteDance's haakjesconventie: punthaken voor effecten, accolades voor dialoog, ronde haakjes voor muziek, met de taal genoemd vóór een niet-Chinese regel.

Twee gewoonten veroorzaken het ondertitelprobleem. De eerste is dialoogwoorden herhalen of afzonderlijke woorden van een emotie voorzien, wat de richtlijn noemt als trigger voor ongewenste tekst in beeld. Hang de acteerinstructie aan de spreker in plaats van aan de regel. De tweede is beperkingen impliciet laten: sluit de prompt af met een simpele instructie dat de clip ondertitelloos blijft en vrij van logo's of watermerken, en houd dichte typografie volledig uit de prompt en bouw captions opnieuw op in de montage, waar ze te corrigeren zijn zonder nieuwe render.

Repareer in de juiste volgorde wanneer er meerdere symptomen opduiken

Verander alles tegelijk en je leert niets, want je kunt het nieuwe resultaat niet aan één wijziging toeschrijven. Werk in deze volgorde.

Begin met identiteit: het onderwerp, de props en de zin met eigenschappen die ze beschermt. Is het onderwerp niet stabiel, dan is niets stroomafwaarts te beoordelen. Dan de camera, want een vervormend frame vermomt elk ander probleem. Dan timing en aantal shots, want het aantal cuts bepaalt hoeveel ruimte de audio heeft. Dan geluid en beperkingen als laatste.

Waar de interface een seed blootlegt, houd die dan vast gedurende een reparatieronde, zodat de vergelijking je wijziging isoleert in plaats van de sampler. Genereer kort, beoordeel, en verleng de duur pas als de versie van vijf seconden het houdt; de langere clip bewaart meer toestand, en een mislukte lange sequentie gooit een grotere werkeenheid weg.

Twee gestapelde vergelijkingsframes waarbij één wijziging is gemarkeerd

Een checklist vóór het renderen die dertig seconden waard is

  • Het onderwerp wordt één keer benoemd en daarna met hetzelfde label aangeduid.
  • Elk shot heeft precies één actie, geschreven met een snelheid en een kracht.
  • Elk shot heeft precies één camerabeweging, in filmtermen.
  • Shots zijn genummerd in de volgorde waarin de gebeurtenissen plaatsvinden.
  • Objecten die twee keer voorkomen, worden beide keren identiek beschreven.
  • Emotie is geschreven als fysiek gedrag.
  • Geluid zit in zijn haakjes, met de taal genoemd.
  • De laatste regel verwijdert ondertitels, logo's en watermerken.

Zet de ronde aan het werk op een echte clip

Het punt van een diagnostische ronde is dat die de tweede render goedkoper maakt dan de eerste. Je stopt met het herschrijven van de hele prompt en begint met het bewerken van één zin, en vergelijkt daarna de twee clips naast elkaar op het symptoom dat je achtervolgde. Twee of drie rondes daarvan leveren meestal een clip op die samenhangt, en een prompt die je kunt hergebruiken voor het volgende product of de volgende scène.

Je kunt de ronde draaien op KOOX's Seedance-videogenerator, beginnend met een korte duur en één shot voordat je je vastlegt op een langere sequentie met cuts. Houd de promptversie, de instellingen en de beoordelingsnotitie naast elkaar, en het patroon van welke zin welk artefact veroorzaakt wordt van jou in plaats van iets wat je elke keer opnieuw afleidt.

Postinformatie

Gepubliceerd op
Problemen met Seedance AI-video verhelpen: zes symptomen en de promptregel erachter