So setzt du KI-Lip-Sync auf ein Musikvideo in BeatViz Workflow

Lip Sync passt die Mundbewegung einer sichtbaren Figur an den zugehörigen Audioabschnitt an. In BeatViz Workflow läuft Lip Sync auf einzelnen erzeugten Szenenclips, nicht auf einer Editor-Timeline.

Option 1: Automatisches Lip Sync mit Singing

Wähle Singing (Beta) unter Content Mode, bevor du den Auftrag startest. Singing nutzt einen gesangsorientierten Analyseweg und kann Lyric-Timings erkennen. Nach der Bestätigung des Handlungsstrangs prüfst du die Erstbilder und erzeugst die Szenenvideos; Workflow führt den automatischen Lip-Sync-Schritt aus, sobald die Basisclips erzeugt sind.

Wenn du Generate All Videos wählst, enthält die Credit-Anforderung Videogenerierung und Lip Sync in Singing. Die Szenenkarte kann Syncing lips zeigen, während dieser Schritt läuft. Danach nutzt die Szenenvorschau das lip-synchronisierte Video. Schlägt Lip Sync fehl, gibt es einen erneuten Versuch nach den Fehler- und Credit-Regeln des Auftrags.

Wichtig: Singing ist eine Beta-Option, und die Wahl verspricht keine makellose Mundbewegung für jeden Winkel oder jedes Gesicht.

Option 2: Manuelles Lip Sync in anderen Content Modes

Bei Storytelling, Dancing und Abstract warte, bis das Basisvideo der Szene fertig erzeugt ist. Die Szenenkarte bietet dann Lip Sync. Wähle das, um diese Szene mit dem passenden Teil deines gewählten Song-Audios zu verarbeiten. Das ist eine eigene kostenpflichtige Aktion, kein Teil der ersten Video-Abbuchung.

Während der Verarbeitung ist die Lip-Sync-Steuerung der Karte gesperrt, damit du nicht mehrfach abschickst. Eine Szene, die schon erfolgreich verarbeitet wurde, wird für dieselbe abgeschlossene Aktion nicht erneut abgebucht.

Aktuelle Lip-Sync-Kosten in Workflow

Lip Sync kostet 20 Credits pro Sekunde; Teilsekunden werden nach den Abrechnungsregeln des Produkts aufgerundet. Beispiele:

Wenn die Oberfläche eine Dauerstufe zeigt, können kürzere Teildauern nach der zugehörigen Stufe abgerechnet werden; prüfe die angezeigte Gebühr vor dem Absenden. Ein zu niedriges Guthaben öffnet die Preisoberfläche statt den Auftrag zu starten.

So erhöhst du die Chance auf brauchbare Ergebnisse

• Nutze ein klares Erstbild, auf dem die geplante Person sichtbar ist.
• Bevorzuge Szenen, in denen das Gesicht klar zu sehen ist, wenn sichtbarer Gesang wichtig ist.
• Prüfe, dass der Songabschnitt zum geplanten Gesangsmoment passt.
• Sieh dir den lip-synchronisierten Clip an, bevor du zur finalen Zusammenfügung gehst.

Das sind praktische Hinweise, keine Garantie für perfekte Ausgabe. Szenenwahl und Modellverhalten beeinflussen das Ergebnis weiterhin.

Workflow Lip Sync vs. Editor Lip Sync

Das Lip Sync in Workflow hängt an Szenenkarten und nutzt den zum Clip gehörenden Audioabschnitt. Es nutzt nicht die 1×-Wiedergabe der Editor-Timeline, die Mindestclipdauer von 0,5 Sekunden oder die Timeline-Ende-Grenzen. Übertrage Editor-spezifische Lip-Sync-Anweisungen nicht auf Workflow.

Häufige Fragen

Kann ich eine Storytelling-Szene lip-syncen?

Ja. Nutze die Schaltfläche Lip Sync dieser Szene, nachdem die Videogenerierung fertig ist.

Bucht Singing Lip Sync zweimal ab?

Singing enthält Lip-Sync-Credits in der Videogenerierungsphase. Behandle den automatischen Schritt nicht als zusätzliche manuelle Schaltflächen-Abbuchung.

Ist Lip Sync verfügbar, bevor der Clip erzeugt ist?

Die manuelle Lip-Sync-Aktion braucht einen fertigen Videoclip. Singing führt seinen automatischen Durchlauf nach der Erzeugung des Basisvideos aus.

Weiterlesen: ← Zurück: Charaktere konsistent halten · Weiter: Credits und Kosten →

BeatViz Workflow öffnen