Come aggiungere il Lip Sync IA a un video musicale in BeatViz Workflow

Il lip sync allinea il movimento della bocca di un personaggio visibile al tratto audio corrispondente. In BeatViz Workflow il lip sync viene eseguito sui clip di scena generati uno per uno, non su una timeline in stile Editor.

Opzione 1: lip sync automatico con Singing

Scegli Singing (Beta) in Content Mode prima di avviare il task. Singing usa un percorso di analisi orientato alla voce e può individuare i tempi dei testi. Dopo aver confermato la sceneggiatura, ispezionato i primi frame e generato i video di scena, Workflow avvia la fase di lip sync automatico una volta generati i clip di base.

Quando selezioni Generate All Videos, il fabbisogno di Credits include sia la generazione video sia il lip sync di Singing. La scheda scena può mostrare Syncing lips mentre quella fase è in corso. A completamento, l’anteprima della scena usa il video con lip sync. Se il lip sync fallisce, è disponibile un nuovo tentativo secondo le regole di errore e Credits del task.

Importante: Singing è un’opzione Beta, e selezionarla non promette un movimento di bocca impeccabile per ogni angolazione o viso.

Opzione 2: lip sync manuale con gli altri Content Mode

Per Storytelling, Dancing e Abstract, aspetta che il video di base della scena abbia finito di generarsi. La scheda scena offre allora Lip Sync. Selezionalo per elaborare quella scena con la porzione corrispondente dell’audio del brano selezionato. È un’azione addebitata a parte, non parte dell’addebito iniziale di generazione video.

Durante l’elaborazione, il controllo Lip Sync della scheda è bloccato per evitare invii ripetuti. Una scena già elaborata con successo non viene addebitata di nuovo per la stessa azione completata.

Costi attuali del Lip Sync di Workflow

Il lip sync costa 20 credits al secondo, con le durate frazionarie arrotondate per eccesso secondo le regole di addebito del prodotto. Esempi:

Quando l’interfaccia presenta un livello di durata, le durate parziali più corte possono essere fatturate secondo il livello corrispondente; controlla l’addebito mostrato prima di inviare. Un saldo basso apre l’interfaccia dei prezzi invece di avviare il lavoro.

Come aumentare le probabilità di un risultato utile

• Usa un primo frame nitido, con la persona prevista visibile.
• Privilegia le scene in cui il viso è presentato con chiarezza, quando il canto visibile conta.
• Controlla che il tratto del brano coincida con il momento vocale previsto.
• Ispeziona il clip con lip sync prima di passare alla composizione finale.

Sono suggerimenti pratici, non una garanzia di output perfetto. La scelta delle scene e il comportamento del modello continuano a influire sui risultati.

Lip Sync di Workflow vs Lip Sync di Editor

Il lip sync di Workflow è collegato alle schede scena e usa il tratto audio corrispondente del clip. Non usa la riproduzione 1× della timeline di Editor, il clip minimo di 0,5 secondi, né i vincoli di fine timeline. Non applicare a Workflow le istruzioni Lip Sync specifiche di Editor.

Domande frequenti

Posso fare il lip sync di una scena Storytelling?

Sì. Usa il pulsante Lip Sync di quella scena dopo che la generazione video è completata.

Singing addebita il lip sync due volte?

Singing include i Credits di lip sync nella fase di generazione video. Non trattare la fase automatica come un addebito extra di pulsante manuale.

Il lip sync è disponibile prima che il clip si generi?

L’azione Lip Sync manuale richiede un clip video finito. Singing esegue il passaggio automatico dopo aver generato il video di base.

Avanti: ← Precedente: Tieni i personaggi coerenti · Successivo: Credits e costi →

Apri BeatViz Workflow