Vendax LipSync Studio — Benutzerhandbuch

Zweck

Vendax LipSync Studio passt Lippenbewegungen in Videos oder Porträtfotos an eine vorbereitete Sprachaufnahme an. Es eignet sich für Synchronisation, Sprachversionen und sprechende Porträts. Das Panel übersetzt keinen Text und erzeugt keine Stimme. Die Verarbeitung erfolgt lokal, sobald die erforderlichen Komponenten und Modelle installiert sind.

Bedienung

1. Speichern Sie das Projekt. Legen Sie auf Edit Video oder Foto auf eine Videospur und die neue Sprache auf eine separate Audiospur, etwa A1. Richten Sie beides zeitlich aus. Legen Sie bei Fotos die Dauer fest. Musik gehört auf eine andere Spur.
2. Öffnen Sie Workspace → Workflow Integrations → Vendax LipSync Studio. Der Screenshot zeigt Deliver: wechseln Sie zu Edit und wählen Sie genau einen Clip auf einer Videospur.
3. Klicken Sie Refresh. Prüfen Sie unter Selected Video Clip den Clipnamen, das Projekt und die Timeline.
4. Wählen Sie unter New Voiceover Track die vorhandene Sprachspur. Das Menü erstellt keine neue Spur. Audio und verarbeiteter Abschnitt müssen sich zeitlich überlappen.
5. Wählen Sie unter AI Engine eine installierte Verarbeitungsengine. Beginnen Sie mit einer Fünf-Sekunden-Vorschau. Eine einzelne deutlich sichtbare Person mit unverdecktem Mund ist empfehlenswert. Prüfen Sie das Ergebnis, bevor Sie den gesamten Clip verarbeiten.
6. Lassen Sie zunächst Preview: first 5 seconds of the clip aktiviert. Verarbeitet werden die ersten fünf Sekunden oder die gesamte Dauer kürzerer Clips. Das ist die Ausschnittlänge, nicht die Rechenzeit.
7. Klicken Sie Sync Lip Movements. Resolve öffnet zur Vorbereitung vorübergehend eine Timeline-Kopie und Deliver. Warten Sie auf die Rückkehr zur Original-Timeline. Wechseln Sie nicht das Projekt und ändern Sie nicht den Quellclip. Mit Cancel abbrechen und das Ende des Abbruchs abwarten.
8. Nach Ready klicken Sie Add to Timeline. Das Ergebnis erscheint am Anfang des Quellclips auf einer neuen obersten Videospur namens Vendax LipSync Studio. Original und Audiospur bleiben erhalten. Der Ergebnisclip enthält nur Video.
9. Prüfen Sie Lippen, Gesichtsränder, Übergänge und Sprachsynchronität. Deaktivieren Sie zum Vergleich die Ergebnisspur. Für die volle Dauer Preview ausschalten, Original erneut wählen, Refresh drücken und erneut starten. Die Testebene auf der Timeline deaktivieren oder entfernen, damit sie das Endergebnis nicht verdeckt. Projekt speichern.

Fehlerbehebung

Sync Lip Movements inaktiv: Edit, Auswahl eines Videoclips und Audiospur prüfen; Refresh drücken. No audio clips overlap…: Spur und zeitliche Ausrichtung prüfen; beim Test muss Audio in den ersten fünf Sekunden liegen. Add to Timeline inaktiv: auf Bereitschaft warten und ursprüngliches Projekt sowie Timeline öffnen. Nach Verschieben oder Ändern des Quellclips erneut verarbeiten. Laufenden Resolve-Render abwarten. Fehlen erforderliche Komponenten oder Modelle, reparieren Sie die Panel-Installation. Bei Speichermangel schließen Sie andere Anwendungen und beginnen mit einem Fünf-Sekunden-Test.

Dateien aufbewahren

Ergebnisse liegen im Projekt unter engine/MuseTalk/jobs/job_…/result.mp4. Jobordner nicht verschieben oder löschen, solange Resolve darauf verweist: Medien könnten offline gehen. Das Speichern des Projekts ersetzt nicht das Aufbewahren der Medien. Bei einer Übertragung benötigte Ergebnisdateien mitnehmen.