Vendax LipSync Studio

Vendax LipSync Studio — Guide utilisateur

Objectif

Vendax LipSync Studio adapte les mouvements des lèvres dans une vidéo ou un portrait photographique à une voix off préparée. Il sert au doublage, aux versions linguistiques et aux portraits parlants. Il ne traduit pas les textes et ne génère pas de voix. Le traitement est effectué localement une fois les composants et modèles nécessaires installés.

Utilisation

  1. Enregistrez le projet. Sur Edit, placez la vidéo ou la photographie sur une piste vidéo et la nouvelle voix sur une piste audio séparée, par exemple A1. Alignez la voix sur le passage souhaité. Réglez la durée des photographies. Placez la musique sur une autre piste.
  2. Ouvrez Workspace → Workflow Integrations → Vendax LipSync Studio. La capture montre Deliver : passez à Edit et sélectionnez exactement un clip sur une piste vidéo.
  3. Cliquez sur Refresh. Dans Selected Video Clip, vérifiez le clip, le projet et la timeline.
  4. Dans New Voiceover Track, choisissez la piste de voix existante. Ce menu ne crée pas de piste. L’audio doit chevaucher la portion traitée.
  5. Dans AI Engine, choisissez un moteur de traitement installé. Commencez par un aperçu de cinq secondes. Une seule personne bien visible, avec une bouche dégagée, est recommandée. Vérifiez le résultat avant de traiter le clip entier.
  6. Pour le premier essai, laissez Preview: first 5 seconds of the clip coché. Les cinq premières secondes sont traitées, ou tout le clip s’il est plus court. Il s’agit de la durée du passage, pas du temps de calcul.
  7. Cliquez sur Sync Lip Movements. Pendant la préparation, Resolve ouvre temporairement une copie de la timeline et Deliver. Attendez le retour à la timeline originale. Ne changez pas de projet et ne modifiez pas le clip source. Utilisez Cancel pour arrêter et attendez la fin de l’annulation.
  8. Après Ready, cliquez sur Add to Timeline. Le résultat apparaît au début du clip source sur une nouvelle piste vidéo supérieure nommée Vendax LipSync Studio. L’original est conservé et la voix reste sur sa piste audio. Le clip produit contient uniquement la vidéo.
  9. Vérifiez les lèvres, les contours du visage, les transitions et la synchronisation. Désactivez temporairement la piste du résultat pour comparer. Pour traiter toute la durée, décochez Preview, resélectionnez l’original, cliquez sur Refresh et recommencez. Désactivez ou retirez la couche d’essai de la timeline pour qu’elle ne masque pas le résultat final. Enregistrez le projet.

Dépannage

Sync Lip Movements désactivé : vérifiez Edit, la sélection d’un seul clip vidéo et la présence d’une piste audio ; cliquez sur Refresh. No audio clips overlap… : vérifiez la piste et l’alignement ; l’essai nécessite de l’audio dans les cinq premières secondes. Add to Timeline désactivé : attendez le résultat et ouvrez le projet et la timeline d’origine. Si le clip a été déplacé ou modifié, relancez le traitement. Attendez la fin de tout rendu Resolve en cours. Si des composants ou modèles nécessaires manquent, réparez l’installation du panneau. En cas de mémoire insuffisante, fermez les autres applications et commencez par un essai de cinq secondes.

Conservation des fichiers

Les résultats sont dans engine/MuseTalk/jobs/job_…/result.mp4 à l’intérieur du projet. Ne déplacez et ne supprimez pas ces dossiers tant que Resolve utilise leurs fichiers : les médias pourraient devenir hors ligne. Enregistrer le projet ne remplace pas la conservation des médias. Incluez les résultats nécessaires lors du transfert du projet.