Vendax LipSync Studio

Vendax LipSync Studio — Guía del usuario

Finalidad

Vendax LipSync Studio adapta los movimientos de los labios en un vídeo o retrato fotográfico a una locución preparada. Sirve para doblaje, versiones en otros idiomas y retratos parlantes. No traduce textos ni genera voces. El procesamiento se realiza localmente una vez instalados los componentes y modelos necesarios.

Uso

  1. Guarde el proyecto. En Edit, coloque el vídeo o la fotografía en una pista de vídeo y la nueva voz en otra pista de audio, por ejemplo A1. Alinee la voz con el fragmento deseado. Ajuste la duración de las fotografías. Mantenga la música en otra pista.
  2. Abra Workspace → Workflow Integrations → Vendax LipSync Studio. La captura muestra Deliver: cambie a Edit y seleccione exactamente un clip de una pista de vídeo.
  3. Pulse Refresh. En Selected Video Clip, compruebe el clip, el proyecto y la línea de tiempo.
  4. En New Voiceover Track, elija la pista de voz existente. Este menú no crea pistas. El audio debe coincidir en el tiempo con la sección procesada.
  5. En AI Engine, elija un motor de procesamiento instalado. Empiece con una vista previa de cinco segundos. Se recomienda una sola persona claramente visible con la boca sin obstáculos. Revise el resultado antes de procesar todo el clip.
  6. Deje activada Preview: first 5 seconds of the clip para la primera prueba. Procesa los primeros cinco segundos o todo el clip si es más corto. Es la duración del fragmento, no el tiempo de espera.
  7. Pulse Sync Lip Movements. Resolve abre temporalmente una copia de la línea de tiempo y Deliver durante la preparación. Espere al regreso a la línea de tiempo original. No cambie de proyecto ni modifique el clip fuente. Use Cancel para detenerlo y espere a que termine la cancelación.
  8. Cuando aparezca Ready, pulse Add to Timeline. El resultado aparece al inicio del clip fuente en una nueva pista superior llamada Vendax LipSync Studio. El original se conserva y la voz permanece en su pista. El clip generado contiene solo vídeo.
  9. Revise labios, bordes del rostro, transiciones y sincronía. Desactive temporalmente la pista del resultado para comparar. Para procesar la duración completa, desactive Preview, seleccione de nuevo el original, pulse Refresh y repita. Desactive o retire la capa de prueba de la línea de tiempo para que no cubra el resultado final. Guarde el proyecto.

Problemas

Sync Lip Movements desactivado: compruebe Edit, la selección de un único clip de vídeo y una pista de audio; pulse Refresh. No audio clips overlap…: revise pista y alineación; la prueba requiere audio en los primeros cinco segundos. Add to Timeline desactivado: espere a que esté listo y abra el proyecto y la línea de tiempo originales. Si el clip se movió o cambió, procese de nuevo. Espere a que termine cualquier render de Resolve. Si faltan componentes o modelos necesarios, repare la instalación del panel. Si falta memoria, cierre otras aplicaciones y empiece con una prueba de cinco segundos.

Conservar los archivos

Los resultados están en engine/MuseTalk/jobs/job_…/result.mp4 dentro del proyecto. No mueva ni borre estas carpetas mientras Resolve use sus archivos: los medios podrían quedar desconectados. Guardar el proyecto no sustituye a conservar sus medios. Incluya los resultados necesarios al transferir el proyecto.