Modèle vidéo · Sync Labs ·
Sync 3 est un modèle de vidéo de Sync Labs. Sur Endless, il coûte 616 crédits par vidéo et est disponible à partir du forfait Hobby.
Utilisez-le pour créer des vidéos à partir d’un prompt ou d’une image, à côté de tous les autres modèles de votre espace de travail.
616 crédits par vidéo
Sync 3 reçoit une vidéo et une piste audio, et renvoie la vidéo avec la bouche réanimée pour la nouvelle voix. Ce que vous contrôlez, c’est le contenu de ces deux fichiers.
D’après la documentation de Sync Labs, sync-3 génère ensemble toutes les images d’un plan, alors que ses modèles lipsync-2 précédents travaillaient par tronçons indépendants de 2 secondes. Sync Labs indique qu’il prend en charge les profils, les plans par-dessus l’épaule et les visages en partie masqués.
Une recette qui convient à la plupart des cas :
Vidéo : [un seul plan continu], [cadrage], [qui parle], [durée].
Audio : [uniquement la nouvelle voix], [langue], [même durée que le plan].
Donnez au modèle la voix et rien d’autre. La musique, les effets et une seconde voix dans la piste finissent aussi sur la bouche. Pour un doublage, utilisez la piste de dialogue et remettez la musique et les effets après la synchronisation.
Alignez la durée de l’audio sur celle du plan avant l’import. Endless n’a aucun réglage pour les écarts de durée. Le guide du sync mode de Sync Labs explique que le mode par défaut, cut_off, garde la plus courte des deux entrées : une voix off plus longue perd ses derniers mots, et une plus courte raccourcit la fin du plan. Leur documentation rappelle aussi que les grands écarts paraissent peu naturels, quel que soit le mode.
Respectez le rythme de l’original autant que possible. Sync Labs indique que sync-3 conserve le débit et l’expression émotionnelle de la personne : une réplique traduite, lue à un rythme proche et avec les pauses aux mêmes endroits, donne donc le résultat le plus convaincant. Le modèle accepte l’audio dans plus de 95 langues.
Il n’y a pas d’autres réglages. Le résultat garde la résolution et la durée de votre vidéo, dans les limites ci-dessus.
Les cinq modèles de synchronisation labiale d’Endless reçoivent de l’audio, mais ils partent de choses différentes.
Si vous voulez générer toute la scène avec le dialogue inclus, un modèle vidéo à audio natif comme MiniMax H3 crée la voix et l’image ensemble.
Dans votre espace de travail, ouvrez Vidéo et choisissez Sync 3 dans le sélecteur de modèle.
Rédigez un prompt avec le sujet, la caméra et le mouvement, ou partez d’une image que vous importez ou générez.
Lancez la génération, puis affinez dans le chat ou sur un canvas. Chaque clip est enregistré dans les fichiers de votre espace de travail.
Classés par cas d’usage. Chacun s’ouvre dans Endless avec Sync 3, prêt à être modifié et généré.
Vidéo : un plan poitrine de 40 secondes d’un acteur qui dit un monologue en anglais, le visage éclairé d’un côté. Audio : le même monologue enregistré en espagnol par un comédien de doublage, monté à la même durée, avec les pauses d’origine conservées.
Vidéo : une scène de dialogue entre deux personnes filmée par-dessus l’épaule, où, dans cette version, seul l’acteur qui regarde la caméra parle. Audio : la réplique de cet acteur doublée en allemand, dialogue seul, sans musique ni effets.
Vidéo : un gros plan 4K d’une présentatrice à 25 i/s, coupé pour démarrer sur le premier mot. Audio : une voix off en français du même script, chaque phrase tombant à moins d’une demi-seconde de l’original.
Vidéo : une interview de documentaire en trois quarts de profil, avec un micro-cravate visible. Audio : une traduction en japonais lue par un comédien de doublage à un rythme similaire, exportée en WAV.
Vidéo : un plan d’un épisode de série, coupé aux points de montage pour former une seule prise continue. Audio : la piste de doublage en portugais de ce plan, équilibrée et sans la piste musique et effets.
Vidéo : le plan de 8 secondes où l’acteur dit la mauvaise date. Audio : l’audio de la prise d’origine où seule la date est remplacée par un enregistrement de post-synchronisation du même acteur, avec la même ambiance de salle.
Vidéo : un clip de démo où le présentateur cite le modèle de l’an dernier. Audio : la même phrase réenregistrée avec le nom du nouveau produit, de la même durée que la réplique d’origine.
Vidéo : un plan de profil d’un animateur à son bureau dont la réplique a été couverte par du bruit. Audio : un réenregistrement propre de cette réplique par l’animateur, coupé pour le plan.
Vidéo : un gros plan d’un acteur dont la réplique a été réécrite dans le script final. Audio : une nouvelle prise de la réplique révisée par le même acteur, avec une respiration au début là où l’originale en avait une.
Vidéo : un extrait de podcast filmé avec deux caméras, en gardant seulement l’angle où l’invité parle. Audio : la phrase corrigée de l’invité, montée dans l’audio d’origine pour que le reste ne change pas.
Vidéo : une publicité 4K de 15 secondes avec une porte-parole face caméra. Audio : la version italienne du script, lue par une locutrice native sur le même ton et coupée à 15 secondes.
Vidéo : une publicité verticale 9:16 d’un créateur, filmée à la main en extérieur. Audio : une voix off en espagnol mexicain du même script, à la même vitesse, sans musique de fond.
Vidéo : une publicité de 30 secondes où le porte-parole se tourne de profil à mi-parcours. Audio : la voix off en coréen, montée pour garder la pause au moment du mouvement.
Vidéo : la même publicité coupée à 6 secondes pour un pre-roll. Audio : la version courte de la réplique localisée, enregistrée à part plutôt que coupée dans la version longue.
Vidéo : un témoignage filmé en intérieur, dans une lumière faible. Audio : la voix off en portugais du Brésil du témoignage, lue par une voix dont l’âge correspond à celui de la personne.
Vidéo : un clip de 10 secondes généré avec un modèle vidéo dont le prompt disait que la personne parle naturellement. Audio : une voix off créée avec un modèle vocal d’Endless, de la même durée que le clip.
Vidéo : un gros plan d’un acteur qui écoute en silence, choisi parce que le visage reste visible tout du long. Audio : une courte réplique de monologue intérieur, de 4 à 6 secondes.
Vidéo : un personnage animé dans un rendu 3D, bouche fermée, de trois quarts face à la caméra. Audio : une réplique enjouée enregistrée par un comédien de doublage, coupée à la durée du clip.
Vidéo : une image d’archive d’une personne qui regarde vers la caméra. Audio : une narration écrite pour la scène, courte et calme pour que le mouvement de bouche générique s’y accorde.
Vidéo : un personnage 2D stylisé qui tourne lentement la tête. Audio : un salut de deux phrases, avec un court silence à la fin pour que la bouche se ferme avant la coupe.
par ByteDance
À partir de 51 crédits par vidéo
par Google
À partir de 14 crédits par vidéo
par ByteDance
À partir de 19 crédits par vidéo
Sync 3 est disponible à partir du forfait Hobby. Créez un espace de travail gratuit pour essayer d’abord les autres modèles, puis passez à un forfait supérieur quand vous en avez besoin.