Sync 3
Videomodell · Sync Labs ·
Sync 3 ist ein Video-Modell von Sync Labs. In Endless kostet es 616 Credits pro Video und ist verfügbar ab dem Plan Hobby.
Nutze es, um aus einem Prompt oder einem Bild ein Video zu machen, neben allen anderen Modellen in deinem Workspace.
616 Credits pro Video
- Preis
- 616 Credits pro Video
- Verfügbarkeit
- Ab dem Plan Hobby verfügbar
So schreibst du Prompts für Sync 3
Wie Sync 3 seine Eingaben liest
Sync 3 nimmt ein Video und eine Audiospur und gibt das Video zurück, in dem der Mund passend zur neuen Sprache neu animiert ist. Du steuerst, was in diesen beiden Dateien steckt.
Laut der Dokumentation von Sync Labs erzeugt sync-3 alle Frames einer Einstellung gemeinsam, während die früheren lipsync-2-Modelle in unabhängigen 2-Sekunden-Blöcken arbeiteten. Sync Labs nennt Profilansichten, Over-the-Shoulder-Winkel und teilweise verdeckte Gesichter als unterstützt.
Ein Rezept, das für die meisten Aufgaben funktioniert:
Video: [eine durchgehende Einstellung], [Bildausschnitt], [wer spricht], [Länge].
Audio: [nur die neue Sprache], [Sprache], [dieselbe Länge wie die Einstellung].
Das Material vorbereiten
- Eine Einstellung pro Durchlauf. Schneide an den Schnittpunkten, sodass der Clip aus einem einzigen durchgehenden Take besteht. Ein harter Schnitt im Clip gibt dem Modell zwei verschiedene Gesichter, die es abgleichen muss.
- Das Gesicht im Bild halten. Nahaufnahmen, beschnittene Bildausschnitte und teilweise Verdeckung werden unterstützt, und laut Sync Labs werden Hindernisse automatisch erkannt. Der Mund sollte aber die meiste Zeit des Clips sichtbar sein.
- Material, in dem schon gesprochen wird, funktioniert am besten. Sync 3 kann Lippen öffnen, die im Original geschlossen sind, aber Sync Labs warnt, dass diese Bewegung generisch ist und nicht zum Stil des Sprechers passt. Wenn du den Quellclip mit einem Videomodell erzeugst, empfiehlt die Dokumentation, „person is speaking naturally“ in diesen Prompt aufzunehmen, damit sich die Lippen schon bewegen.
- Auflösung. Sync Labs nennt eine Ausgabe bis 4K mit 60 fps, du kannst also das Master hochladen statt eines herunterskalierten Proxys.
Das Audio vorbereiten
Gib dem Modell die Sprache und sonst nichts. Musik, Effekte und eine zweite Stimme in der Spur wirken sich alle auf den Mund aus. Für ein Dubbing nimmst du die Dialogspur und legst Musik und Effekte nach der Synchronisierung wieder darunter.
Gleiche die Audiolänge vor dem Upload an die Einstellung an. Endless hat keine Einstellung für abweichende Längen. Der Leitfaden zum Sync-Modus von Sync Labs erklärt, dass der Standardmodus cut_off die kürzere der beiden Eingaben beibehält: Ein längerer Voiceover verliert seine letzten Worte, ein kürzerer verkürzt das Ende der Einstellung. Laut Dokumentation wirken große Abweichungen außerdem in jedem Modus unnatürlich.
Behalte das Timing des Originals bei, wo du kannst. Sync Labs sagt, dass sync-3 Sprechrhythmus und emotionalen Ausdruck des Sprechers erhält. Eine übersetzte Zeile, die in ähnlichem Tempo und mit den Pausen an denselben Stellen gelesen wird, liefert daher das überzeugendste Ergebnis. Das Modell akzeptiert Audio in mehr als 95 Sprachen.
Einstellungen, auf die es ankommt
- Video: der Clip, der per Lipsync bearbeitet wird. Das Gesicht des Sprechers sollte sichtbar sein.
- Audio: die Sprache, die der Sprecher sagen soll.
Weitere Einstellungen gibt es nicht. Die Ausgabe behält Auflösung und Länge deines Materials, innerhalb der oben genannten Grenzen.
Sync 3, VEED Lipsync 2 oder ein Porträtmodell
Alle fünf Lip-Sync-Modelle in Endless nehmen Audio, gehen aber von unterschiedlichem Material aus.
- Sync 3 für schwieriges gefilmtes Material: Seitenprofile, wenig Licht, Nahaufnahmen, Einstellungen mit mehr als einer Person.
- VEED Lipsync 2 für gefilmtes Material mit einem einzelnen Sprecher, der zur Kamera schaut. VEED gibt an, dass pro Szene eine aktiv sprechende Person erwartet wird und seitliche Winkel nur bis zur Halbnahen unterstützt werden.
- MiniMax H3 Max Lip-sync, Fabric 1.0 und Pruna Avatar gehen von einem einzelnen Standbild aus, nicht von Videomaterial. Nutze sie, wenn du ein Porträt und eine Stimme hast, aber gar kein Video. Fabric ergänzt Kopfbewegungen und Gesten bis 720p, Pruna Avatar eignet sich für viele Clips bis 1080p, und H3 Max Lip-sync geht bis 2K.
Wenn du die ganze Szene samt Dialog generieren willst, erzeugt ein Videomodell mit nativem Audio wie MiniMax H3 Sprache und Bild zusammen.
Häufige Fehlerbilder
- Die letzten Worte fehlen. Das Audio war länger als das Video. Kürze den Voiceover oder verlängere die Einstellung, sodass beide zusammenpassen.
- Der Mund bewegt sich zu Musik oder Effekten. In der Spur war mehr als Sprache. Lade nur die Dialogspur hoch.
- Der Mund der falschen Person bewegt sich. Schneide den Clip bei Einstellungen mit mehreren Personen so, dass die Person, die du synchronisierst, im Originaltake die sprechende ist.
- Flache oder generische Mundbewegung. Das Quellgesicht war stumm. Nimm einen Take, in dem der Schauspieler spricht, oder erzeuge die Quelle mit einer natürlich sprechenden Person.
- Ein sichtbarer Sprung mitten im Clip. Der Clip enthielt einen Schnitt. Teile ihn am Schnitt und bearbeite jede Einstellung einzeln.
Fragen zu Sync 3
- Was ist Sync 3?
- Sync 3 ist ein Video-Modell von Sync Labs.
- Ist Sync 3 kostenlos?
- Sync 3 erfordert den Plan Hobby oder höher und ist deshalb nicht im Free-Plan enthalten. Der Free-Plan gibt dir beim Erstellen eines Workspace 100 Credits und jede Woche 50 Credits, um andere Video-Modelle zu testen.
- Was kostet Sync 3?
- In Endless kostet es 616 Credits pro Video und ist verfügbar ab dem Plan Hobby.
- Wie nutze ich Sync 3?
- Öffne Video in deinem Endless-Workspace, wähle Sync 3 in der Modellauswahl und schreibe einen Prompt oder füge ein Startbild hinzu. Du kannst es auch im Chat beim Namen anfordern oder auf einem Canvas nutzen.
- Welche Alternativen gibt es zu Sync 3?
- Ähnliche Modelle, die du in Endless nutzen kannst, sind Seedance 2.5, Gemini Omni Flash und Seedance 2.0. Jedes hat eine eigene Seite mit Preis und Plan.
So nutzt du Sync 3 in Endless
- 01
Video öffnen
Öffne in deinem Workspace Video und wähle Sync 3 in der Modellauswahl.
- 02
Beschreibe die Einstellung
Schreibe einen Prompt mit Motiv, Kamera und Bewegung oder starte mit einem Bild, das du hochlädst oder generierst.
- 03
Generieren und verfeinern
Generiere und verfeinere dann im Chat oder auf einem Canvas. Jeder Clip wird in den Dateien deines Workspace gespeichert.
Beispiel-Prompts für Sync 3
Nach Anwendungsfall gruppiert. Jeder öffnet sich in Endless mit Sync 3, bereit zum Bearbeiten und Generieren.
Visuelles Dubbing
Video: eine 40-sekündige Halbnahe eines Schauspielers, der einen Monolog auf Englisch spricht, das Gesicht von einer Seite beleuchtet. Audio: derselbe Monolog, von einem Synchronsprecher auf Spanisch eingesprochen, auf dieselbe Länge geschnitten, mit den ursprünglichen Pausen an ihrer Stelle.
Video: eine Dialogszene mit zwei Personen, über die Schulter gedreht, in der in diesem Schnitt nur der Schauspieler spricht, der zur Kamera schaut. Audio: der Text dieses Schauspielers, ins Deutsche synchronisiert, nur Dialog, ohne Musik und Effekte.
Video: eine 4K-Nahaufnahme einer Moderatorin mit 25 fps, so gekürzt, dass sie mit dem ersten Wort beginnt. Audio: ein französischer Voiceover desselben Skripts, so getimt, dass jeder Satz weniger als eine halbe Sekunde vom Original abweicht.
Video: ein Dokumentarinterview im Dreiviertelprofil, ein Lavalier-Mikrofon ist zu sehen. Audio: eine japanische Übersetzung, von einer Synchronsprecherin in ähnlichem Tempo gelesen, als WAV exportiert.
Video: eine Einstellung aus einer Serienfolge, an den Schnittpunkten gekürzt, sodass es ein einziger durchgehender Take ist. Audio: die portugiesische Synchronspur für diese Einstellung, ausgepegelt und ohne die M&E-Spur.
Eine Zeile im fertigen Schnitt korrigieren
Video: die 8-sekündige Einstellung, in der der Schauspieler das falsche Datum nennt. Audio: der Ton des Originaltakes, in dem nur das Datum durch eine ADR-Aufnahme desselben Schauspielers ersetzt ist, mit passendem Raumton.
Video: ein Produktdemo-Clip, in dem der Präsentator das Modell vom letzten Jahr nennt. Audio: derselbe Satz, neu aufgenommen mit dem neuen Produktnamen, in derselben Länge wie die Originalzeile.
Video: eine Seitenprofil-Einstellung eines Moderators am Schreibtisch, dessen Zeile von Störgeräuschen überdeckt wurde. Audio: eine saubere Neuaufnahme dieser Zeile durch den Moderator, auf die Einstellung zugeschnitten.
Video: eine Nahaufnahme eines Schauspielers, dessen Zeile im finalen Skript umgeschrieben wurde. Audio: ein neuer Take der überarbeiteten Zeile von demselben Schauspieler, mit einem Atemzug am Anfang, wo das Original einen hatte.
Video: ein Podcast-Clip mit zwei Kameras, bei dem nur der Winkel verwendet wird, in dem der Gast spricht. Audio: der korrigierte Satz des Gasts, in den Originalton eingeschnitten, sodass der Rest unverändert bleibt.
Werbung lokalisieren
Video: eine 15-sekündige 4K-Werbung mit einer Sprecherin, das Gesicht zur Kamera. Audio: die italienische Fassung des Skripts, von einer Muttersprachlerin im selben Ton gelesen und auf 15 Sekunden getrimmt.
Video: eine vertikale 9:16-Creator-Werbung, aus der Hand im Freien gedreht. Audio: ein Voiceover auf mexikanischem Spanisch desselben Skripts in derselben Geschwindigkeit, ohne Hintergrundmusik.
Video: eine 30-sekündige Werbung, in der sich der Sprecher in der Mitte ins Seitenprofil dreht. Audio: der koreanische Voiceover, so geschnitten, dass die Pause an der Stelle der Drehung erhalten bleibt.
Video: dieselbe Werbung auf 6 Sekunden für Pre-Roll gekürzt. Audio: die Kurzfassung der lokalisierten Zeile, separat aufgenommen statt aus der langen Fassung geschnitten.
Video: ein Testimonial-Clip, in Innenräumen bei schwachem Licht gedreht. Audio: der brasilianisch-portugiesische Voiceover des Testimonials, gelesen von einer Stimme, die zum Alter der Person passt.
Stummem Material eine Stimme geben
Video: ein 10-sekündiger Clip, erzeugt mit einem Videomodell, in dessen Prompt stand, dass die Person natürlich spricht. Audio: ein Voiceover, erstellt mit einem Stimmmodell in Endless, in derselben Länge wie der Clip.
Video: eine Nahaufnahme eines Schauspielers, der schweigend zuhört, gewählt, weil das Gesicht die ganze Zeit sichtbar bleibt. Audio: eine kurze Zeile innerer Monolog, 4 bis 6 Sekunden lang.
Video: eine animierte Figur in einem 3D-Render, geschlossener Mund, im Dreiviertelprofil zur Kamera. Audio: eine fröhliche Zeile, von einem Synchronsprecher eingesprochen und auf den Clip getrimmt.
Video: Archiv-B-Roll einer Person, die zur Kamera schaut. Audio: eine für die Szene geschriebene Erzählung, kurz und ruhig gehalten, damit die generische Mundbewegung passt.
Video: eine stilisierte 2D-Figur, die langsam den Kopf dreht. Audio: eine Begrüßung aus zwei Sätzen, mit einer kurzen Stille am Ende, damit sich der Mund vor dem Schnitt schließt.
Ähnliche Modelle
Seedance 2.5
von ByteDance
Ab 51 Credits pro Video
Gemini Omni Flash
von Google
Ab 14 Credits pro Video
Seedance 2.0
von ByteDance
Ab 19 Credits pro Video
Erstelle Videos mit Sync 3
Sync 3 ist ab dem Plan Hobby verfügbar. Erstelle einen kostenlosen Workspace, teste zuerst die anderen Modelle und wechsle den Plan, wenn du ihn brauchst.