Vidu S2: Interaktive, bearbeitbare und räumliche Videogenerierung in Echtzeit
Vidu S2-Avatar
Vidu S2-Avatar
Unterstützt Sprachinteraktion in Echtzeit, komplexe Bewegungssteuerung sowie durch Referenzbilder gesteuerte Objektinteraktion, Outfitwechsel und Hintergrundwechsel.
Vidu S2-Editing
Vidu S2-Editing
Ermöglicht die Echtzeitbearbeitung von Stil, Outfit, Motiv und Hintergrund der eingegebenen Videostreams auf der Grundlage von Referenzbildern zu Stil, Outfit, Motiv und Hintergrund.
Vidu S2-Avatar: Interaktives Echtzeit-Modell
Vidu S2-Avatar
Unterstützt Sprachgespräche und sprachgesteuerte komplexe Avatar-Bewegungen, beispielsweise Tanzen.
Interaktion mit Objekten in Echtzeit
Ermöglicht Interaktionen mit Objekten auf Grundlage von Benutzeranweisungen und Referenzbildern, beispielsweise das Aufheben eines bestimmten Gegenstands zur Präsentation, das Anziehen von Kleidung aus einem Referenzbild oder der Wechsel zu einem Hintergrund aus einem Referenzbild.
720p+ Videoqualität
Unterstützt die Avatar-Ausgabe in einer Auflösung von 720p oder höher.
Offline-Avatar
Bietet hochwertige digitale Offline-Avatare, die ein vorgegebenes Skript vorlesen oder vordefinierte Aktionen ausführen können.
Vidu S2-Bearbeitung: Echtzeit-Bearbeitungsmodell
Stildarstellung
Bearbeitet den Videostil in Echtzeit auf Grundlage eines Stil-Referenzbilds und verleiht dem Videostream unterschiedliche visuelle Ästhetiken.
Charakterersetzung
Ersetzt das Motiv in Echtzeit auf Grundlage eines Motiv-Referenzbilds und verändert die Person im ursprünglichen Videostream.
Hintergrund ersetzen
Bearbeitet den Videohintergrund in Echtzeit auf Grundlage eines Hintergrund-Referenzbilds und ersetzt die Umgebung der Person.
Virtuelle Anprobe
Bearbeitet das Outfit einer Person in Echtzeit auf Grundlage eines Kleidungs-Referenzbilds und erzeugt verschiedene Looks für die virtuelle Anprobe.
Beliebte Anwendungsfälle
Häufig gestellte Fragen zu Vidu S
1. Vidu S2 ist ein weltweit führendes interaktives Echtzeitmodell, das über Vidu S2-Avatar die Erstellung von Video-Avataren in Echtzeit und über Vidu S2-Editing die Videobearbeitung in Echtzeit ermöglicht. 2. Vidu S2-Avatar unterstützt Sprachinteraktion in Echtzeit und komplexe Bewegungssteuerung und kann anhand von Referenzbildern Objektinteraktionen, Outfitwechsel und Hintergrundwechsel ermöglichen. 3. Vidu S2-Editing unterstützt die kontinuierliche Echtzeitbearbeitung von eingehenden Videostreams auf der Grundlage von Stil-, Outfit-, Motiv- und Hintergrundreferenzen. 4. Darüber hinaus unterstützt Vidu S2 auch die asynchrone Erstellung: Nutzer können aus einem einzelnen Bild und einem Audioclip Avatar-Videos erstellen.
1. Verbesserte visuelle Qualität, Unterstützung von 480p auf 720p erweitert. 2. Verbesserte Befolgung von Anweisungen, einschließlich Sprachbefehlen zur Steuerung von Avataren bei der Ausführung von Tanzbewegungen.
1. Vidu S2-Avatar ermöglicht Echtzeitinteraktion: Avatare können in Echtzeit mit Benutzern sprechen, Unterbrechungen unterstützen, eine bidirektionale Wahrnehmung bieten und die gesamte Pipeline von der Spracheingabe bis zum Rendering abdecken. 2. Vidu S2-Editing ermöglicht Videobearbeitung im Streaming-Modus: Es empfängt kontinuierlich Videostreams und gibt bearbeitete Ergebnisse in Echtzeit aus. Benutzer können dabei Referenzbilder oder Szenen während des laufenden Streams wechseln, ohne ihn zu unterbrechen.
1. Online-Avatare können in Echtzeit mit Benutzern sprechen, jederzeit während des Gesprächs unterbrochen werden und bieten eine bidirektionale interaktive Wahrnehmung. 2. Offline-Avatare basieren auf einer asynchronen Generierung: Benutzer können aus einem Charakterbild zusammen mit einem Audioclip oder Text ein sprechendes Video mit synchronisierten Lippenbewegungen und abgestimmten Bewegungen erstellen.
Vidu S2-Editing unterstützt drei Eingabemodi: Kamera, Video und Bild. Nach Aktivierung der Kamera oder Auswahl einer Eingabequelle kannst du den eingegebenen Videostream in Echtzeit mithilfe von Referenzbildern für Stil, Outfit, Motiv oder Hintergrund bearbeiten und das bearbeitete Ergebnis ausgeben.
Während eines interaktiven Livestreams mit einem Avatar können Benutzer Referenzbilder und Anweisungen bereitstellen. Referenzbilder werden in drei Kategorien unterteilt: Objekte, Outfits und Hintergründe. Sie ermöglichen Interaktionen auf Grundlage der Anweisung und des Referenzbilds, beispielsweise das Aufheben eines Gegenstands zur Präsentation, das Anziehen der auf dem Referenzbild gezeigten Kleidung oder das Ersetzen des Hintergrunds.
Du kannst unsere API-Plattform integrieren: https://platform.vidu.com/vidu-stream/doc