Vidu S2: Generación de vídeo espacial, editable e interactiva en tiempo real
Vidu S2-Avatar
Vidu S2-Avatar
Admite interacción de voz en tiempo real, control de movimiento complejo e interacción con objetos, cambios de atuendo y cambio de fondo guiados por imágenes de referencia.
Vidu S2-Editing
Vidu S2-Editing
Permite la edición en tiempo real del estilo, atuendo, sujeto y fondo de los flujos de vídeo de entrada basándose en imágenes de referencia de estilo, atuendo, sujeto y fondo.
Vidu S2-Avatar: Modelo interactivo en tiempo real
Vidu S2-Avatar
Admite conversaciones de voz y movimientos complejos de avatares controlados por voz, como bailar.
Interacción con objetos en directo
Permite interactuar con objetos según las instrucciones del usuario y las imágenes de referencia, como tomar un artículo concreto para presentarlo, vestir la ropa de una imagen de referencia o cambiar al fondo de una imagen de referencia.
Calidad de vídeo 720p+
Admite salida de avatares en definición 720p+.
Avatar offline
Ofrece avatares digitales offline de alta calidad que pueden leer un guion predefinido o realizar acciones predefinidas.
Vidu S2-Editing: Modelo de edición en tiempo real
Renderizado de estilo
Edita el estilo del vídeo en tiempo real basándose en una imagen de referencia de estilo, transformando el flujo de vídeo con diferentes estéticas visuales.
Sustitución de personajes
Sustituye al sujeto en tiempo real basándose en una imagen de referencia del sujeto, cambiando la persona del flujo de vídeo original.
Sustitución de fondo
Edita el fondo del vídeo en tiempo real basándose en una imagen de referencia de fondo, sustituyendo el entorno de la persona.
Probador virtual
Edita el atuendo de la persona en tiempo real basándose en una imagen de referencia de ropa, generando diversos looks de prueba virtual.
Casos populares
Preguntas frecuentes sobre Vidu S
1. Vidu S2 es un modelo interactivo en tiempo real líder a nivel mundial, que ofrece generación de avatares en vídeo en tiempo real a través de Vidu S2-Avatar y edición de vídeo en tiempo real a través de Vidu S2-Editing. 2. Vidu S2-Avatar admite interacción por voz en tiempo real y control de movimientos complejos, y puede utilizar imágenes de referencia para permitir la interacción con objetos, cambios de atuendo y cambios de fondo. 3. Vidu S2-Editing admite la edición continua en tiempo real de flujos de vídeo de entrada basándose en imágenes de referencia de estilo, atuendo, sujeto y fondo. 4. Además, Vidu S2 también admite la generación asíncrona: los usuarios pueden generar vídeos con avatares a partir de una sola imagen y un clip de audio.
1. Calidad visual mejorada, pasando de compatibilidad con 480p a 720p. 2. Capacidad mejorada de seguimiento de instrucciones, admitiendo instrucciones de voz para controlar a los avatares al realizar pasos de baile.
1. Vidu S2-Avatar permite la interacción en tiempo real: los avatares pueden conversar con los usuarios en tiempo real, admiten interrupciones, proporcionan percepción bidireccional y cubren todo el proceso desde la entrada de voz hasta el renderizado. 2. Vidu S2-Editing permite la edición de vídeo en streaming: recibe continuamente flujos de vídeo y genera resultados editados en tiempo real, lo que permite a los usuarios cambiar las imágenes de referencia o las escenas sobre la marcha sin interrumpir la transmisión.
1. Los avatares online pueden conversar con los usuarios en tiempo real, admiten interrupciones en cualquier momento de la conversación y proporcionan una percepción interactiva bidireccional. 2. Los avatares offline hacen referencia a la generación asíncrona: los usuarios pueden generar un vídeo en el que el personaje habla con sincronización labial y de movimientos a partir de una imagen del personaje y un clip de audio o texto.
Vidu S2-Editing admite tres modos de entrada: cámara, vídeo e imagen. Tras activar la cámara o seleccionar una fuente de entrada, puede editar el flujo de vídeo de entrada en tiempo real utilizando imágenes de referencia de estilo, atuendo, sujeto o fondo, y obtener el resultado editado.
Durante una transmisión en directo interactiva con avatar, los usuarios pueden proporcionar imágenes de referencia e instrucciones. Las imágenes de referencia se dividen en tres categorías: objetos, atuendos y fondos. Permiten interacciones basadas en las instrucciones y en la imagen de referencia, como tomar un artículo concreto para presentarlo, vestir la ropa de una imagen de referencia o cambiar al fondo de una imagen de referencia.
Puede realizar la integración con nuestra plataforma de API: https://platform.vidu.com/vidu-stream/doc