Afuera

Charlar

desactivar

Wan 2.2 14B Animar Reemplazar

Permite la sustitución perfecta de personas en imágenes existentes, manteniendo el movimiento natural, las expresiones faciales y la iluminación de la escena.

Tokens gratis de $1 para nuevos miembros

Text to Speech

Javascript

Python

                                        const main = async () => {
  const response = await fetch('https://api.ai.cc/v2/video/generations', {
    method: 'POST',
    headers: {
      Authorization: 'Bearer ',
      'Content-Type': 'application/json',
    },
    body: JSON.stringify({
      model: 'alibaba/wan2.2-14b-animate-replace',
      prompt: 'Mona Lisa puts on glasses with her hands.',
      video_url: 'https://storage.googleapis.com/falserverless/example_inputs/wan_animate_input_video.mp4',
      image_url: 'https://s2-111386.kwimgs.com/bs2/mmu-aiplatform-temp/kling/20240620/1.jpeg',
      resolution: "720p",
    }),
  }).then((res) => res.json());

  console.log('Generation:', response);
};

main()

                                        import requests


def main():
    url = "https://api.ai.cc/v2/video/generations"
    payload = {
        "model": "alibaba/wan2.2-14b-animate-replace",
        "prompt": "Mona Lisa puts on glasses with her hands.",
        "video_url": "https://storage.googleapis.com/falserverless/example_inputs/wan_animate_input_video.mp4",
        "image_url": "https://s2-111386.kwimgs.com/bs2/mmu-aiplatform-temp/kling/20240620/1.jpeg",
        "resolution": "720p",
    }
    headers = {"Authorization": "Bearer ", "Content-Type": "application/json"}

    response = requests.post(url, json=payload, headers=headers)
    print("Generation:", response.json())


if __name__ == "__main__":
    main()

Docs

Una API con más de 300 modelos de IA

Ahorre un 20% en costos y $1 en tokens gratis

Obtener clave API Explorar modelos

Wan 2.2 14B Animar Reemplazar

Detalle del producto

El Wan 2.2 14B Animar Reemplazar El modelo representa un gran avance en Generación de vídeo con IA, diseñado específicamente para precisión reemplazo de personaje Dentro del metraje de video existente. Este modelo avanzado destaca por conservar los elementos intrínsecos del video original (escena, fondo, ángulos de cámara y sincronización precisa), a la vez que sustituye a la persona original con un nuevo personaje derivado de una sola foto de referencia. Los usuarios tienen la flexibilidad de elegir entre reemplazar solo el rostro o realizar una sustitución de cuerpo completo, conservando las poses originales y asegurando una sincronización perfecta de los movimientos de los labios.

Especificaciones técnicas

✨ Talla del modelo: 14 mil millones de parámetros que alimentan la columna vertebral de la generación.
🧠 Arquitectura: Un generador de video de transformador de difusión robusto, que presenta un diseño de combinación de expertos para lograr una capacidad mejorada y un procesamiento eficiente.
Procesamiento del espacio latente: Utiliza un autocodificador variacional causal 3D personalizado (VAE) (~127 millones de parámetros) para la compresión de video latente espacio-temporal.
🕰️ Causalidad: La causalidad temporal garantiza que los fotogramas futuros no influyan en los fotogramas pasados, lo que conduce a una generación de movimiento estable y coherente.
👁️ Mecanismo de Atención: Autoatención espacio-temporal agrupada en fotogramas de vídeo y píxeles.
✍️ Acondicionamiento: Atención cruzada a las características del texto a través de un codificador T5 para un control opcional basado en texto.
📥 Entrada: Requiere una única imagen de referencia (para identidad) y un video de referencia (para movimiento).
📤 Salida: Produce un vídeo con el personaje reemplazado, entregado en resolución 720p a 24 cuadros por segundo.

Puntos de referencia de rendimiento

🖼️ Calidad del vídeo: Ofrece un reemplazo de personajes de alta fidelidad con un movimiento notablemente suave y expresiones faciales naturales.
📏 Resolución y velocidad de cuadros: Admite constantemente una resolución de 720p a 24 cuadros por segundo.
⚡ Latencia: La velocidad de generación local depende de la GPU; las GPU H100 ofrecen una inferencia significativamente más rápida en comparación con las GPU de consumo.
📉 Eficiencia de recursos: La innovadora arquitectura de mezcla de expertos aumenta la capacidad del modelo sin un aumento proporcional en el costo computacional.

Características principales

👤 Reemplazo de personaje: Cambia sin esfuerzo la persona original de un vídeo por una nueva usando solo una imagen de referencia.
🎭 Reemplazo total o parcial: Elija el nivel de reemplazo deseado, desde solo la cara hasta un reemplazo completo de cuerpo.
🕺 Preservación de la pose y la expresión: Mantiene la integridad de las poses corporales originales, los movimientos de la cabeza y la sincronización de los labios para una animación increíblemente natural.
🏞️Consistencia de la escena: Garantiza que el fondo, los ángulos de la cámara, la iluminación y el tiempo permanezcan perfectamente intactos.
🌟Alto realismo: Aprovecha el seguimiento de movimiento basado en esqueleto y la codificación facial fina para producir animaciones suaves y altamente realistas.
💻 Implementación local: Capaz de ejecutarse localmente con configuraciones de hardware adecuadas, lo que admite la generación de salida de alta calidad.

Precios de la API

480p: $0.042
580p: $0.063
720p: $0.084

Casos de uso

📈 Marketing y publicidad: Reemplazo dinámico de personajes de video para contenido publicitario y de marketing atractivo.
✨ Influencers virtuales: Creación de influencers y avatares virtuales con imitación de expresiones realistas en tiempo real.
🎬 Producción de cine y vídeo: Agilice la previsualización y las nuevas filmaciones de películas y vídeos sin necesidad de realizar nuevas filmaciones.
🎨 Contenido personalizado: Genere contenido personalizado generado por el usuario con personajes personalizados.
Animación para redes sociales: Anima fotos para cautivar en publicaciones en redes sociales y entretenimiento.
📚 Contenido Educativo: Personaliza vídeos educativos y de formación con personajes personalizados.
🔒 Preservación de la privacidad: Mejore la privacidad reemplazando rostros en imágenes existentes para la creación de contenido sensible.
Efectos digitales: Facilitar la producción de efectos digitales y deepfakes, con un enfoque en los controles éticos.

Ejemplo de código

          nombre-datos ="alibaba.create-video-to-video-generation" modelo-datos ="alibaba/wan2.2-14b-animate-replace" >      

Comparación con otros modelos

Vídeo sobre difusión estable: Wan 2.2 Animar Reemplazar Se centra principalmente en la sustitución integral de personajes en vídeos, ofreciendo expresión holística y transferencia de movimiento. Esta capacidad supera a las extensiones estándar de Stable Diffusion, que suelen limitarse a la generación de clips cortos y suelen presentar un control temporal menos consistente. Además, Wan 2.2 puede procesar vídeos más largos (de hasta varios minutos), una ventaja significativa sobre las salidas, normalmente más cortas, de los modelos de vídeo de Stable Diffusion.

vs Imagen Video (Google): Imagen Video está orientado principalmente a generar vídeos a partir de indicaciones de texto con alta calidad visual, pero no ofrece inherentemente funciones específicas de reemplazo de personajes. Reemplazo de animación de Wan 2.2 Su atractivo único radica en la unificación de los modos de animación y reemplazo, lo que proporciona un control detallado sobre las expresiones y el movimiento, atendiendo así específicamente a los flujos de trabajo centrados en los personajes.

vs Meta Make-A-Video: Si bien Make-A-Video genera videoclips cortos a partir de texto, carece de la sustitución de caracteres específica que Wan 2.2 Animar Reemplazar Wan 2.2 se destaca en el reemplazo de personajes con sincronización precisa de poses y labios dentro de videos existentes, lo que lo hace más práctico para los flujos de trabajo de postproducción y edición de video, en contraste con el enfoque de Make-A-Video en la creación de escenas generales.

Integración de API

Wan 2.2 Animar Reemplazar Se puede acceder a través de la API de IA/ML. Se incluye documentación completa. disponible aquí.

Preguntas frecuentes (FAQ)

¿Qué es Wan 2.2 14B Animate Replace?

Wan 2.2 14B Animate Replace es un modelo avanzado de generación de video con IA, diseñado para reemplazar personajes con precisión en videos existentes. Mantiene de forma inteligente la escena, el fondo, los ángulos de cámara y la sincronización del video original, a la vez que integra un nuevo personaje a partir de una imagen de referencia.

¿Puedo reemplazar solo la cara o el cuerpo entero?

Sí, el modelo ofrece flexibilidad. Puedes reemplazar solo la cara del personaje original o reemplazarlo por completo. Ambas opciones conservan las poses originales y la sincronización labial para una animación natural.

¿Cómo garantiza Wan 2.2 la consistencia del video después del reemplazo?

El modelo está diseñado para mantener la coherencia de la escena, conservando el fondo original, los ángulos de cámara, las condiciones de iluminación y la sincronización. Se centra exclusivamente en reemplazar al personaje, conservando todos los demás elementos del vídeo.

¿Cuáles son las principales aplicaciones de esta tecnología de reemplazo de caracteres?

Las aplicaciones clave incluyen el reemplazo de personajes de video para publicidad, la creación de personas influyentes y avatares virtuales, la previsualización de películas, el contenido personalizado generado por el usuario, la personalización de videos educativos y la creación de contenido que preserva la privacidad.

¿Es la implementación local una opción para Wan 2.2 Animate Replace?

Sí, Wan 2.2 14B Animate Replace se puede implementar y ejecutar localmente, siempre que cuente con la configuración de hardware adecuada. Esto permite generar resultados de alta calidad directamente en su propia infraestructura.

Patio de juegos de IA

Pruebe todos los modelos de API en el entorno de pruebas antes de integrarlos. Ofrecemos más de 300 modelos para integrar en su aplicación.

Pruébalo gratis

Una API
Más de 300 modelos de IA

Ahorre un 20% en costos