Luma Labs ha lanzado una nueva herramienta llamada “Modificar Video” para su Dream Machine, que utiliza inteligencia artificial para transformar cualquier video sin necesidad de volver a grabar. Esto significa que los personajes y entornos mantienen sus movimientos y actuaciones originales, mientras que se pueden hacer cambios desde ajustes sutiles en la vestimenta hasta transformaciones completas de escenas.
La nueva función de Modificar Video permite editar videos de manera similar a como Photoshop edita imágenes. Puedes cambiar el escenario, el estilo e incluso a los personajes, todo sin necesidad de volver a grabar o animar. Luma Labs asegura que la edición de video con IA conserva los elementos importantes del video original, como el movimiento de los actores, el encuadre y el tiempo, mientras modifica lo que desees.
Imagina que la ropa que llevas puesta, que ya no te gusta, se convierte en un atuendo completamente diferente. Tu fortaleza de mantas ahora es un barco navegando en un mar tempestuoso, y tu amigo en el suelo se transforma en un astronauta en el espacio, todo sin usar pantallas verdes ni estudios de edición.
La combinación de captura de movimiento avanzada, estilización con IA y lo que Luma llama “preajustes estructurados” permite ofrecer una amplia gama de videos reinventados. Solo necesitas subir un video de hasta 10 segundos para comenzar. Luego, puedes elegir entre los preajustes Adhere, Flex o Reimagine. Adhere es la opción más sutil, enfocándose en cambios mínimos, como ajustes en la ropa o texturas diferentes en los muebles. Flex permite ajustes de estilo, iluminación y otros detalles más evidentes. Reimagine, como su nombre indica, puede rehacer completamente el video, llevándolo a otro mundo o transformando personas en animales de dibujos animados.
El proceso es amigable y flexible, ya que no solo se basa en indicaciones, sino también en imágenes de referencia y selecciones de fotogramas de tu video. Aunque la modificación de video con IA no es exclusiva de Luma, la empresa afirma que supera a competidores como Runway y Pika gracias a su fidelidad en la actuación. Los videos alterados mantienen el lenguaje corporal, las expresiones faciales y la sincronización labial de los actores, resultando en un producto final que se siente orgánico.
Sin embargo, la herramienta Modificar Video tiene limitaciones. Actualmente, los clips están limitados a 10 segundos, lo que ayuda a gestionar los tiempos de espera. Si deseas un video más largo, necesitarás planificar cómo incorporar diferentes tomas en una sola película. Aun así, la capacidad de aislar elementos dentro de una toma es un gran avance. Por ejemplo, si tienes una actuación que te gusta, pero el personaje debería estar en un entorno diferente, puedes mantener la actuación y cambiar el garaje por el mar y las piernas del actor por una cola de pez.
Es impresionante lo rápido y completo que la IA puede reestructurar un video. Estas herramientas no son solo un truco; los modelos de IA son conscientes de las actuaciones y los tiempos de una manera que se siente más humana que cualquier otra que haya visto. Aunque hay limitaciones técnicas y éticas que impiden a Luma Labs recrear todo el cine en este momento, estas herramientas serán atractivas para muchos productores de video amateur o independientes. Aunque no creo que se utilicen tan ampliamente como los filtros de fotos comunes, hay ideas divertidas en las demostraciones de Luma que podrías querer probar.
