La inteligencia artificial para producir videos se ha vuelto cada vez más popular gracias a herramientas como Sora, Runway y Pika. Pero una nueva cámara de cine aumentada con IA ha llevado esta idea al siguiente nivel. La agencia de tecnología creativa SpecialGuestX y la casa de producción multimedia 1stAveMachine han presentado la CMR-M1 para lograr este objetivo. El resultado es una cámara que no solo filma el mundo a su alrededor, sino que lo mejora utilizando un modelo de video generativo basado en IA. La película digital se envía a la nube, donde un modelo basado en Stable Diffusion la transforma. Además, la IA puede conectarse con otras API para experimentar aún más con lo que puede hacer con la película.
“Creemos que la creación de películas es inherentemente física. Los cineastas están acostumbrados a usar cámaras, lentes, trípodes, iluminación, y la IA debe ser una nueva herramienta que mejore la creatividad”, dijo Miguel Espada, cofundador y tecnólogo creativo ejecutivo de SpecialGuestX. “En el espíritu de la experimentación creativa, diseñamos una cámara que sirve como una interfaz física para los modelos de IA”.
La cámara cuenta con una rueda en el lateral del estuche, lo que permite a los operadores pasar de superposiciones reales a generadas por IA de manera fluida. Incluso hay una ranura para una tarjeta de estilo que contiene un chip NFC que se conecta al modelo del usuario entrenado con sus imágenes y mensajes personalizados.
Aunque no es una configuración en tiempo real debido a la latencia, modelos en desarrollo como StreamDiffusion podrían hacer eso una realidad. Actualmente, hay cinco filtros diferentes a través de los cuales pasa la película, incluyendo el “Blooming Nature” con temática de jungla y el “Old Money” con esmoquin y oro. Puedes ver un ejemplo de “Old Money” a continuación.
La CMR-M1 es actualmente un prototipo y no está destinada para su lanzamiento comercial. Es parte de la investigación de SpecialGuestX para crear interfaces físicas para la IA generativa. Sin embargo, el diseño de la CMR-M1 se ha desarrollado con la escalabilidad en mente, permitiendo una posible producción comercial en el futuro.
La CMR-M1, que significa el nombre básico de Modelo de Cámara 1, intenta deliberadamente evocar los inicios del cine en su apariencia. La cámara tiene un diseño que recuerda a la cámara Cine-Kodak de 1924, una de las primeras y más populares cámaras portátiles de 16 mm.
“Algunas veces, para imaginar cómo podría ser el futuro, tienes que prototiparlo. Esto es especialmente cierto en la creación de películas, tecnologías creativas y la comunidad creativa”, expresó Aaron Duffy, fundador y director creativo ejecutivo de SpecialGuest. “La CMR-M1 es un prototipo de cómo los creadores prácticos usarán la IA en lugar de sentarse frente a un teclado”.
Si la CMR-M1 tendrá un impacto en el mundo del cine es difícil de decir. Más inmediato es la cuestión de si abrirá una nueva competencia entre los desarrolladores de modelos de video de IA como Runway y su nuevo Gen-3 Alpha, OpenAI y su modelo Sora, y los esfuerzos de Pika y Luma Labs.
La inclusión de modelos de código abierto de Stability AI sugiere que ese tipo de acceso puede jugar un papel significativo en la evolución de los videos de IA, aunque lo que estará en el carrete final en la competencia sigue siendo un misterio.