Adobe integra Firefly Video y modelos de IA de terceros en Premiere permitiendo a los editores añadir contenidos generados por IA a las películas

Adobe ha integrado la IA generativa en Adobe Premiere para permitir a los editores añadir rápidamente contenidos creados con inteligencia artificial en las películas. Los modelos de IA incluyen Adobe Firefly Video, así como modelos de terceros como Pika y Sora. Adobe planea permitir una mayor integración de terceros mediante la creación de un estándar de plug-in de IA.

La inteligencia artificial generativa ha avanzado rápidamente y, en la actualidad, modelos de IA como Sora pueden crear rápidamente videoclips cortos y convincentes que incluyen actores y escenas realistas a partir de indicaciones de texto. Aunque no existe la tecnología necesaria para crear una superproducción a partir de un guión, la actual tecnología de IA es lo suficientemente útil como para ayudar a los editores.

Adobe ha demostrado tres formas principales en las que la IA puede ayudar, y los lectores que deseen iniciarse en Adobe Premiere pueden adquirir hoy mismo una suscripción junto con el libro de formación oficial.

La primera es la creación de nuevos B-roll para ayudar a la transición entre escenas o rellenar las tomas que faltan. Mientras que las grandes producciones cinematográficas siguen al pie de la letra una lista de tomas detallada, las producciones más pequeñas pueden no hacerlo, por lo que podría perderse una toma crítica. En lugar de gastar más dinero en volver a la localización para volver a rodar una toma que falta, una IA como Sora puede crear nuevas tomas a partir de indicaciones de texto. A medida que avance la tecnología, la capacidad de la IA para crear tomas bien ajustadas seguirá mejorando.

La segunda es la adición y eliminación de objetos de las escenas. Tradicionalmente, los artistas de efectos especiales tenían que enmascarar, rastrear y añadir o eliminar objetos manualmente. Esto puede llevar horas para un objeto simple como un letrero o un animal no deseado porque el fondo de reemplazo lleva mucho tiempo crearlo en una aplicación de edición 3D como Maya o pintarlo en una aplicación 2D como Photoshop. Adobe Firefly Video simplifica esta tarea aprovechando la velocidad de la IA para añadir o reemplazar objetos automáticamente al tiempo que sustituye sin problemas los huecos en el fondo.

La tercera es la tarea más sencilla de ampliar un vídeo unos fotogramas o segundos. Normalmente, los rodajes de películas mantienen una escena más de lo escrito durante unos segundos para que los editores puedan cortar entre escenas limpiamente. Pero en algunos casos, una escena es demasiado corta, por lo que la transición entre dos escenas resulta incómoda por ser demasiado rápida. La IA de Firefly puede crear fotogramas completamente nuevos para ampliar el clip de forma realista y sin fisuras.

Un problema potencial del enfoque de integración de la IA de Adobe es que pretenden etiquetar todo el contenido generado por la IA con Content Credentials con información sobre cómo se hizo y los modelos de IA utilizados. Esto abre problemas de privacidad, ya que los secretos comerciales de un artista pueden quedar expuestos, potencialmente junto con información personal o de propiedad.