La IA de Runway puede editar la realidad, y Hollywood está prestando atención

Las herramientas de IA están revolucionando el trabajo creativo de todo tipo, y Runway AI es pionera en este sector, causando gran revuelo en Hollywood gracias a colaboraciones con empresas como Disney y Netflix.

El cofundador y CEO de Runway, Cristóbal Valenzuela, analiza el vertiginoso crecimiento de la compañía, los riesgos y las responsabilidades de los creadores de herramientas de IA y cómo esta tecnología está redefiniendo tanto las expectativas empresariales como nuestra noción de creatividad.

Esta es una transcripción abreviada de una entrevista de Rapid Response, presentada por Bob Safian, exeditor jefe de Fast Company. Del equipo responsable del podcast Masters of Scale, Rapid Response presenta conversaciones sinceras con los principales líderes empresariales de la actualidad que se enfrentan a desafíos en tiempo real. Suscríbete a Rapid Response dondequiera que escuches tus podcasts para no perderte ningún episodio.

Lanzaron su modelo Gen-4 hace poco. También sacaron su herramienta de edición de video Aleph.

Correcto.

Y ahora también existen otras herramientas, como Veo 3 de Google, que veo que la gente usa. Por supuesto, están Sora y Midjourney de OpenAI. ¿Cuál es la diferencia entre todos estos? Es decir, ¿usan todos motores similares o están apareciendo ahora porque la computación ha alcanzado un cierto nivel?

Es una combinación de factores. Llevamos trabajando en esto casi siete u ocho años, así que hemos aprendido mucho tras desarrollarlo individualmente. Diría que últimamente es cada vez más evidente que los modelos se están volviendo bastante buenos para abordar y realizar muchas cosas diferentes, lo que resulta interesante por razones comerciales obvias. Todos los modelos son diferentes. Creo que todos los modelos se entrenan por diferentes motivos. Solemos centrarnos en profesionales y personas que desean crear excelentes videos. Este increíble modelo que lanzamos hace apenas un par de semanas permite modificar y crear videos a partir de un video existente. Eso nunca antes había sido posible. Y este tipo de avances permiten, supongo, que mucha más gente haga cosas mucho más interesantes.

Te vi en otro video usar indicaciones de voz para crear una escena. Tus herramientas generan ángulos de cámara y cambian objetos. Extienden la escena, completando lo que falta. En un video, vemos un paisaje urbano, y luego se encienden las farolas, las ventanas de los edificios de oficinas y apartamentos empiezan a parpadear, y las luces se encienden y apagan en una secuencia coreografiada. ¿Puedes explicar cómo se creó?

Nos llevó menos de una hora hacer ese video. Comienzas con una escena, un video inicial, y luego le pides a Runway qué cosas quieres cambiar. Así, si es de día, le podemos pedir al modelo: “Muéstrame una versión nocturna de esa misma escena”. El modelo comprenderá lo que hay en esa escena y atenuará la luz metafóricamente, pero también literalmente, convertiremos el día en noche, manteniendo prácticamente la misma consistencia en todo lo demás. Puedes encender las luces de las calles. Y puedes ser mucho más específico. Puedes decir: “Solo enciende las luces de la izquierda” o “Solo enciende las farolas, dejando todo lo demás a oscuras”. Puedes decir: “Ahora empieza a encender las luces una por una, empezando por la de la izquierda y terminando por la de la derecha”.

En cierto modo, se trata de editar la realidad. Quizás puedas verlo así. Tienes un contenido existente y lo trabajas con IA, pidiéndole que lo modifique como quieras, lo cual es realmente divertido, la verdad. Es algo que creo que nunca antes habíamos tenido la oportunidad de hacer, así que es muy divertido experimentar con él.

He probado Runway un poco. Es genial, pero todavía no puedo escribir un solo prompt en lenguaje natural y conseguir una película completa. Es decir, se necesita destreza y disciplina para que estas herramientas funcionen a su máximo potencial ¿Llegaremos al punto en que solo se necesite la idea para crear una película? ¿La visión y la producción en sí son automáticas?

Creo que un gran concepto de lo que mencionaste fueron las herramientas. Esto es una herramienta. Es una herramienta muy poderosa, y te permite hacer cosas que antes no podías hacer. Saber cómo usarla siempre será importante, y la herramienta no funcionará por sí sola si no sabes cómo manejarla, cómo usarla de maneras interesantes. Así que supongo que la respuesta a la pregunta de si alguna vez llegaremos al punto en que puedas simplemente proponer algo y obtener exactamente lo que quieres es… Supongo que la respuesta es más o menos. Depende de lo bien que sepas usar la herramienta.

Pienso en las herramientas que se usan hoy en día para hacer películas, como una cámara. ¿Puede una cámara ayudarte a ganar un Óscar? Por supuesto. Si tienes una cámara, ¿ganarás un Óscar? No. Lo que hace a un gran cineasta es, bueno, saber dónde enfocar la cámara, saber cómo funciona y cómo contar una historia con ella. Y creo que eso no es diferente de cómo concebimos las herramientas de IA y Runway en particular: que pueden ayudarte a llegar muy lejos. Puedes hacer cosas increíbles con ellas. Solo tienes que aprender a pensar y trabajar con ellas. Y si sabes, llegarás lejos.

Mencionaste el trabajo que haces con estudios en Hollywood. Sé que te has asociado con Netflix, Disney, AMC y otras cadenas. ¿Cómo están usando la IA de Runway hoy en día? Porque la IA puede ser un secreto a voces en Hollywood. La gente la usa, pero no siempre quiere admitirlo.

Sí, creo que es una herramienta que además es una solución. Y así, los mejores estudios y las mejores personas de Hollywood se han dado cuenta de eso y lo están usando en sus flujos de trabajo para combinarlo con otras cosas que conocen muy bien. La cuestión es que no hay reglas. Puedes empezar a inventarlas ahora mismo. Es decir, Aleph tiene un par de semanas de vida, y la gente está descubriendo cosas y formas de usar la tecnología que nunca creímos posibles, y eso es lo que más disfruto. Es una tecnología de propósito general. Se puede usar de maneras diversas, creativas y únicas, y si eres lo suficientemente creativo, descubrirás esas cosas.

En algún momento en el futuro, podría haber un medio completamente diferente para hacerlo. Ahora mismo, me imagino que toman ideas y crean esencialmente un prototipo de película para mostrar y transmitir las ideas. ¿Es eso parte de cómo se usa?

Se puede pensar, a grandes rasgos, en dos etapas: preproducción y posproducción. La preproducción consiste en escribir el guion, la dirección artística, la selección de personajes, el casting, la búsqueda de localizaciones y la preparación para el rodaje. Runway ofrece muchos usos. Por supuesto, los más obvios son el storyboard, la ayuda con la escritura del guion y la selección de personajes, y ver cómo se comportarán y qué harán.

Y luego, en la postproducción, una vez que se filma o graba algo, hay muchos efectos visuales y cosas que hay que aplicar y modificar en los videos. Pongamos el ejemplo que mencionamos antes: convertir el día en noche. Digamos que has grabado algo y resulta que alguien cambió el guion más tarde y la toma que grabaste tuvo que ser de noche. Antes, tenías que volver a grabar, dedicar más tiempo, volver a grabar con los actores y hacer todo el proceso. Ahora puedes ir a Runway y pedirle al modelo que convierta esa escena en noche, y Runway lo hará por ti. Así que ya no se trata de que vengan a Runway y escriban: “Consígueme una película multipremiada ahora, rápido y barato”, sino de: “Tengo este problema, es muy caro de resolver. Ahora tengo una herramienta que me ayuda a hacerlo más rápido y mejor. ¿Puedo usarla? ¿Hará mi película?” No, pero te ayudará mucho a lograrlo más rápido y barato.