El nuevo vídeo musical de Washed Out fue creado con la tecnología Sora de OpenAI

“The Hardest Part”, una nueva canción del artista indie pop Washed Out, trata sobre el amor perdido, uno de los temas más humanos.

Pero, irónicamente, para ilustrar la sensación de anhelo de la melodía, el músico recurrió a algo mucho menos de carne y hueso: la inteligencia artificial.

Con el lanzamiento del jueves de “The Hardest Part”, Washed Out, con sede en Macon, Georgia, cuyo nombre real es Ernest Greene, tiene la primera colaboración entre un importante artista musical y un cineasta en un video musical que utiliza la tecnología de texto a video Sora de OpenAI. , según el sello discográfico del cantautor, Sub Pop.

El vídeo de aproximadamente cuatro minutos, dirigido por Paul Trillo, acerca rápidamente al espectador a través de elementos clave de la vida de una pareja. El público ve a los personajes, una mujer pelirroja y un hombre de cabello oscuro, pasar de besarse y fumar en una escuela secundaria de los años 80 a casarse y tener un hijo. «No llores, todo está bien ahora», canta Greene. «La parte más difícil es que no puedes volver atrás».

La pareja no está interpretada por actores reales. Se crean de forma totalmente digital a través de la IA de Sora.

El vídeo podría marcar el comienzo de una tendencia potencialmente innovadora de utilizar la IA en la producción de vídeos.

«Creo que el lugar en el que nos encontramos ahora está a punto de explotar, por lo que espero poder incorporar algo de esta nueva tecnología y ver cómo eso influye en lo que se me ocurre», dijo Greene en una entrevista. «Entonces, si eso es pionero, me encantaría ser parte de ello».

“The Hardest Part”, el sencillo principal del nuevo álbum autoproducido de Greene, “Notes From a Quest Life”, cuyo lanzamiento está previsto para el 28 de junio, es el vídeo musical más largo realizado con tecnología Sora hasta el momento. El programa crea clips cortos basados ​​en indicaciones de texto escrito. Esto permitió a Trillo construir escenas de una manera que hubiera sido mucho más costosa con actores, decorados y ubicaciones reales.

“Al no tener limitaciones de presupuesto ni tener que viajar a diferentes lugares, pude explorar todos estos resultados diferentes y alternativos de la vida de esta pareja”, dijo Trillo.

Trillo es uno de los creativos que tiene acceso anticipado a Sora, que aún no está disponible públicamente. AbiertoAI presentó a Sora en febrero y ha estado probando el sistema con directores y reunión con ejecutivos de Hollywood y productores. Está solucionando problemas y tratando de abordar las preocupaciones sobre la propiedad intelectual.

Las innovaciones en IA han sido enormemente controvertidas en muchos rincones, incluida la industria de la música, que se ha visto plagada por el uso de «deepfakes”, o video y audio que utiliza falsamente la imagen o la voz de un artista. Músicos y otras personas han presionado para legislación combatir tales creaciones engañosas, y agencias de talentos están trabajando con nuevas empresas tecnológicas para tomar medidas drásticas contra el mimetismo digital no autorizado.

La introducción de Sora, procedente de la misma empresa que creó el software basado en texto. Modelo de IA ChatGPT – planteó preocupaciones dentro de Hollywood y en otros lugares sobre su potencial impacto devastador en el empleo y producción. Aún así, inspiró entusiasmo entre algunos creativos por las formas en que podría ayudarlos a lograr sus objetivos. visión en pantalla sin verse limitado por presupuestos de efectos especiales y limitaciones de viaje.

Tanto Greene como Trillo dijeron que pudieron hacer más con Sora de lo que habrían hecho con decorados de la vida real dentro de su presupuesto. Sub Pop no reveló los costos del video. El artista musical no le pagó a OpenAI para usar la tecnología en el video musical.

Los dos hombres habían explorado otras ideas, incluida la contratación de bailarines y filmar en un lugar que se parecía a las colinas verdes en el arte del nuevo álbum de Greene, pero resultó difícil debido a limitaciones de tiempo y financieras. Entonces Trillo sugirió experimentar con Sora.

Greene, cuya música el público televisivo puede reconocer por el tema principal del programa de comedia satírica “Portlandia”, dudó al principio.

«Siento que mi música y la mayoría de los videos que he hecho a lo largo de los años siempre comienzan desde un lugar realmente emocional y sincero», dijo Greene, señalando que muchos de los ejemplos de videos de IA que había visto existían. en el temido “valle inquietante”, parecido a un humano pero inquietantemente artificial.

No obstante, Greene estaba dispuesto a experimentar. Entonces Trillo probó diferentes conceptos para ver cuál funcionaría en el video. Usando la tecnología, pudo explorar los diversos resultados de la vida de la pareja en múltiples lugares mediante la creación de indicaciones elaboradas basadas en texto. Completó el video en aproximadamente seis semanas, editando juntos alrededor de 55 clips en el video de los aproximadamente 700 que generó usando Sora.

“Con esto, no tuve que editarme”, dijo Trillo. «Realmente pude probar cosas y eso crea orgánicamente un tipo diferente de historia debido a eso, poder tirar tantas cosas a la pared y ver qué se pega».

Para generar clips utilizables, Greene necesitaba escribir indicaciones con suficientes detalles específicos no solo sobre la imagen en sí sino también sobre los ángulos de toma y los movimientos de los personajes. “Atravesamos la burbuja que explota, atravesamos el chicle y entramos en un campo de fútbol abierto”, escribió Trillo como parte de su sugerencia para un breve fragmento de video. «La escena se mueve rápidamente, mostrando una perspectiva frontal, mostrando a los estudiantes haciéndose más grandes y más rápidos».

El vídeo musical final de “The Hardest Part” muestra varios lugares, incluida una escuela secundaria, una tienda de comestibles, colinas, un pasillo con sábanas blancas ondeando y fuego atravesando las paredes.

Hubo algunas limitaciones. A veces, Trillo tenía una idea y Sora la concretaba. Otras veces, crearía algo caótico e inutilizable. Los videos aparecían con inconsistencias, que Trillo a veces prefería pasar por alto. Los personajes se ven un poco diferentes de un clip a otro, al igual que el hijo de la pareja.

Parte del encanto artístico del vídeo es su estado onírico: recuerdos de la vida de una pareja que ilustran la oscuridad de la memoria humana.

«Tienes que saber dónde elegir tus batallas», dijo Trillo sobre Sora. «Tienes que renunciar a un poco de tu libre albedrío al trabajar con esto y tienes que aceptar la naturaleza de lo caótico que es».

«Ciertamente me quedé impresionado con lo lejos que podía llegar a la hora de reconstruir una historia», dijo Greene.

Tanto Greene como Trillo dijeron que ven la IA como potencialmente abriendo más oportunidades para que las personas impulsen la forma de videoarte musical. Los videos musicales son un medio lógico para jugar con la IA, porque generalmente son cortos y cuestan mucho menos que las películas y los episodios de televisión.

Sin embargo, dijo Trillo, para él es importante que esto no se utilice como un nuevo método principal de creación, sino más bien como una herramienta más en el cinturón de herramientas.

«Muchos videos musicales simplemente no tienen el presupuesto para soñar en grande», dijo Trillo. «Creo que la IA puede ayudar a la industria de la música en términos de crear cosas con las que incluso Ernest podría soñar y que tal vez no se habría atrevido a soñar antes».