Reflexiones sobre el Festival de Cine AI de Tokio, Japón: ¿qué efectos no puede lograr ChatGPT Sora?

El Festival de Cine AI de Japón (AIFJ) se llevó a cabo en el Tokyo Innovation Base (TIB) en Yurakucho, Tokio, ofreciendo a los espectadores una experiencia única, presenciando la energía innovadora que surge de la fusión de la inteligencia artificial y el arte cinematográfico. Este año, el festival presentó más de 70 cortometrajes producidos utilizando tecnología de IA, abarcando una variedad de géneros que incluyen ficción, animación, documental y cine experimental. Aquí se presenta una obra destacada que recibió una mención especial oficial en el festival, To The Bones. Este cortometraje también se puede ver en Youtube, donde el director Claudio Sa explica en detalle cómo utilizó herramientas de IA como ChatGPT Sora, Midjourney y Runway, combinándolas con Photoshop y Premiere tradicionales para crear una película de animación 3D.

Introducción a To The Bones

To The Bones fue dirigido por Claudio Sa, quien es el fundador y director de animación de Pistachio Studios, con más de diez años de experiencia en producción de animación. Este cortometraje es su intento de combinar ChatGPT Sora y otras herramientas de IA con software tradicional como Photoshop y Premiere para crear una animación.

Introducción a la historia de To The Bones

El viajero cansado se encontró con un enano, quien le regaló una brillante gema roja. Sin embargo, después de llevar la gema, comenzó a experimentar un deseo infinito y, al final, pagó el precio. Esta película está inspirada en un cuento de hadas de Jordan Peterson.

Desafío de producción de animación AI de 30 días hasta los huesos

El director de To The Bones desafió a hacer una película animada en 3D en 30 días con un presupuesto muy limitado utilizando herramientas de IA. El director no quería que la película pareciera generada por inteligencia artificial, y esperaba crear una obra que tuviera una sensación más artesanal, más coherente y más centrada en la historia, utilizando el guion gráfico inicial y su estilo de producción cinematográfica. Este cortometraje de 6 minutos utiliza herramientas como la plataforma Sora ChatGPT Open Art de OpenAI, Runway, así como software tradicional como Photoshop, Premiere Pro y After Effects.

ChatGPT + otras herramientas de IA para crear videos animados

Primero, Claudio dibujó un boceto del personaje principal en Photoshop, utilizando Midjourney para generar el fondo y el vestuario. Claudio subió el personaje dibujado a mano y el borrador de la historia a ChatGPT para dar algunas indicaciones textuales a la IA (prompt) para que los detalles de la trama fueran más concretos. Al darse cuenta de que la historia aún no tenía suficiente tensión, Claudio agregó otros personajes, permitiendo que ChatGPT funcionara, simplificando el trabajo del guion y añadiendo más trama.

La función ChatGPT Sora 360 permite que los personajes se giren de manera natural.

Abrir la función de pantalla verde de Sora permite reemplazar diferentes fondos. Claudio utiliza la función de rotación de 360 grados para que los personajes puedan girar. En las animaciones, si los personajes no pueden moverse de manera natural, se vuelven rígidos y extraños. Muchas películas en el festival no pudieron superar esta dificultad, pero Claudio, con años de experiencia en producción de animación, permite que la IA complete parte del trabajo. ChatGPT convierte el borrador de la historia en un guion, utiliza ElevenLabs para dar voz a los personajes y luego agrega tantos fotogramas vívidos como sea posible para que la trama y las imágenes sean más naturales y conmovedoras.

Cosas que OpenAI ChatGPT Sora no puede hacer

Se puede entender Sora como un procesador de alimentos de alta gama, como una olla a presión o un horno; los productos terminados que se introducen después de ser preparados se convierten más rápidamente en un delicioso platillo. El éxito de To The Bones radica en que tanto la “preparación” como la “postproducción” son manejadas con la ayuda de la IA. OpenArt genera la trama, y Claudio lleva las escenas de vuelta a Photoshop para procesar cada Frame. Él recomienda especialmente Runway y OpenArt para generar borradores e imágenes, mientras entrena a OpenAI para generar más imágenes. Sin embargo, el mayor desafío de hacer animaciones con IA es la “coherencia narrativa”. Las animaciones con trama deben enlazar la historia y las escenas de manera continua. Hacer una película de animación no es difícil, pero contar una historia conmovedora depende de efectos visuales impactantes y giros en la trama. En este punto, solo aquellos con experiencia en producción cinematográfica y guionismo pueden resolver estos problemas técnicos. Muchos giros en la historia no son resultados que la IA actual pueda predecir. En este momento, recordé que Japón anunció recientemente la resolución de un caso sin resolver durante más de veinte años. Una ama de casa fue asesinada en su hogar, y la policía no tenía pistas sobre el motivo o el asesino. A pesar de contar con la ciencia del ADN, no pudieron encontrar al culpable. Al final, el motivo del crimen fue simplemente que el asesino sentía celos de que esta mujer obtuviera la atención del hombre que él deseaba; esta es la compleja operación del cerebro humano y la razón por la cual el talento artístico y la creatividad ( no pueden ser completamente reemplazados por la inteligencia artificial. Para tener una historia llena de giros que además tenga sentido, se necesita el cerebro humano y la lógica de pensamiento, algo que las máquinas nunca podrán predecir completamente. Por ahora, los guionistas de Hollywood todavía tienen trabajo.

Referencia:

Hasta los huesos

Hice una película con IA. Esto es lo que sucedió.

Para Los Huesos utilizar herramientas:

ChatGPT Sora de OpenAI

Asistente de IA Kling

Guión Runway

Voz generada por IA Elevenlabs

Este artículo sobre las impresiones del Festival de Cine de IA en Tokio, Japón, ¿cuál es el efecto que ChatGPT Sora no puede lograr? Apareció por primera vez en Chain News ABMedia.