Legan los primeros cortos por IA: «The Last Artist», un corto de ciencia ficción generado con la plataforma de vídeo

Añadir a tus IAs favoritasQuitar de tus favoritasQuitar de favoritos 0
Puntuación+1

2023-08-17

Después del texto y las imágenes, la IA está conquistando poco a poco las imágenes en movimiento. Un ambicioso director de IA comparte sus primeros resultados y su flujo de trabajo en Reddit.

El canal de YouTube «Machine_Mythos» está experimentando con modelos de texto a vídeo y otras herramientas de IA para crear cortometrajes con IA. Para el cortometraje «The Day Hell Froze Over», el director de IA utilizó una combinación de imágenes animadas generadas por IA y el modelo de texto a vídeo Runway Gen-2.

El siguiente tutorial de Machine Mythos es para Runway Gen 2. El vídeo todavía estaba sujeto al límite de 4 segundos para los vídeos de Runway, que desde entonces se ha aumentado a 18 segundos. Así que crear películas coherentes con escenas más largas debería ser mucho más fácil que en el ejemplo anterior. Este es el flujo de trabajo básico de Machine Myth para The Day When Hell Froze Over.

  1. Primero elijo la música, normalmente me ayuda con la fluidez de los cortes. También me aseguro de mantener el movimiento de las tomas anteriores. Bueno, esto es sólo dirección básica, pero debería ser tu primer paso antes de hacer nada.
  2. Luego genero la imagen en Midjourney o Stable Diffusion y sigo mejorándola hasta que esté casi perfecta. Hacer que la imagen de partida sea precisa ahorra mucho dinero y tiempo.

  3. Utiliza inpainting, outpainting, etc. Todas las imágenes deben tener los mismos puntos de anclaje para obtener un aspecto coherente, las variaciones son una buena manera de obtener diferentes ángulos del mismo tema. Esto es necesario debido al límite de 4 segundos.

  4. Yo utilizo sobre todo indicaciones de imagen + indicaciones de texto porque las indiaciones de imagen por sí solas no dan suficiente movimiento y no se pueden controlar. Sigue usando el botón de vista previa, es gratis.

  5. Busca cualquier signo de movimiento, no generes cosas donde el movimiento sea menos probable. Si te encuentras con cosas estáticas o cosas que se ven terribles, simplemente cambia a una nueva estrategia, no tiene sentido machacarlo.
  6. A partir del vídeo resultante, puedes crear capturas de pantalla y alterarlas en Photoshop para volver a introducirlas y darles consistencia.
  7. Aplica interpolación, cámara lenta, invierte el metraje, etc., rara vez hay una toma que no se pueda salvar. Puedes modificar la historia para adaptarla a lo que se muestra.

Machine Mythos menciona una descripción puntual muy precisa como otro consejo para la coherencia visual en Runway. Presumiblemente debido al limitado conjunto de entrenamiento del modelo Runway, esto conduce automáticamente a resultados similares, según él. Otros métodos para mejorar la coherencia son los avisos con imágenes y los nombres únicos y categóricos de personajes que pueden utilizarse en avisos posteriores.

Para el escalado, el director de IA prefiere «Topaz Labs», que puede producir mejores resultados que el escalado directo de Runway, dependiendo de la escena. En general, Machine MythOS señala que la paciencia y la experimentación son claves en el actual proceso de realización de películas con IA.

Pika Labs: Una nueva plataforma de texto a vídeo genera secuencias de vídeo para el cortometraje de ciencia ficción «The Last Artist»

Para el último cortometraje de IA, «The Last Artist», el director de IA utilizó Pika Labs, una plataforma de conversión de texto en vídeo en fase beta.. Al igual que Midjourney, utiliza Discord como interfaz de usuario.

El comando «/create» y una descripción textual crean un vídeo de tres segundos. Puedes añadir parámetros como la relación de aspecto o la intensidad del movimiento para afinar el aviso. El siguiente vídeo muestra algunos vídeos de muestra creados con Pika Labs.

Según Machine Myth, es mucho más fácil generar escenas épicas y visualmente impactantes que simples escenas de diálogo o interacciones básicas. Así que, por ahora, espera ver sobre todo películas híbridas con escenas filmadas y generadas en los próximos meses o años. Con el tiempo, cree que los contenidos generados por IA irán ganando terreno: «Sólo quedarán los contenidos de mayor calidad producidos por humanos, pero creo que permanecerán».

Las secuencias de vídeo del siguiente cortometraje de ciencia ficción, «The Last Artist», se generaron íntegramente con Pika Labs.

Deja una opinión

      Deje una respuesta

      🤖 AI MAFIA
      Logo