Estos scripts utilizan la IA para convertir los mundos de Minecraft en adorables escenas pintorescas – Tecnotizados

Era sólo cuestión de tiempo antes de que alguien combinara el generador de imágenes de IA de Stable Diffusion y la línea de comandos de Minecraft. Este es probablemente uno de los mejores usos de los generadores de imágenes AI que he visto hasta ahora, esencialmente utilizando una combinación de capturas de pantalla de Minecraft y mensajes de texto para crear imágenes muy detalladas cada vez que el usuario hace cambios en su diseño dentro del mundo del juego Minecraft.
Sean Simon, más conocido como ThoseSixFaces (o Lozmosis en Reddit (se abre en una nueva pestaña)), publicaron ayer el vídeo de arriba mostrando una versión acelerada de sus scripts ejecutados en directo mientras jugaban en el juego.
Funciona tomando capturas de pantalla desde un ángulo específico mientras se juega, redimensionándolas o recortándolas a 512×512 píxeles y guardándolas en una carpeta. Cada fotograma se genera en «un intervalo fijo, o cada vez que el jugador coloca/quita un bloque». Utilizando una versión de InvokeAI (se abre en una nueva pestaña) que Sean modificó, el modelo entonces va a «apuntar a la última imagen en la carpeta y la salida de la imagen de difusión estable». Otro script muestra entonces la imagen de salida usando tkinter (se abre en una nueva pestaña).
Difusión estable (se abre en una nueva pestaña) es lo principal que traduce cada fotograma en magníficas imágenes generadas por la IA, sin embargo, que Sean explica «denota en un valor aleatorio entre 0,47-0,5». Así que aunque Sean es capaz de utilizar indicaciones para empujar la IA en la dirección preferida usando image2image (se abre en una nueva pestaña)En cuanto a los resultados generados, todavía hay un poco de margen en cuanto a la aleatoriedad de los mismos.
Tal y como está ahora, el proceso implica la ejecución de varios scripts, aunque Sean está «deseando comprimir todo esto en un único script».
Es un proyecto fascinante, y uno de los que mis profesores de arte de la universidad estarían encantados de ver funcionando; parecían tener una obsesión por traducir el trabajo a diferentes medios, y luego volver a traducirlo. En este sentido, un comentarista de Reddit sugiere en broma un proceso inverso al de Sean, en el que la IA «convertiría las artes en miniaturas».
Sean responde: «He empezado a cocinar algo», así que puede que no tardemos mucho en ver cómo se generan mundos de Minecraft utilizando indicaciones de imágenes de la IA. O, de hecho, mundos de Minecraft que se traducen en imágenes y luego vuelven a ser mundos de Minecraft.
Uf, en qué mundo vivimos.
Lamentablemente, los scripts de Sean aún no están disponibles para su descarga en Github, pero no pierdas de vista su Twitter (se abre en una nueva pestaña) para las actualizaciones.
Ahora, hemos visto el uso de la difusión estable en la RV (se abre en una nueva pestaña), y el director general del bot de imagen de Discord, Midjourney, especula que las futuras consolas tendrán un «chip de IA gigante y todos los juegos serán sueños (se abre en una nueva pestaña).» Este proyecto de Minecraft es una adición más a la emocionante narrativa centrada en la IA que está surgiendo en la esfera de los juegos en estos momentos.
Deja un comentario