W.A.I.
Posts
W.A.I. #34

W.A.I. #34

Un pueblo hecho de IA, súper avatares y controla videojuegos con la mente

David Garrido
August 13, 2023

Bienvenida/o a otra edición de WAI.

Esta semana he intentado hacer un edición lite, más ligera que de costumbre, por aquello de ser agosto. Como verás, no me ha salido muy allá y sigue teniendo bastante longitud.

Cuando comienzo a filtrar noticias e historias siempre me acaba pasando lo mismo, mi criterio es pensar si a mí me habría gustado enterarme de tal o cual cosa. Y claro, la mayoría de las veces es que sí, así que las incluyo.

Aún con todo, espero que este huevo a medio cocer siga pareciéndote útil y que pienses muchas veces lo mismo que yo al leer las noticias. Y si no es así y prefieres la edición hardcore házmelo saber y retomo esa senda ;).

Empezamos.

🗻 TOP 10 - Si solo tienes 2 minutos, esta es tu sección.

▶️ Nvidia anuncia un súperchip y una alianza con Hugging Face.

▶️ El experimento donde se tuvo a 25 agentes IA simulando una vida dentro de un pequeño pueblo ya es open source.

▶️ Ya puedes entrenar modelos completos con Dreambooth para SDXL en DreamlookAI.

▶️ Según esta encuesta, un altísimo número de americanos desconfía o está muy preocupado por el futuro de la IA.

▶️ Google y Universal Music están negociando para licenciar las voces de sus artistas.

▶️ Nvidia libera el código de Neuralangelo, modelo para la creación de 3D a partir de imagen.

▶️ Runway permite generar hasta 18 segundos de vídeo con IA.

▶️ ChatGPT se actualiza con 6 novedades y abre las custom instructions a todos los usuarios excepto UK y Europa.

▶️ Perri Karyal ha desarrollado un sistema para jugar videojuegos con la mente.

🐔 Tuit de la semana

▶️ A vueltas con los sesgos de la IA. Dicen que son un reflejo de la sociedad.

Women are disproportionately affected by generative AI, exhibit 273848362638
Went to CivitAI, selected “celebrity,” and scrolled until I found a man (sorry for the long video—it took a while)
— Brian Penny 🍿 (@TheBrianPenny)
2:13 AM • Jul 31, 2023

🏆️ Imagen de la semana

Probablemente sea lo más comentado esta semana, el vídeo del creador de HeyGen generado con IA.

[NEW] - Joshua Avatar 2.0 🤖✨. Both of these video clips were 100% AI-generated, featuring my own avatar and voice clone. 🎙️🎥
We've made massive enhancements to our life-style avatar's video quality and fine-tuned our voice technology to mimic my unique accent and speech… twitter.com/i/web/status/1…
— Joshua Xu (@joshua_xu_)
9:04 PM • Aug 8, 2023

Hay un primer usuario que lo ha usado, para demostrar que es real:

Y algunos usos creativos del vídeo que te mandan al apuntarte a la beta, como este de Javilop.

🛠️ La Cacharrería (si eres de probar las cosas, estás en el lugar adecuado)

▶️ Demo de Animagine XL, modelo de SDXL para creación de imágenes de estilo anime.

▶️ Espacio de Hugging Face para generar una historia a partir de una imagen.

▶️ Demo de AnimateDiff en la que puedes darle una imagen inicial siempre que haya sido generada por Stable Diffusion.

▶️ Colab para probar Fooocus, un nuevo modelo de generación de imágenes con todas las optimizaciones aprendidas de SD y Midjourney.

▶️ Demo de AudioLDM 2 para generación de audio.

▶️ Prueba el Colab de 4D-Humans, el modelo para creación de modelos 3D a partir de vídeos.

▶️ Colab de DWPose, la alternativa a OpenPose para luego usar en ControlNet.

🖼️ Imágenes

▶️ La aplicación de iOS y macOS Draw things se actualiza y aparte de las mejoras ya admite SDXL.

▶️ API (no oficial) de generadores de imagen como Stable Diffusion, Dall-e 2 y sí, Midjourney

▶️ Primeras implementaciones de ControlNet para SDXL.

▶️ Cómo hacer fine-tune a SDXL con Replicate. Está todo explicado muy bien y ya hay algunas creaciones muy curiosas con este método como este modelo de Barbie.

▶️ Resumen de las Office Hours de Midjourney. Puede que la v5.3 salga la semana que viene.

▶️ Salesforce presenta XGen-image-1, su modelo de generación de imágenes.

▶️ Colab para entrenar SDXL con AutoTrain.

▶️ Alternativa para entrenar SDXL optimizado para Colab gratuito. Sigo intentando sacar tiempo para probarlos y contar mis impresiones.

▶️ Tutorial para configurar AnimateDiff en ComfyUI. Con él podrás crear gifs de tus creaciones con Stable Diffusion.

▶️ Logo.Redmond es un modelo de SDXL para creación de logos.

▶️ Descarga todos tus prompts de Midjourney para tener una copia de seguridad.

▶️ Tatiana ha hecho un trabajo fabuloso estudiando los tokens de mayor relevancia en sus prompts de Midjourney y lo va desgranando en Twitter.

▶️ Extensión para Stable Diffusion para sincronización de labios.

✏️ Texto

▶️ Gracias a la mejora de ElevenLabs para creación de voz con muy poco retardo, se pueden crear utilidades como esta: un asistente como Samantha de la película Her.

▶️ Los investigadores han estudiado las tendencias políticas de los modelos de lenguaje. Por ejemplo, ChatGPT y GPT-4 serían más de izquierdas. Asumo que es la izquierda americana, no la europea, claro.

▶️ Stability presenta StableCode, su modelo enfocado a la creación de código.

▶️ Pietro Schirano ha puesto a hablar a ChatGPT con LLaMA 2. Y luego ha mejorado su propia obra clonando la voz de Sam Altman para ChatGPT y de Zuckerberg para LLaMA.

▶️ Ve a Google Académico y escribe ‘As an AI language model” -“ChatGPT”’ para descubrir cuántos papers han usado la IA.

▶️ Entrena modelos de lenguaje simplemente usando un prompt en inglés.

▶️ Anthropic anuncia su actualización del modelo Claude Instant.

🧱 Diseño / 3D

▶️ Nvidia presentó las novedades de Omniverse en la conferencia Siggraph de hace unos días. Es la plataforma de creación de mundos 3D realistas y ahora con generación a partir de IA también.

▶️ Nvidia también presentó su nueva herramienta para generación de imágenes 360 a 8k y HDRI para entornos 3D.

🎥 Vídeo

▶️ El equipo de Corridor Digital ha vuelto a hacerlo. Después de su primer corto animado hecho con la ayuda de IA, han decidido darle una vuelta más y crear la segunda parte.

▶️ Esta obra ha sido creada con el proceso: texto → Música → Imagen → Video e Historia. Explica el proceso y las herramientas usadas.

New workflow experimentation.
Text -> Music -> Image -> Video & Story
The man in the painting is a holy man who has spent his entire life seeking enlightenment and a deeper understanding of the world around him. He has spent countless hours meditating on mountaintops, studying… https://t.co/twitter.com/i/web/status/1…/
— William Lamkin (@WilliamLamkin)
9:27 PM • Aug 7, 2023

▶️ Las cosas que hace Karen X siempre me han parecido súper creativas y esta última muestra no lo es menos.

AI painting experiments
I made these using Generative Fill (which only works on photos, so I did these one frame at a time in @Photoshop)
See process below -
— Karen X. Cheng (@karenxcheng)
7:47 PM • Aug 7, 2023

▶️ Evolución del vídeo con IA en 4 meses.