Modelos de video de difusión, pero ahora - **en tiempo real**! Los filtros de video simples son en tiempo real, pero solo pueden volver a colorear y estilos básicos. Los modelos de difusión de vídeo (Veo y sus amigos) son mágicos, pero tardan muchos segundos/minutos en generarse. MirageLSD es magia en tiempo real. A diferencia de los filtros de video simples, los modelos de difusión realmente *entienden* lo que están viendo, por lo que pueden diseñar todas las partes de la transmisión de manera inteligente (por ejemplo, poner sombreros en las cabezas o sables de luz en las manos, etc.). Y se pueden dirigir arbitrariamente, por ejemplo, mediante indicaciones de texto. Los filtros de video inteligentes y personalizables desbloquean muchas ideas geniales con el tiempo: - Transformar las imágenes de la cámara en realidades alternativas - Dirige y filma tus propias películas, representando escenas con accesorios. En tiempo real = > retroalimentación/revisión instantánea. - Codifica los juegos en torno a esferas/bloques simples, luego usa un modelo de difusión en tiempo real para texturizar tu juego y hacerlo hermoso. - Estiliza y personaliza cualquier feed de vídeo: juegos, vídeos, ... por ejemplo, Skyrim pero "MÁS ÉPICO"? DOOM II pero ¿la calidad moderna de Unreal Engine con solo un mensaje? ¿Película de terror pero "linda, rosa y solo conejitos"? ¡No sé! - Fondos de llamadas de Zoom+++ - Probarse la ropa en tiempo real de forma virtual - Gafas: por ejemplo, ¿caricaturizar su visión en tiempo real? - ahora podemos construir el Espejo de Harry Potter de Erised, mostrando la "alimentación en bruto" de ti en el espejo pero aumentada con tus deseos más profundos (según lo inferido por la IA). - No sé, probablemente me esté perdiendo el más grande, ¡tantas cosas! (Divulgación: Soy un inversor ángel (muy pequeño) en Decart, estaba emocionado porque, en mi opinión, esta tecnología se volverá muy buena muy rápido y se siente general, poderosa, pero también es técnicamente muy difícil. ¡Felicidades por el lanzamiento al equipo!)
Decart
Decart18 jul, 04:44
Presentamos MirageLSD: el primer modelo de IA de difusión en vivo (LSD) Ingrese cualquier transmisión de video, desde una cámara o un chat de video a la pantalla de una computadora o un juego, y transfórmelo en cualquier mundo que desee, en tiempo real (latencia de <40 ms). Así es como funciona (¡con demostración que puedes usar!):
326.64K