Runway, la startup que cocreó el popular generador de imágenes de IA Stable Diffusion, ha lanzado un modelo de IA que toma cualquier descripción de texto, como”tortugas volando en el cielo”, y genera tres segundos de secuencias de video coincidentes.

Citando razones de seguridad y comerciales, Runway no está lanzando el modelo ampliamente para comenzar, ni será de código abierto como Stable Diffusion. El modelo de texto a video, denominado Gen-2, estará inicialmente disponible en Discord a través de una lista de espera en el sitio web de Runway.

El uso de IA para generar videos a partir de entradas de texto no es nuevo. Meta Platforms y Google publicaron trabajos de investigación sobre modelos de IA de texto a video a fines del año pasado. Sin embargo, la diferencia es que el modelo de IA de texto a video de Runway está disponible para el público en general, dijo Cristóbal Valenzuela, director ejecutivo de Runway.

Runway espera que los creativos y cineastas utilicen el producto Valenzuela. dijo.

El mes pasado, el gigante de fabricación de chips Qualcomm demostró Stable Diffusion 1.5, el generador de imágenes de IA, ejecutándose en un teléfono Android sin acceso a la red antes del Mobile World Congress (MWC) 2023. Según Qualcomm, la implementación de la compañía de la herramienta de IA, que normalmente requiere mucha potencia informática, es capaz de generar imágenes en unos pocos segundos. La empresa no reveló los detalles del hardware de los teléfonos inteligentes que se usó para optimizar la herramienta de IA para que se ejecutara localmente en los teléfonos inteligentes.

Se sabe que la popular herramienta de IA generativa consume mucha potencia de cómputo para ejecutarse, lo cual es por qué varios servicios que dependen de él realizan estas actividades en servidores grandes en lugar de en el teléfono inteligente o la computadora de un usuario.

© Thomson Reuters 2023

Los enlaces de afiliados pueden generarse automáticamente; consulte nuestra declaración de ética para obtener más detalles.

By Henry Taylor

Trabajo como desarrollador back-end. Algunos me habréis visto en la conferencia de desarrolladores. Últimamente he estado trabajando en un proyecto de código abierto.