Runway, la startup qui a co-créé le célèbre générateur d’images Stable Diffusion AI, a publié un modèle d’IA qui prend n’importe quelle description textuelle-comme”des tortues volant dans le ciel”-et génère trois secondes de séquences vidéo correspondantes.
Invoquant des raisons de sécurité et commerciales, Runway ne publie pas le modèle à grande échelle pour commencer, et il ne sera pas non plus open source comme Stable Diffusion. Le modèle texte-vidéo, surnommé Gen-2, sera initialement disponible sur Discord via une liste d’attente sur le site Web de Runway.
L’utilisation de l’IA pour générer des vidéos à partir d’entrées de texte n’est pas nouvelle. Meta Platforms et Google ont tous deux publié des documents de recherche sur les modèles d’IA texte-vidéo à la fin de l’année dernière. Cependant, la différence est que le modèle d’IA texte-vidéo de Runway est mis à la disposition du grand public, a déclaré Cristobal Valenzuela, directeur général de Runway.
Runway espère que les créatifs et les cinéastes utiliseront le produit, Valenzuela a déclaré.
Le mois dernier, le géant de la fabrication de puces Qualcomm a présenté Stable Diffusion 1.5, le générateur d’images AI, fonctionnant sur un combiné Android sans accès au réseau avant le Mobile World Congress (MWC) 2023. Selon Qualcomm, le déploiement de l’entreprise de l’outil d’IA, qui nécessite généralement beaucoup de puissance de calcul, est capable de générer des images en quelques secondes. La société n’a pas révélé les détails du matériel de smartphone utilisé pour optimiser l’outil d’IA pour qu’il s’exécute localement sur les smartphones.
L’outil d’IA générative populaire est connu pour consommer beaucoup de puissance de calcul pour fonctionner, ce qui est pourquoi plusieurs services qui en dépendent effectuent ces activités sur de grands serveurs plutôt que sur le smartphone ou l’ordinateur d’un utilisateur.
© Thomson Reuters 2023
Des liens d’affiliation peuvent être générés automatiquement-consultez notre déclaration d’éthique pour plus de détails.