Runway GEN-2 est ouvert : Text to Video pour tous !

GEN-2, c’est l’équivalent de Midjourney mais pour la vidéo, c’est une IA générative spécialisée dans le « Text to Video ». C’est une vidéo réaction improvisée pour montrer brièvement comment y accéder et créer vos premières vidéos IA gratuitement

Introduction

Johan, l’animateur de la vidéo, commence par saluer les spectateurs et explique que la vidéo a été improvisée. Il annonce qu’il n’y aura presque pas de montage et que la vidéo a été enregistrée directement suite à l’annonce de Runway de l’ouverture publique de l’IA GEN-2. GEN-2 est une IA qui permet de transformer du texte en vidéo. On tape un prompt et on obtient une vidéo. C’est similaire à Midjourney et Stable Diffusion où on tape un texte et ça donne des images, mais ici, ça donne des séquences vidéo.

Voir la vidéo sur Youtube

À propos de Runway

Runway est une entreprise qui a développé depuis un certain temps des solutions autour de l’image et de la vidéo avec des outils très performants. On peut faire du montage vidéo, des effets spéciaux, de l’interpolation d’image, etc. Ils avaient déjà sorti GEN-1 qui est disponible dans leur suite d’outils, mais GEN-2 va beaucoup plus loin.

Présentation de GEN-1

GEN-1 permettait de faire du texte à vidéo ou à partir d’une image qui inspire l’algorithme pour générer une séquence vidéo. Les rendus sont assez bons, comparables à ce que fait DALL-E sur Table Diffusion ou sur Automatic Heaven.

Présentation de GEN-2

GEN-2 était en bêta privée mais est maintenant disponible pour le public et peut être testée gratuitement. La qualité de rendu des images est largement meilleure que GEN-1. Pour l’abonnement gratuit, on a 125 crédits offerts mais on ne peut pas en acheter d’autres. On ne peut pas augmenter la taille des vidéos, supprimer le filigrane, l’export est limité à 720p et la durée des vidéos est limitée à 4 secondes. On accède de façon limitée à d’autres outils IA qui sont assez géniaux.

Options d’abonnement

Pour 15 dollars par mois en mode annuel ou 15 dollars en mode mensuel (qui tombe à 12 si on prend à l’année), on a beaucoup plus de crédits par mois, on peut en racheter si jamais on a tout consommé, on peut augmenter la taille des vidéos générées, supprimer le filigrane, et exporter en Full HD, en 4K, en couche alpha (c’est-à-dire en green screen ou en fond vert) ou en couche alpha pour exporter par exemple en ProRes et faire du montage et incruster ces éléments dans une nouvelle vidéo. Il y a aussi le pro qui permet encore plus avec la possibilité d’entraîner notre propre IA, notre propre modèle.

Comment tester GEN-2 gratuitement

Pour tester gratuitement, il suffit de s’enregistrer sur le site de Runway. Une fois enregistré, on accède au dashboard de Runway où on trouve l’annonce de GEN-2, l’ancienne version, d’autres outils, et des tutoriels.

Comment utiliser GEN-2

Pour utiliser GEN-2, il faut cliquer sur « Generate Video » et taper un prompt dans la zone prévue à cet effet. Il est recommandé de cocher « Interpolate » pour obtenir une vidéo plus fluide et plus jolie à regarder. On peut aussi envoyer une image pour que l’IA s’inspire de cette dernière pour générer la séquence vidéo. Une fois le prompt tapé, il suffit de cliquer sur « Generate » et attendre quelques dizaines de secondes.

Résultat de la génération de vidéo

La vidéo générée est très réaliste et intéressante. Johan montre un exemple de vidéo générée à partir du prompt « cloud in the ». Il trouve le résultat très prometteur.

Conclusion

Johan encourage les spectateurs à tester GEN-2 et à laisser un commentaire sur ce qu’ils en pensent. Il rappelle qu’on a 125 crédits gratuits en mode Free. Il encourage également à noter le résultat pour aider le modèle à se perfectionner. Il termine la vidéo en demandant aux spectateurs de mettre un pouce vers le haut s’ils ont trouvé la vidéo sympa, de s’abonner à la chaîne, d’activer la cloche pour être prévenu des prochaines vidéos, et de partager cette vidéo sur leurs réseaux sociaux.

Ressources

Voici les liens des services mentionnés dans la vidéo « Prompts Midjourney : 2 outils géniaux pour créer les meilleurs ! » :

  1. Bêta d’Alphonse Prompt AI : https://alphonse-web.fr/prompt-helper
  2. Matériel de l’auteur sur Amazon : https://www.amazon.fr/shop/johansolutions
  3. Sony A6000 : https://amzn.to/2KSNjso
  4. Sigma 30mm 1.4 DC DN Contemporary : https://amzn.to/39mmxSJ
  5. Soutien sur Tipeee : https://fr.tipeee.com/johan-solutions
  6. Conseil ou accompagnement actif en visio : https://www.directsolutions.fr/
  7. Groupe Facebook de la chaîne : https://www.facebook.com/groups/39611
  8. Instagram de l’auteur : https://www.instagram.com/jpuisais/
  9. Photos gratuites sur Pixabay : https://pixabay.com/fr/users/xtendo-1
  10. Twitter de l’auteur : https://twitter.com/mrgris
  11. Site de l’auteur : http://www.johanpuisais.com/