Stability AI, la startup à l’origine du modèle d’IA texte-image Stable Diffusion, pense que les outils de création de modèles 3D pourraient être la prochaine grande nouveauté en matière d’IA générative.
C’est du moins le message qu’elle envoie avec le lancement de Stable 3D, une application alimentée par l’IA qui génère des objets 3D texturés pour les plateformes de modélisation et de développement de jeux telles que Blender, Maya, Unreal Engine et Unity.
Disponible en avant-première privée pour certains clients qui contactent Stability via le formulaire de contact de l’entreprise, Stable 3D est conçue pour permettre aux non-experts de générer des modèles 3D de « qualité brouillon » « en quelques minutes », écrit Stability AI sur son blog.
« Pour les graphistes, les artistes numériques et les développeurs de jeux, la création de contenu 3D peut être l’une des tâches les plus complexes et les plus longues, prenant souvent des heures – parfois des jours – pour créer un objet 3D modérément complexe », écrit l’entreprise. « Stable 3D met sur un pied d’égalité les concepteurs, artistes et développeurs indépendants, en leur permettant de créer des milliers d’objets 3D par jour à très peu de frais ».
Stable 3D semble assez robuste et comparable, en termes de capacités, aux autres outils de génération de modèles disponibles sur le marché. Les utilisateurs peuvent décrire en langage naturel un modèle 3D qu’ils souhaitent créer ou télécharger une image ou une illustration existante à convertir en modèle. Stable 3D produit des modèles 3D au format de fichier « .obj », ce qui permet de les éditer et de les manipuler à l’aide de la plupart des outils de modélisation 3D standard.
Stability n’a pas révélé les données utilisées pour entraîner Stable 3D. Étant donné que les modèles génératifs d’IA ont tendance à régurgiter les données d’entraînement, cela pourrait devenir un sujet de préoccupation pour les utilisateurs commerciaux de l’outil. Si l’une des données était protégée par des droits d’auteur et que Stability AI n’a pas obtenu les licences appropriées, les clients de Stable 3D pourraient se retrouver à incorporer involontairement dans leurs projets des travaux portant atteinte à la propriété intellectuelle.
Stability AI n’a pas les meilleurs antécédents en matière de respect de la propriété intellectuelle. Au début de l’année, Getty et plusieurs artistes ont poursuivi la startup pour avoir prétendument copié et traité des millions d’images leur appartenant afin d’entraîner Stable Diffusion sans notification ni compensation appropriées.
Stability AI s’est récemment associé à la startup Spawning pour respecter les demandes de retrait des artistes, mais il n’est pas certain que ce partenariat couvre les données d’entraînement de Stable 3D. Nous avons contacté Stability AI pour plus d’informations et nous mettrons à jour cet article si nous recevons une réponse.
Outre les éventuelles ramifications juridiques, Stable 3D marque l’entrée de Stability AI dans le domaine naissant – mais déjà bien encombré – de la génération de modèles 3D assistée par l’IA.
Modèles 3D générés avec le nouvel outil Stable 3D de Stability AI. Crédits d’images : Stabilité AI
Il existe des plateformes de création d’objets 3D telles que 3DFY et Scenario, ainsi que des startups comme Kaedim, Auctoria, Mirage, Luma et Hypothetic. Même des acteurs historiques comme Autodesk et Nvidia commencent à s’intéresser à cet espace avec des applications comme Get3D, qui convertit des images en modèles 3D, et ClipForge, qui génère des modèles à partir de descriptions textuelles.
Meta a également expérimenté une technologie permettant de générer des actifs 3D à partir d’invites. Il en va de même pour OpenAI, qui a lancé en décembre dernier Point-E, une IA qui synthétise des modèles 3D avec des applications potentielles dans l’impression 3D, la conception de jeux et l’animation.
Stable 3D semble être la dernière tentative de Stability AI pour diversifier ses activités – ou peut-être pivoter – face à la concurrence croissante des plateformes d’IA générative créatrices d’art, notamment Midjourney et OpenAI.
En avril, Semafor a signalé que Stability AI brûlait ses liquidités, ce qui a entraîné une chasse aux cadres pour augmenter les ventes. Selon Forbes, l’entreprise a retardé à plusieurs reprises le paiement des salaires et des charges sociales, voire ne les a pas payés du tout, ce qui a conduit AWS – que Stability utilise pour le calcul afin d’entraîner ses modèles – à menacer de révoquer l’accès de Stability à ses instances GPU.
Stability AI a récemment levé 25 millions de dollars par le biais d’une note convertible (c’est-à-dire une dette qui se convertit en actions), ce qui porte son trésor de guerre à plus de 125 millions de dollars. Mais elle n’a pas encore obtenu de nouveau financement à une valeur plus élevée ; la dernière évaluation de la startup était de 1 milliard de dollars. On dit que Stability cherche à quadrupler ce chiffre au cours des prochains mois, malgré des revenus obstinément faibles.
Dans d’autres tentatives apparentes de différenciation et de stimulation des ventes, Stability AI a annoncé aujourd’hui de nouvelles fonctionnalités pour sa suite de retouche photo en ligne alimentée par l’IA, notamment une fonction de réglage fin du modèle qui permet aux utilisateurs de personnaliser les modèles sous-jacents générateurs d’art et un outil de « remplacement du ciel » qui remplace la couleur et l’esthétique du ciel dans les photos par des alternatives prédéfinies.
Les nouveaux outils rejoignent la gamme croissante de produits alimentés par l’IA de Stability AI, y compris la suite de génération de musique Stable Audio, l’application de création de gribouillis Stable Doodle et un chatbot de type ChatGPT.