Powder, un logiciel de découpage alimenté par l’IA qui reprend les moments forts des flux de jeux et les transforme en vidéos de courte durée, sera bientôt capable de détecter les cris des joueurs afin de créer des montages encore meilleurs. La plateforme travaille également sur un logiciel de conversion de la parole en texte afin que les créateurs puissent obtenir une transcription de l’ensemble de leur flux et rechercher des mots-clés.
Powder a développé plus de 40 modèles d’IA spécifiques aux jeux, y compris l’analyse audio et la détection des rires, ainsi que des modèles autonomes pour des titres populaires comme Fortnite, Valorant, Apex Legends, Call of Duty, Rocket League, Fall Guys, Elden Ring et Among Us. La société lance également un modèle pour Counter-Strike 2.
Tous les modèles fonctionnent de la même manière : l’IA analyse les enregistrements de flux – qu’ils proviennent de Twitch, de YouTube ou d’un fichier MP4 – et repère les pics d’activité, notamment les victoires, les passes décisives, les meurtres et d’autres moments du jeu basés sur les performances. Powder prend ces moments forts et crée de courts montages que les créateurs peuvent télécharger sur les médias sociaux.
Crédits d’image : Poudre
À l’instar de sa capacité de reconnaissance des rires, la plateforme lancera bientôt un autre outil d’IA qui reconnaîtra les fluctuations de la voix afin que les créateurs puissent générer des clips dans lesquels ils crient – une réaction courante lors de matchs classés intenses. La société prévoit un lancement à la mi-décembre.
« Des rires incontrôlables aux abandons rageurs, même lorsqu’il ne se passe rien d’évident à l’écran, les meilleurs moments de jeu sont très subjectifs et doivent être reflétés par plusieurs perspectives différentes qui vont au-delà du jeu lui-même », a déclaré Barthélémy Kiss, cofondateur et PDG de Powder, à TechCrunch. « Cela nous a donné la certitude que nous devions capturer l’émotion de jouer à des jeux avec votre communauté. Cette combinaison de moments basés sur les compétences et de moments profondément émotionnels est ce qui rend la création de contenu de jeu si unique et si spéciale. »
Le mois prochain, la plateforme sera également dotée d’une technologie de conversion de la parole en texte, qui permettra aux créateurs de disposer d’une transcription d’un stream et de rechercher rapidement des mots spécifiques afin d’en extraire les meilleurs moments. Les streamers peuvent également saisir des messages d’humeur. Par exemple, « Trouvez-moi cinq clips amusants où mes fans deviennent fous ». Le logiciel est adapté au jargon des joueurs afin de rendre les résultats plus précis.
« Pouvoir rechercher et contextualiser des clips dans de longues vidéos comme les streams Twitch avec l’IA est le Saint Graal pour les créateurs de contenu et les équipes qui les soutiennent, de leurs éditeurs vidéo à leurs agents et managers », a déclaré M. Kiss.
En outre, Powder met à jour sa fonction « Community Hype », qui sera lancée la semaine prochaine. Le modèle d’IA a été lancé en septembre et détecte les pics de discussion. La mise à jour recommandera des clips où la communauté « s’emballe », a déclaré M. Kiss.
Le lancement de la deuxième phase de la détection de la hype de la communauté vise à ouvrir une autre perspective sur ce qui constitue un « moment fort » dans un stream. Il s’agit notamment de comprendre ce que pense la communauté, qui connaît le mieux le streamer. Les communautés ont un sens aigu de ce qui compte dans une session de jeu ou un stream donné. Dans cette dernière version, lorsque la communauté s’emballe et veut se souvenir d’un moment, l’IA de Powder vous recommandera de le conserver comme clip à partager », a-t-il expliqué.
Selon l’enquête menée par Powder auprès de plus de 3 200 streamers, les créateurs passent en moyenne 53 heures par mois, soit 630 heures par an, à rechercher des moments forts et à éditer des clips. Powder prétend faire gagner aux streamers environ 10 heures par semaine ou 520 heures par an.
La startup basée en France a été fondée en 2018 par Kiss, Yannis Mangematin et Christian Navelot. Elle a levé 22 millions de dollars à ce jour.