Snapchat présente des outils d’IA pour des expériences de réalité augmentée en temps réel

Alors que ses rivaux comme Meta investissent massivement dans l’intelligence artificielle, Snapchat, la célèbre plateforme de médias sociaux détenue par Snap, a également annoncé ses propres fonctionnalités basées sur l’intelligence artificielle. L’entreprise, connue pour son rôle de pionnier et de promoteur des technologies de réalité augmentée (RA), proposera des effets spéciaux aux utilisateurs grâce à son Lens Studio 5.0.

La réalité augmentée superpose des effets informatisés sur des vidéos et des photos réelles. La nouvelle fonctionnalité de Snapchat promet une expérience utilisateur plus immersive et engageante grâce à son modèle d’image en temps réel. Elle permettra aux utilisateurs de saisir des messages et de produire des expériences de réalité augmentée réalistes en temps réel en appliquant des effets à leurs vidéos et images.

De nouvelles fonctionnalités d’IA générative sur Snapchat. Source : Snap

Quelles sont les expériences AR en temps réel de Snapchat ?

Les expériences AR prévues par Snapchat utilisent la puissance de l’IA générative, qui crée des effets spéciaux appelés « lentilles » qui seront mis à la disposition des développeurs AR. Ces derniers pourront ensuite utiliser ces lentilles pour créer des expériences uniques, que les utilisateurs de Snapchat pourront intégrer à leur contenu. Par exemple, les utilisateurs pourront modifier leur environnement et leurs vêtements dans les vidéos qu’ils tourneront à l’aide de ces expériences.

Lorsque vous appliquez un effet à votre photo ou vidéo, il s’ajuste automatiquement pour correspondre aux couleurs et à l’éclairage de votre contenu, pour une expérience fluide. Vous pouvez générer des objectifs personnalisés à l’aide de différentes invites de texte.

Modification des arrière-plans et des vêtements grâce à l’IA. Source : Snapchat

Lens Studio bénéficie d’une mise à niveau

Le programme de développement de Snapchat, Lens Studio, bénéficie également d’une mise à niveau en ligne avec les nouvelles fonctionnalités d’IA. La plateforme permet aux développeurs et aux artistes de créer des fonctionnalités de réalité augmentée pour les applications et les sites Web, y compris Snapchat. Avec la nouvelle mise à jour, Lens Studio dispose désormais de plusieurs outils d’IA génératifs, dont un assistant IA qui peut aider à répondre aux requêtes des utilisateurs.

De plus, les développeurs peuvent désormais générer directement des images 3D à l’aide d’invites textuelles, ce qui évite d’avoir à les modéliser manuellement. Cela peut réduire considérablement le temps et les efforts nécessaires à la création d’effets AR tout en permettant aux artistes de créer des effets plus complexes. Les nouvelles images 3D peuvent imiter les expressions des utilisateurs et les créateurs peuvent même créer des masques faciaux et des textures.

Alors que la version précédente de Lens Studio permettait des effets simples, comme placer un chapeau sur la tête d’une personne, la nouvelle version permet au chapeau de s’adapter à l’éclairage de la vidéo ou de l’image et même de se déplacer avec la tête de la personne.

En plus de cela, la nouvelle version inclut des effets de machine learning immersifs et de visage, qui permettent aux créateurs de modifier le visage de l’utilisateur en fonction d’une image téléchargée ou d’une invite écrite. Le machine learning immersif peut transformer l’environnement ainsi que le visage et le corps des utilisateurs en temps réel.

Créer des modèles d’IA personnalisés avec le nouveau Lens Studio. Source : Snapchat

Avec ses nouvelles fonctionnalités génératives basées sur l’IA, Snapchat entend s’imposer face à ses concurrents et attirer davantage d’utilisateurs grâce à des effets uniques. L’entreprise cible également les développeurs en simplifiant et en accélérant le processus de conception des fonctionnalités AR. L’entreprise prévoit également d’intégrer davantage de fonctionnalités IA à la plateforme à l’avenir, comme la conception de tenues entières en AR.

Quant à la disponibilité des fonctionnalités déjà annoncées, les nouvelles centrées sur l’utilisateur seront disponibles pour les utilisateurs réguliers dans les mois à venir, tandis que celles conçues pour les créateurs seront publiées d’ici la fin de l’année.