Meta teste un système d'intelligence artificielle qui permet aux gens de créer des parties de mondes virtuels en les décrivant, et le PDG Mark Zuckerberg a présenté un prototype lors d'un événement en direct aujourd'hui. La preuve du concept, appelée Builder Bot, pourrait éventuellement attirer plus de personnes dans les expériences de réalité virtuelle “métavers” de Meta's Horizon. Cela pourrait également faire progresser la technologie d'IA créative qui alimente l'art généré par la machine.
Dans une vidéo de démonstration préenregistrée, Zuckerberg a guidé les téléspectateurs tout au long du processus de création d'un espace virtuel avec Builder Bot, en commençant par des commandes telles que “allons à la plage”, qui invite le bot à créer un paysage 3D caricatural de sable et d'eau autour de lui. (Zuckerberg décrit cela comme «tout généré par l'IA».) Les commandes ultérieures vont de demandes générales comme la création d'une île à des demandes extrêmement spécifiques comme l'ajout de nuages altocumulus et – dans une blague se moquant de lui-même – un modèle d'hydroptère. Ils incluent également la lecture d'effets sonores comme la «musique tropicale», qui, selon Zuckerberg, provient d'une boombox créée par Builder Bot, bien qu'il puisse également s'agir d'un son de fond général. La vidéo ne précise pas si Builder Bot s'appuie sur une bibliothèque limitée de modèles créés par l'homme ou si l'IA joue un rôle dans la génération des conceptions.
Les outils d'IA text-to-art sont de plus en plus accessibles, mais principalement en 2D < p id="Ub6Pot">Plusieurs projets d'IA ont démontré la génération d'images basée sur des descriptions textuelles, notamment DALL-E d'OpenAI, GauGAN2 de Nvidia et VQGAN+CLIP, ainsi que des applications plus accessibles comme Dream de Wombo. Mais ces projets bien connus consistent à créer des images 2D (parfois très surréalistes) sans composants interactifs, bien que certains chercheurs travaillent sur la génération d'objets 3D.
Comme décrit par Meta et montré dans la démo, Builder Bot semble utiliser la saisie vocale pour ajouter des objets 3D que les utilisateurs peuvent parcourir, et Meta vise des interactions plus ambitieuses. “Vous serez en mesure de créer des mondes nuancés pour explorer et partager des expériences avec d'autres avec juste votre voix”, a promis Zuckerberg lors du discours d'ouverture de l'événement. Meta a fait plusieurs autres annonces d'IA lors de l'événement, notamment des plans pour un traducteur de langue universel, une nouvelle version d'un système d'IA conversationnelle et une initiative visant à créer de nouveaux modèles de traduction pour les langues sans grands ensembles de données écrites.
Zuckerberg a reconnu que l'interactivité sophistiquée, y compris les types d'objets virtuels utilisables que de nombreux utilisateurs de réalité virtuelle tiennent pour acquis, pose des défis majeurs. La génération d'IA peut poser des problèmes de modération uniques si les utilisateurs demandent un contenu offensant ou si la formation de l'IA reproduit les préjugés humains et les stéréotypes sur le monde. Et nous ne connaissons pas les limites du système actuel. Donc, pour l'instant, vous ne devriez pas vous attendre à voir Builder Bot apparaître sur la plate-forme de réalité virtuelle sociale de Meta, mais vous pouvez avoir un avant-goût des plans de Meta pour son avenir en matière d'IA.
Mise à jour à 12h50 HE : ajout de détails sur les annonces d'événements ultérieures de Meta.