En une seule ligne, cet outil d'intelligence artificielle crée instantanément des mondes 3D complets.

Un nouvel outil d'intelligence artificielle développé par des chercheurs de Tencent a fait les gros titres pour sa capacité à générer des mondes 3D entiers avec une seule invite. Le système, appelé Worldclaw, permet aux utilisateurs de créer des environnements 3D détaillés, explorables et modifiables basés sur des entrées textuelles.

Dans un premier temps, l'IA entre dans une phase de planification où elle interprète la demande de l'utilisateur pour déterminer les caractéristiques du terrain et les éléments stylistiques. Elle sélectionne les catégories initiales pour les actifs et le terrain, jetant les bases de la disposition du monde. Ensuite, le modèle passe à la génération d'actifs, produisant des objets spécifiques tels que des arbres couverts de neige, des roches et des formations de glace adaptés à l'environnement prévu. Une carte 2D est également créée pour servir de référence pendant la dernière étape. Dans la troisième phase, le monde 3D est divisé en régions, permettant un placement logique des actifs dans chaque zone.

Par exemple, Worldclaw pourrait placer un village de pêcheurs près d'un lac dans un paysage enneigé, en veillant à ce que les objets placés là s'alignent sur le thème. Une fois toutes les régions peuplées, le système revisite les résultats pour affiner les positions, les tailles et les ajustements du terrain des objets afin d'améliorer l'intégration et d'éviter les collisions. Worldclaw a déjà été utilisé pour générer une variété d'environnements 3D, y compris un village médiéval avec un terrain diversifié comportant des forêts, des montagnes enneigées, des rivières, des lacs et un désert. Un autre exemple est une île servant de cachette de pirates.

Ces créations démontrent la capacité de l'outil à gérer des détails environnementaux complexes, qui nécessitent traditionnellement un effort manuel considérable. Malgré ces réalisations, Worldclaw reste en mode prévisualisation.

Les développeurs expliquent qu'en automatisant des tâches telles que la recherche d'actifs, la sélection de matériaux et le travail d'ombrage, le principal défi de la création de contenu 3D passe de l'exécution technique à la vision créative. Ce changement pourrait révolutionner la façon dont les environnements numériques sont conçus, en particulier pour les développeurs de jeux et les architectes qui consacrent souvent beaucoup de temps à la modélisation manuelle. À mesure que la technologie évolue, elle peut offrir une personnalisation et une efficacité encore plus grandes, brouillant davantage les frontières entre la créativité humaine et le contenu généré par la machine.