SceneSmith du MIT : 1 300 mondes 3D pour robots domestiques

SceneSmith révolutionne la manière dont les robots peuvent s’entraîner en simulant des environnements quotidiens grâce à des agents IA. Développé par le MIT et le Toyota Research Institute, ce système crée des scènes 3D comme des cuisines et des salons, permettant aux robots de pratiquer des tâches courantes avant d’être mis en service dans le monde réel. MIT CSAIL affirme que ces environnements aident à réduire le besoin de tests physiques coûteux et longs.

La technologie derrière SceneSmith repose sur l’utilisation de trois agents collaborateurs dotés de modèles de vision-langage, notamment le GPT-5.2, qui contribuent à créer des scènes réalistes et détaillées. Ces agents se chargent de la disposition des objets, de la critique de la conception pour le réalisme et de la gestion de l’ensemble du processus de création. Résultat, les robots peuvent s’exercer à des tâches comme ranger des bouteilles ou manipuler des objets, réduisant ainsi la complexité des essais physiques.

Les chercheurs ont testé le système en générant plus de 1 300 environnements uniques. Ces environnements permettent aux robots d’explorer virtuellement et de tester différents plans d’action. Les robots ont ainsi pu être évalués dans ces scènes, où les modèles IA et les humains ont reconnu les failles des plans d’action dans plus de 99% des cas.

Pour les entreprises, notamment en France, cette innovation pourrait signifier une réduction significative des coûts d’entraînement et d’optimisation des robots dans des environnements industriels et commerciaux. Les PME pourraient ainsi accélérer l’intégration de la robotique dans leurs opérations quotidiennes grâce à ces tests virtuels.

SceneSmith se démarque des autres systèmes comme Pour aller plus loin, consultez notre guide sur déployer un chatbot IA pour le service client.