Amazon crée une nouvelle plateforme de simulation centrée sur l’utilisateur pour développer des agents d’IA incarnés
Amazon crée une nouvelle plateforme de simulation centrée sur l’utilisateur pour développer des agents d’IA incarnés

Amazon crée une nouvelle plateforme de simulation centrée sur l'utilisateur pour développer des agents d'IA incarnés
Crédit : Gao et al.

Les robots alimentés par l'IA sont généralement formés dans des environnements de simulation avant d'être testés et introduits dans des environnements réels. Ces environnements permettent aux développeurs de tester en toute sécurité leurs techniques d'apprentissage automatique sur une variété de robots et dans de nombreux scénarios possibles, sans avoir à acheter du matériel, à assembler des robots puis à les amener dans des endroits éloignés, ou à compromettre la sécurité réelle des systèmes déployés.

Amazon Alexa AI a récemment créé une nouvelle plateforme de simulation spécifiquement pour la recherche en IA incarnée, le domaine spécialisé dans le développement de robots autonomes. Cette plateforme, baptisée Alexa Arena, a été présentée dans un article prépublié sur arXiv et est accessible au public sur GitHub.

"Notre objectif principal était de développer un cadre interactif d'IA incarnée pour catalyser la création d'agents d'IA incarnés de nouvelle génération", a déclaré Govind Thattai, scientifique principal de la plate-forme Arena, à Tech Xplore. "Plusieurs plates-formes de simulation d'IA incarnée ont été proposées ces dernières années (par exemple, AI2Thor, Habitat, iGibson). Ces plates-formes prennent en charge des scènes simulées, où des agents incarnés peuvent naviguer et interagir avec des objets, mais la plupart d'entre elles ne sont pas conçues pour que les humains interagissent. avec des agents en raison du manque de centrage sur l'utilisateur », a déclaré Qiaozi Gao, qui a co-développé le framework Arena.

Comme la plupart des plates-formes de simulation disponibles ne sont pas centrées sur l'utilisateur pour collecter des données pour les interactions homme-robot, les développeurs doivent souvent mener des expériences dans le monde réel, ce qui est généralement coûteux et prend du temps. Alternativement, certaines équipes choisissent de développer un soi-disant "moteur d'inférence", un outil de calcul qui permet aux humains d'interagir directement avec un environnement simulé, mais cela nécessite également du temps et des efforts de recherche supplémentaires.

Amazon crée une nouvelle plateforme de simulation centrée sur l'utilisateur pour développer des agents d'IA incarnés
Crédit : Gao et al

Les agents incarnés doivent interagir constamment avec leur environnement, tout en apprenant et en s'adaptant à d'autres agents ou humains de manière sûre et efficace. Alors que les plates-formes de simulation actuelles se concentrent sur la décomposition et la navigation des tâches, Arena tente de combler les pièces manquantes qui entreraient inévitablement en jeu lors du déploiement et de l'évaluation en temps réel des robots collaboratifs.

Arena est complété par des fonctionnalités centrées sur l'utilisateur pour non seulement renforcer le développement et l'évaluation des agents EAI, mais également pour combler le fossé entre la phase de développement et de déploiement. Cela se fait en faisant de l'humain un élément indispensable du processus de développement et d'évaluation de l'EAI.

"Pour relever ces défis, nous avons créé Alexa Arena", a déclaré Suhaila Shakiah, développeur de composants Arena ML. "Notre plate-forme offre un cadre avec des capacités centrées sur l'utilisateur, telles que des visuels fluides pendant la navigation du robot, des animations et des sons d'arrière-plan continus, des points de vue dans les pièces pour simplifier la navigation de pièce à pièce et des conseils visuels intégrés dans la scène qui aident les utilisateurs humains. pour générer des instructions appropriées pour l'exécution des tâches. Ces fonctionnalités améliorent la convivialité et l'expérience utilisateur, permettant le développement et l'évaluation de l'IA incarnée par l'homme dans la boucle.

Amazon crée une nouvelle plateforme de simulation centrée sur l'utilisateur pour développer des agents d'IA incarnés
Crédit : Gao et al

Sur la plate-forme Alexa Arena, les développeurs peuvent développer et tester différents agents d'IA incarnés dotés de capacités multimodales. Ces agents peuvent interagir avec les objets ou zones pertinents dans l'environnement simulé en fonction des demandes spécifiques des utilisateurs, une capacité connue sous le nom de mise à la terre visuelle. Ils peuvent également apprendre à suivre les instructions d'utilisation en langage naturel, qui est un aspect essentiel de l'interaction homme-robot.

"Alexa Arena repousse les limites de l'interaction homme-robot", a expliqué Xiaofeng Gao, un développeur d'Arena. "Il offre un cadre interactif centré sur l'utilisateur, permettant de créer des tâches et des missions robotiques qui impliquent la navigation dans des environnements simulés multi-pièces et la manipulation d'objets en temps réel. Dans un environnement de jeu, les utilisateurs peuvent interagir avec des robots virtuels via un dialogue en langage naturel, fournissant des commentaires inestimables et aidant les robots à apprendre et à accomplir leurs tâches."

Contrairement aux autres plates-formes de simulation existantes, Alexa Arena possède une interface grandement simplifiée pour les développeurs et les utilisateurs finaux. Les utilisateurs peuvent créer des tâches et des missions spécifiques pour les robots dans l'environnement de simulation à l'aide d'astuces intégrées et de fonctionnalités qui repoussent les limites de l'interaction homme-ordinateur et de l'IA incarnée. Cela permet également de collecter plus facilement et plus efficacement les données d'interaction homme-robot, tout en entraînant les robots à s'attaquer efficacement aux tâches interactives à l'aide d'une variété d'objets et d'outils différents.

Amazon crée une nouvelle plateforme de simulation centrée sur l'utilisateur pour développer des agents d'IA incarnés
Crédit : Gao et al

La plate-forme centrée sur l'utilisateur pourrait bientôt être utilisée par les développeurs et les chercheurs du monde entier pour développer des agents d'IA incarnés hautement performants et des robots intelligents. Pendant ce temps, l'équipe prévoit d'améliorer encore Alexa Arena, en ajoutant de nouvelles fonctionnalités et des scénarios simulés.

"Nous allons maintenant continuer à améliorer la plate-forme Arena pour prendre en charge des performances d'exécution plus élevées et meilleures, plus de scènes, une collection d'objets plus riche et un plus large éventail d'interactions", a ajouté Govind. "Nous continuerons également d'investir dans le domaine général de l'IA incarnée, en développant des robots intelligents de nouvelle génération capables d'accomplir des tâches du monde réel et d'établir une communication naturelle avec les humains."

Plus d'information: Qiaozi Gao et al, Alexa Arena : une plate-forme interactive centrée sur l'utilisateur pour l'IA incarnée, arXiv (2023). DOI : 10.48550/arxiv.2303.01586

Informations sur la revue : arXiv

© 2023 Réseau Science X

Citation: Amazon crée une nouvelle plate-forme de simulation centrée sur l'utilisateur pour développer des agents d'IA incarnés (11 avril 2023) récupéré le 15 avril 2023 sur

Ce document est soumis au droit d'auteur. En dehors de toute utilisation loyale à des fins d'étude ou de recherche privée, aucune partie ne peut être reproduite sans l'autorisation écrite. Le contenu est fourni seulement pour information.




Source

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *

Scroll to Top