Mentee Robotics, une entreprise de robots humanoïdes fondée par le PDG de Mobileye Amnon Shashua, l'ancien directeur de la recherche en IA de Facebook Lior Wolf et d'autres, a publié une nouvelle démonstration de bout en bout de leur MenteeBot.
Dans la dernière démo, le robot humanoïde MenteeBot aide une personne à faire ses courses, offrant des services aux personnes à mobilité réduite. L'ensemble du processus semble très fluide et cohérent.
Le robot commence par demander poliment comment il peut aider. Un utilisateur en fauteuil roulant demande au robot de pousser un chariot de courses et de le suivre. Cela suggère une application potentielle dans les centres commerciaux ou les magasins de détail.
Après avoir compris l'instruction, le robot répond qu'il va chercher un chariot, mais attend que l'utilisateur en fauteuil roulant commence à bouger avant de s'approcher du chariot. Le robot prend un certain temps pour reconnaître, planifier la méthode de préhension et prendre des décisions avant de lever les bras pour saisir les poignées du chariot comme un humain. L'équipe d'ingénierie a développé des moteurs spécialisés pour ces mains dextres.
Pendant le processus d'achat, la démarche de MenteeBot est très naturelle, avec une sensation détendue qui serait difficile à imiter. Les interactions subtiles mais précises entre le robot et l'humain sont particulièrement impressionnantes.
Chaque fois que l'acheteur s'arrête pour ajouter de nouveaux articles au chariot, MenteeBot pousse le chariot dans une position appropriée et s'arrête à temps pour éviter de heurter le fauteuil roulant. Après que les articles sont jetés dans le chariot, le robot attend que la personne avance un peu avant de continuer à suivre.
Une fois les courses terminées, l'utilisateur en fauteuil roulant se tourne vers une armoire (qui pourrait représenter un coffre de voiture). MenteeBot gare le chariot dans une position appropriée pour le déchargement.
Cette dernière démonstration met une fois de plus en valeur les excellentes capacités de "vision 3D" de MenteeBot. Grâce à une perception précise, le robot peut identifier divers obstacles et cibles dans l'environnement d'achat, y compris la détection et l'analyse en temps réel du chariot de courses, de l'utilisateur en fauteuil roulant et de l'environnement.
Amélioré par des algorithmes efficaces de planification de trajectoire et d'ajustement en temps réel, MenteeBot peut suivre de près sans collisions ni retards. Sa capacité à prendre des décisions autonomes pendant les courses, comme quand s'arrêter ou se déplacer, repose sur des algorithmes d'IA avancés et des capacités de traitement de données en temps réel.
Une grande partie de ces progrès est largement due aux améliorations apportées dans le simulateur NVIDIA Isaac Lab.
Cette solution de compagnon de shopping est née d'une séance de réflexion entre Mentee Robotics et un détaillant mondial, offrant une façon innovante d'améliorer l'expérience client, en particulier pour ceux ayant des besoins spéciaux.
L'entreprise déclare que MenteeBot V3, équipé d'une batterie détachable, sera lancé plus tard cette année.
Plus tôt en juillet, MenteeBot a également publié une nouvelle vidéo démontrant les bonnes capacités du robot en matière de compréhension du langage naturel, de navigation et de contrôle de l'équilibre. Dans la vidéo, le robot pouvait suivre, reculer, tourner et même marcher de côté comme un crabe dans une pièce.
Mentee Robotics prévoit de lancer un prototype prêt pour la production au premier trimestre 2025. Bien que le prix reste inconnu, ils espèrent qu'il sera "abordable" pour le marché.