EBench Docs
Qu'est-ce qu'EBench
Benchmark de manipulation VLA en intérieur pour les tâches à long horizon, la manipulation fine et la manipulation mobile
EBench (Elemental Mobile Manipulation Benchmark) est un benchmark de manipulation VLA en intérieur construit sur NVIDIA Isaac Sim. Il couvre les tâches à long horizon, la manipulation fine et la manipulation mobile, permettant une comparaison équitable et efficace des capacités des modèles sur des tâches incarnées exigeantes.
EBench repose sur une architecture client-serveur. Le serveur exécute Isaac Sim et expose l’environnement de simulation comme une boîte noire. Un paquet client léger peut être installé dans l’environnement du modèle et importé directement pour communiquer avec le serveur, éliminant ainsi tout conflit de dépendances.
Consulter la documentation
Section intitulée « Consulter la documentation »Démonstrations
Parcourez les vidéos de démonstration des 26 tâches d’évaluation réparties en trois familles.
Environnement et assets
Configurez le serveur Isaac Sim, installez le paquet client et téléchargez les assets du benchmark.
Exécution et intégration
Démarrez le serveur, soumettez des tâches d’évaluation et connectez votre propre modèle.