EBench Docs
¿Qué es EBench?
Benchmark de manipulación VLA en interiores: tareas de horizonte largo, manipulación precisa y manipulación móvil
EBench (Elemental Mobile Manipulation Benchmark) es un benchmark de manipulación VLA en interiores construido sobre NVIDIA Isaac Sim. Abarca tareas de horizonte largo, manipulación precisa y manipulación móvil, permitiendo una comparación justa y eficiente de las capacidades de los modelos en tareas embodied exigentes.
EBench emplea una arquitectura cliente-servidor. El servidor ejecuta Isaac Sim y expone el entorno de simulación como una caja negra. Un paquete cliente ligero puede instalarse en el propio entorno del modelo e importarse directamente para comunicarse con el servidor, evitando por completo los conflictos de dependencias.
Leer la documentación
Sección titulada «Leer la documentación»Tareas
Explora las demostraciones en vídeo de las 26 tareas de evaluación en tres familias de tareas.
Entorno y assets
Configura el servidor Isaac Sim, instala el paquete cliente y descarga los assets del benchmark.
Ejecución e integración
Inicia el servidor, envía trabajos de evaluación y conecta tu propio modelo.