Réponse rapide
Mesurer la qualité d’une reconnaissance d’objets robotique exige précision, rappel, localisation, classes confondues, inconnus, confiance, latence et effet sur l’action dans des scènes variées.
Une moyenne peut cacher une classe critique
Mesurez erreurs par situation et reliez-les au mouvement, à la prise ou à l’accès que la perception déclenche.
Découper les erreurs
Rapportez faux positifs, faux négatifs, confusion, taille, occlusion, distance, lumière et instance plutôt qu’une moyenne unique.
Relier au matériel
Mesurez cadence, mémoire, température, énergie, délai capteur-commande et comportement après perte ou donnée ancienne.
Tester hors laboratoire
Utilisez personnes, objets nouveaux, arrière-plans, mouvements, capteurs réels et conditions extrêmes et observez les gestes déclenchés.
Sources et références
- [1] Robotics and Autonomous Systems — NIST