Pourquoi mesurer plusieurs métriques pour évaluer une perception robotique ?

Réponse rapide

Une seule métrique peut masquer une erreur importante pour la mission. Précision, rappel, localisation, délai et calibration décrivent des aspects différents de la perception ; ils sont reliés à la décision du robot et ventilés par conditions pertinentes.

Mesurer plusieurs dimensions

Précision indique la proportion de détections justes, rappel les cibles retrouvées, et localisation l’écart spatial. Latence et stabilité ajoutent la dimension temporelle nécessaire à la commande.

Ventiler les résultats

Lumière, distance, vitesse, objet, météo et capteur sont séparés. Une moyenne globale peut rester élevée alors qu’une condition critique produit des erreurs systématiques.

Relier métrique et action

Un faux négatif près d’une personne n’a pas le même coût qu’une erreur sur une catégorie sans conséquence. Les seuils et le comportement de repli sont choisis avec cette analyse.

Sources et références

  1. [1] Model Evaluation — scikit-learn User Guide — scikit-learn
  2. [2] Artificial Intelligence Risk Management Framework (AI RMF 1.0) — NIST

Cette réponse vous a-t-elle été utile ?