Réponse rapide
Évaluer une autonomie combine exigences, scénarios représentatifs, réussite, refus, temps d’intervention et comportement en défaut. Domaine nominal, limites, transitions et reprises sont testés sur matériel et environnement autorisés. Une campagne mesure aussi erreurs rares et conditions de réévaluation, plutôt qu’un simple taux de réussite.
Construire une matrice de situations
Objets, lumière, surface, charge, communication, énergie et présence humaine varient avec résultat attendu, abandon, données et rôle opérateur définis. Cas rares et échecs contrôlés restent dans la matrice. Version, carte et configuration sont conservées.
Mesurer les décisions et leurs coûts
Erreurs par classe, faux engagements, refus justifiés, récupérations, interventions et temps sont ventilés par domaine. Moyenne globale peut masquer défaut critique rare. Les métriques sont liées à seuils et conséquences, pas à un score unique.
Autoriser sous conditions
Mise en service décrit limites, surveillance et arrêt, puis impose réévaluation après changement. Déploiement progressif observe écarts sans transformer absence d’incident en garantie générale. Décision reste conditionnelle au domaine approuvé.
Sources et références
- [1] Robotics and Autonomous Systems — NIST