Comment contrôler la qualité de plusieurs annotateurs en robotique ?
Mise à jour28 août 2026
Lecture1 minute
Réponse rapide
Contrôler plusieurs annotateurs consiste à comparer leurs décisions sur un échantillon commun, discuter les écarts et mesurer la cohérence de la règle.
Séparer règle et préférence
Guide illustré, exemples limites et arbitrage documenté réduisent les différences qui viennent d’une interprétation personnelle.
Défaut sur une soudure
Trois annotateurs marquent la même image ; un expert tranche les cas où défaut et reflet se confondent, puis le guide est précisé.Un accord élevé peut refléter une consigne trop vague
Cas rares, biais de groupe et évolution des règles sont réévalués.
Sources et références
- [1] Metrics and scoring: quantifying the quality of predictions — scikit-learn