Domaine
Récompense de tâche
Questions et réponses classées dans ce domaine de la robotique et de l’intelligence artificielle.
-
Qu’est-ce qu’une récompense de tâche pour un robot ?
Une récompense de tâche est une mesure numérique qui indique à un robot si une transition ou un résultat rapproche l’exécution de l’objectif défini.
-
Comment concevoir une récompense qui reflète vraiment une tâche robotique ?
Une récompense fidèle à une tâche robotique relie succès mesurable, contraintes, qualité et coût d’échec au comportement souhaité, puis est testée contre des stratégies indésirables.
-
Quelle différence entre récompense dense et récompense sparse ?
Une récompense dense fournit des indications fréquentes pendant la tâche ; une récompense sparse ne signale principalement que succès ou échec, avec exploration plus difficile mais moins d’hypothèses intermédiaires.
-
Comment intégrer la sécurité dans une récompense robotique ?
La sécurité s’intègre à une récompense par contraintes, pénalités fortes ou actions interdites, mais elle doit aussi être garantie par un contrôleur ou arbitre indépendant de l’apprentissage.
-
Comment vérifier qu’une récompense ne favorise pas un comportement indésirable ?
Pour vérifier qu’une récompense n’encourage pas un comportement indésirable, on compare score et trajectoire, cherche des raccourcis, varie scénarios, audite métriques et teste une politique de référence.