Utiliser des protocoles d'interaction et de la mémoire pour l'apprentissage par renforcement d'actes de communication
Résumé
Dans ce papier, nous nous intéressons à l’apprentissage par renforcement pour la communication entre agents dans les SMA. L’étude de la littérature nous a permis de mettre en évidence trois principaux problèmes. Tout d’abord il est nécessaire pour l’agent de construire les actes de communication qu’il utilise pour communiquer avec les autres agents. Ensuite il nous faut adapter les actes de communication afin de les modéliser en tant qu’actions pour leur appliquer des techniques d’apprentissage par renforcement. Enfin nous devons résoudre les problèmes liés à la non markovité des systèmes multi-agents afin de pouvoir utiliser les algorithmes usuels d’apprentissage par renforcement utilisé dans le cadre mono-agent. Nous présentons un algorithme d’apprentissage par renforcement qui permet de traiter ces trois problèmes de manière entièrement distribuée. Nous nous appuyons pour cela sur l’utilisation d’agents introspectifs capables de raisonner sur leurs actions et sur leurs états. Puis nous démontrons que nous pouvons assimiler un acte de communication à une action en nous fondant sur la théorie des actes de langage et les travaux sur les PDSMs. Enfin nous montrons comment l’utilisation d’actes de communication peut résoudre le problème de non markovité en étant toutefois complétée par l’utilisation de la mémoire de l’agent.