Page du cours d'apprentissage par renforcement
Description
L’objectif de cette UE est de présenter les fondements théoriques de l’apprentissage par renforcement (RL), afin de les mettre en pratique dans des domaines variés. Une première partie du cours s’appuie sur une riche théorie mathématique (Markov Decision Process(MDP), Monte Carlo Tree Search (MCTS), ...), et permet de saisir les enjeux du domaine, elle est complétée par une deuxième partie plus pratique où l’apprentissage par renforcement se combine aux techniques d’apprentissage profond (Q-Learning, DQN, ...).
Cours
Introduction
Rappels mathématiques
Problème des bandits manchots
Concepts de base (environement, agent, état, ...)
Processus de décision markovien (MDP)
- Slides MDP
- Exercices
- Corrigés :
Équations de Bellman
Mountain Car
Méthodes Model-Free
Experience Replay
Approximation de fonctions
Monte Carlo Tree Search
Multi-Agents Reinforcement Learning (1/2)
Multi-Agents Reinforcement Learning (2/2)
Quelques réferences
- Reinforcement Learning: An Introduction by Barto and Sutton
- Foundation of Machine Learning by Mehryar Mohri, Afshin Rostamizadeh, and Ameet Talwalkar
- DeepMind Reinforcement Learning Lecture Series 2021
- Multi-agent RL Book