2.12.8 (552)

Enseignement scientifique et technique - UC6-33 : La place des bandits dans l’IA : de la résolution de problèmes à l’apprentissage par renforcement

Descriptif

Introduire les élèves à des concepts fondamentaux de l’intelligence artificielle, en adoptant une
perspective historique : des premiers travaux sur la résolution de problèmes par l’IA, les algorithmes
de jeux jusqu’à l’apprentissage par renforcement qui occupe une place essentielle dans les modèles
de fondation ou grands modèles de langues tels que chatGPT.
Les élèves apprendront comment formaliser un problème général de recherche de solutions
impliquant une séquence d’opérations ou lorsqu’un autre agent modifie le monde. En suivant le fil
historique des découvertes, les algorithmes A*, MinMax, Alpha-Beta, Monte Carlo Tree Search (MCTS)
et d’apprentissage par renforcement seront successivement présentés et testés par les élèves. Ces
algorithmes sont au cœur d’une très grande partie des réalisations en IA incluant les plus récentes.
Il apparaîtra ainsi qu’un problème essentiel est celui d’optimiser une solution face à l’incertain,
problème fondamental en particulier dans les sciences du vivant, et que la notion de « bandit » a
permis de formaliser ce problème et d’en découvrir des solutions.
Il sera souligné que les méthodes présentées sont particulièrement pertinentes pour les sciences de la
vie, de l’environnement, de l’agronomie et de l’alimentation.

Objectifs pédagogiques

Cours, TPs / Réalisation d’un projet par groupes mettant en œuvre les méthodes présentées en cours.

15 heures en présentiel

9 heures de travail personnel estimé pour l’étudiant.

effectifs minimal / maximal:

12/22

Diplôme(s) concerné(s)

UE de rattachement

Format des notes

Numérique sur 20

Pour les étudiants du diplôme Accueillis en master (erasmus et autres prog.)

Pour les étudiants du diplôme Accueillis IAE forestiers (élèves de l'Institut Agro Dijon)

Pour les étudiants du diplôme Ingénieur AgroParisTech

Vos modalités d'acquisition :

Faite sur la base du mini-projet réalisé en groupes. Mise en œuvre adaptée des méthodes présentées
en cours et capacités du système réalisé dans l’environnement simulé.

Pour les étudiants du diplôme Accueillis cursus ing 2e et 3e année (erasmus et école)

Pour les étudiants du diplôme MASTER - BIOLOGIE INTEGRATIVE ET PHYSIOLOGIE

Le coefficient de l'UE est : 1

Programme détaillé

Présentation d’une perspective historique sur le développement de l’intelligence artificielle des
années 1950 à nos jours.
Formalisation visant à la résolution de problèmes face à l’incertain.
Introduction à des algorithmes fondamentaux : A*, MinMax, Alpha-Beta, MCTS, apprentissage par
renforcement.
Les élèves réaliseront un mini-projet dans lequel un agent devra apprendre à optimiser son
comportement face à un environnement incertain.

Mots clés

Intelligence artificielle, résolution de problèmes face à l’incertain

Support pédagogique multimédia

Oui

Veuillez patienter