Les infos clés
En résumé
Ce cours vise à développer un savoir-faire en matière de conception et développement d'algorithmes pour la prise de décision par un ou plusieurs drones. Ce cours se focalise essentiellement sur une famille de méthodes connues sous le nom générique d'apprentissage par renforcement. Cette famille de méthodes a récemment inspiré de nombreux succès dans des domaines aussi variés que la robotique, le véhicule autonome ou les jeux stratégiques.
À la fin de ce cours, vous serez capable de :
- Décrire le processus de prise de décision autonome par un drone
- Modéliser la prise de décision par un drone
- Décrire les principes l'apprentissage par renforcement profond
- Mettre en œuvre l'apprentissage par renforcement profond avec un drone
Les prérequis
Pour suivre ce cours, il est nécessaire d'avoir des connaissances en :
-
calcul différentiel, probabilités et statistiques — pour cela vous pouvez suivre le cours "Maîtrisez les bases des probabilités" ;
-
algorithmique (concevoir et programmer un algorithme simple) — je vous invite donc à suivre le cours "Découvrez le fonctionnement des algorithmes" ;
-
réseaux de neurones artificiels et profonds — je vous recommande le cours "Initiez-vous au Deep Learning".
La plateforme que nous utiliserons est en anglais donc un niveau B2 de compréhension écrite en anglais est également recommandé.
Le programme
Partie 1 - Décrivez le processus de prise de décision autonome par un drone
1. Décrivez la plateforme de prise de décision par un drone autonome
2. Formalisez la prise de décision autonome par un drone
Quiz : Décrivez formellement la prise de décision autonome par un drone
Partie 2 - Modélisez la prise de décision par un drone
1. Décrivez le processus stochastique à contrôler
2. Formalisez mathématiquement le problème de prise de décision
3. Spécifiez les lois de contrôle, les mesures d'information, et les indicateurs de performance
Quiz : Modélisez la prise de décision par un drone
Partie 3 - Abordez l'apprentissage par renforcement profond avec un drone
1. Approchez linéairement une fonction
2. Approchez une fonction de façon non-linéaire
3. Concevez un algorithme d'apprentissage par renforcement profond
Quiz : Mettez en oeuvre l'apprentissage par renforcement profond
Partie 4 - Expérimentez l'apprentissage par renforcement profond avec un drone
1. Déployez votre premier algorithme d'apprentissage via Gym
2. Connectez un réseau de neurones à l’algorithme d’apprentissage par renforcement
Quiz : Expérimentez l'apprentissage par renforcement profond avec un drone
Certificat de réussite
Les intervenants
Jilles Steeve Dibangoye
Maître de conférences à l’INSA Lyon au sein du département télécommunications, services et usages.
Le concepteur
Le groupe INSA - Lyon, Rennes, Rouen, Strasbourg, Toulouse et Centre Val de Loire - est le 1er groupe français d’écoles publiques d’ingénieur. 10 % des ingénieurs diplômés en France sortent des six INSA chaque année. Près de 100 % des diplômés sont embauchés en moins de trois mois.
Expert dans son domaine de spécialisation, l'ingénieur INSA s'appuie sur de solides connaissances de base tant scientifiques que technologiques. Destiné à encadrer et à animer des groupes d'individus, il doit disposer d'un excellent bagage en sciences humaines et sociales.
Le recrutement se fait majoritairement au niveau du baccalauréat (70%). D'autres possibilités d'intégrer les INSA existent au cours du cursus à partir d'autres établissements d'enseignement supérieur français ou étrangers.
Le groupe INSA a la volonté d'augmenter l'efficience des processus de formation en prenant notamment en compte les besoins de publics diversifiés tels que les sportifs de haut niveau, les étudiants étrangers, les étudiants handicapés, les stagiaires de FC, mais aussi - et ils sont nombreux - tous les étudiants qui souhaitent apprendre autrement, à leur rythme, avec plus d'autonomie.
Les TICE ne sont bien sûr qu'un des outils au service de cette vision. Leur usage est également l'occasion pour tous ces apprenants de développer de nouvelles compétences en relation avec leur travail futur.
La plateforme
OpenClassrooms (anciennement le Site du Zéro ou SdZ), est un site web qui propose des cours autour de l'informatique, des sciences et de l'entrepreneuriat.
Les cours en ligne peuvent être réalisés aussi bien par l'équipe du site, des professeurs d'universités ou de grandes écoles partenaires que par ses membres.
Aujourd'hui, les cours sont disponibles dans plusieurs format : MOOC (Massive Open Online Course), texte web, e-book, livre et en vidéo. L'entreprise délivre des certifications pour certains cours, dont une reconnue par l'état, en partenariat avec IESA multimédia.
