link Source : openclassrooms.com
list 3 séquences
assignment Niveau : Intermédiaire
chat_bubble_outline Langue : Français
card_giftcard 360 points
Avis de la communauté
-
starstarstarstarstar
Voir l'avis

Les infos clés

credit_card Formation gratuite
verified_user Certification payante
timer 36 heures de cours

En résumé

Lorsqu'on réalise un calcul sur des données massives, on a parfois besoin du résultat dans la journée, dans l'heure, mais bien souvent c'est plutôt... dans le dixième de seconde qui suit ! Lorsque des flux massifs de données hétérogènes nous parviennent, comment les exploiter sans être submergés ? C'est tout l'enjeu du traitement de données temps réel.

Au quotidien, nos actions génèrent des quantités massives de données dont la valeur réside dans le fait qu'elles soient transmises et décortiquées le plus rapidement possible : une voiture sans chauffeur doit pouvoir éviter des obstacles détectés par l'un de ses milliers de capteurs ; un site d'achats en ligne affichera des recommandations personnalisées en fonction des pages visitées juste avant ; une alerte doit être lancée lorsqu'un serveur tombe en panne dans un cluster de calcul comprenant plusieurs centaines de machines. La rapidité à laquelle il faut réagir à ces évènements exige de concevoir des architectures distribuées dédiées… et c'est ce que nous allons voir dans ce cours ! Vous y apprendrez comment les Data Architects conçoivent, déploient et administrent des plateformes de gestion de flux de données temps réel avec Kafka et Storm.

Ce cours a été créé en partenariat avec l'école CentraleSupélec

À la fin de ce cours, vous :

  • Comprendrez le rôle et les enjeux du temps réel dans les problèmes de Big Data
  • Saurez déployer une plateforme de gestion de messages
  • Serez en mesure de déployer une solution de traitement de données temps réel

more_horiz Lire plus
more_horiz Lire moins
dns

Le programme

Prérequis

Ce cours fait partie du parcours Data Architect et nécessite une bonne formation en informatique. Pour en profiter pleinement, n'hésitez pas à vous rafraîchir la mémoire, avant ou pendant le cours, sur :

  • La programmation objet (Java, Scala, Python, Ruby, C++ ou autre) et la parallélisation.
  • L'environnement Unix, la gestion de la mémoire et des transferts de données, les réseaux.

    
Partie 1 - Passez à la vitesse supérieure avec le temps réel

1. Comprenez les enjeux et les contraintes liés au traitement de données temps réel
2. Découvrez quelques scénarios d'usage des données temps réel
Quiz : Partie 1

Partie 2 - Déployez une plateforme distribuée de streaming

1. Métamorphosez vos applications temps réel avec Kafka
2. Créez votre première application avec Kafka
3. Déployez et administrez un cluster Kafka

Partie 3 - Traitez des flux de données massives en temps réel

1. Démarrez sur de bonnes bases avec Storm
2. Développez des topologies Storm en pratique
3. Déployez Storm en production

Certificat de réussite

record_voice_over

Les intervenants

Régis Behmo
Expert en machine learning, développeur fullstack, grimpeur invétéré et gros, très gros amateur de nouilles chinoises.

store

Le concepteur

CentraleSupélec
CentraleSupélec is the result of the merger of the Ecole Centrale Paris and the Supélec. The collaboration between the two Colleges of engineering begun in 1969 with the introduction of the joint competitive entrance exam. Since 2009, the Ecole Centrale Paris and Supélec have continually strengthened their partnerships and collaborations with the aim of encompassing the whole of their activities (engineering education, research and post graduate programs) and confirmed their shared values of excellence, innovation, entrepreneurship, internationalization and leadership. Today CentraleSupélec aims to become a reference in the field of engineering and systems sciences and a leading engineering College in the area of higher education and research, ranked amongst the best institutions in the world.
assistant

La plateforme

OpenClassrooms

OpenClassrooms (anciennement le Site du Zéro ou SdZ), est un site web qui propose des cours autour de l'informatique, des sciences et de l'entrepreneuriat.

Les cours en ligne peuvent être réalisés aussi bien par l'équipe du site, des professeurs d'universités ou de grandes écoles partenaires que par ses membres.

Aujourd'hui, les cours sont disponibles dans plusieurs format : MOOC (Massive Open Online Course), texte web, e-book, livre et en vidéo. L'entreprise délivre des certifications pour certains cours, dont une reconnue par l'état, en partenariat avec IESA multimédia.

Vous êtes le concepteur de ce MOOC ?
Quelle note donnez-vous à cette ressource ?
Contenu
5/5
Plateforme
5/5
Animation
5/5