- Sur www.coursera.org
Big Data Analysis with Scala and Spark
Cours
en
Anglais
28 h
Ce contenu est noté 0 sur 5
- À son rythme
- Accès libre
- Certificat payant
- 4 séquences
- Niveau Introductif
Détails du cours
Déroulé
- Week 1 - Getting Started + Spark Basics
Get up and running with Scala on your computer. Complete an example assignment to familiarize yourself with our unique way of submitting assignments. In this week, we'll bridge the gap between data parallelism in the shared memory scenario (learned in the Para... - Week 2 - Reduction Operations & Distributed Key-Value Pairs
This week, we'll look at a special kind of RDD called pair RDDs. With this specialized kind of RDD in hand, we'll cover essential operations on large data sets, such as reductions and joins. - Week 3 - Partitioning and Shuffling
This week we'll look at some of the performance implications of using operations like joins. Is it possible to get the same result without having to pay for the overhead of moving data over the network? We'll answer this question by delving into how we can par... - Week 4 - Structured data: SQL, Dataframes, and Datasets
With our newfound understanding of the cost of data movement in a Spark job, and some experience optimizing jobs for data locality last week, this week we'll focus on how we can more easily achieve similar optimizations. Can structured data help us? We'll look...
Prérequis
Aucun.
Intervenants
Dr. Heather Miller
Research Scientist
EPFL
Éditeur
L'École polytechnique fédérale de Lausanne (EPFL) est une université de recherche située à Lausanne, en Suisse, spécialisée dans les sciences physiques et l'ingénierie.
L'École polytechnique fédérale de Lausanne est l'une des deux écoles polytechniques fédérales suisses. Elle a été fondée par le gouvernement fédéral suisse avec la mission suivante :
former des ingénieurs et des scientifiques au plus haut niveau international
être un centre national d'excellence en science et en technologie
Fournir un centre d'interaction entre la communauté scientifique et l'industrie.
L'EPFL est considérée comme l'une des universités les plus prestigieuses au monde dans le domaine de l'ingénierie et des sciences. Elle est classée 17e au classement général et 10e dans le domaine de l'ingénierie dans le QS World University Rankings 2015 ; 34e au classement général et 12e dans le domaine de l'ingénierie dans le Times Higher Education World University Rankings 2015.
Plateforme
Coursera est une entreprise numérique proposant des formations en ligne ouverte à tous fondée par les professeurs d'informatique Andrew Ng et Daphne Koller de l'université Stanford, située à Mountain View, Californie.
Ce qui la différencie le plus des autres plateformes MOOC, c'est qu'elle travaille qu'avec les meilleures universités et organisations mondiales et diffuse leurs contenus sur le web.
Ce contenu est noté 4.5 sur 5
(aucun avis)Ce contenu est noté 4.5 sur 5
(aucun avis)Complétez cette ressource pour donner votre avis