Cette formation permet d’apprendre le fonctionnement et l’utilisation de SPARK pour optimiser vos calculs.

Objectifs

  • Appréhender le fonctionnement et l’architecture de Spark 
  • Faire de la programmation parallèle avec Spark sur un cluster 
  • Optimiser une application Spark 

3 jours

  • Programme
  • Public et Prérequis
  • Pédagogie
  • Dates et Tarifs
  • Nous contacter

SPARK – Optimiser les calculs

Introduction

  • Qu’est-ce que SPARK
  • Son fonctionnement
  • Langages de programmation utilisable

Premiers pas

  • Utilisation de SPARK avec les langages de programmations Scala ou Python
  • Gestion du cache

Règles de développement

  • Travaux pratiques en Java & Python
  • Notion de contexte SPARK
  • Les méthodes de création des RDD (Resilient Distributed Dataset)
  • Manipulations dans les RDD

Cluster

  • Les différents cluster managers
  • Leurs architecture
  • Définitions : Driver program, Cluster manager etc..
  • Travaux pratiques avec SPARK et Amazon EC2
  • Observations depuis l’interface Web

Intégration Hadoop

  • Création et exploitation d’un cluster SPARK / YARN

Support Cassandra

  • Cassandra ?
  • Travaux pratiques depuis SPARK
  • Travaux SPARK s’appuyant sur Cassandra

Public 

La formation s’adresse à toute les personnes voulant utiliser SPARK.

Prérequis 

Avoir des connaissances sur Hadoop, ainsi que des compétences en programmation Java | Python

Modalités d’évaluation

L’évaluation des acquis se fait tout au long de la session au travers des multiples exercices à réaliser (50 à 70% du temps).

Compétences du formateur

Notre formation est animée par un expert reconnu dans son domaine possédant une expérience sur le terrain significative et des compétences pédagogiques reconnues.

Moyens pédagogiques et techniques

  • Ordinateur (PC / MAC), vidéoprojecteur, aides audiovisuelles, documentation et support de cours, exercices pratiques d’application et corrigés des exercices pour les stages pratiques, études de cas ou présentation de cas réels pour les séminaires de formation.

A l’issue de chaque stage ou séminaire, ESIC fournit aux participants :

  • Un questionnaire d’évaluation de la session
  • Une feuille d’émargement par demi-journée de présence
  • Une attestation de fin de formation

Dates 

Rien de 20 juillet 2019 à 19 juillet 2020.

( Sous réserve d’un effectif nécessaire pour l’ouverture de session )

Tarif

1650€HT/personne.

Intra-entreprise et sur-mesure

Nos consultants vous accompagnent pour adapter ce programme de formation à votre contexte.

Fermer le menu