Accueil    Formations    Informatique    Big Data    Data Engineering    Storm - Flux de données

Partager cette formation Télécharger au format pdf Ajouter à mes favoris

Objectifs pédagogiques

  • Mettre en oeuvre Storm pour le traitement de flux de données.

Niveau requis

Avoir connaissance d'un langage de programmation comme Java ou Python.

Public concerné

Chefs de projets, data scientists, développeurs.

Programme

Introduction

  • Présentation de Storm
    • Fonctionnalités
    • Architecture
    • Langages supportés
  • Définitions
    • Spout
    • Bolt
    • Topology

Architecture

  • Etude des composants d'un cluster Storm
    • Master node "Nimbus"
    • Worker node
  • Positionnement par rapport à un cluster Hadoop
  • Le modèle de données
  • Différents types de flux

Premiers pas

  • Configuration d'un environnement de développement
  • Installation d'un cluster Storm
  • Le projet storm-starter

Flux de données

  • Définition du nombre de flux dans un noeud
  • Création de topologies regroupants des flux entre différents noeuds
  • Communication entre flux en JSON
  • Lecture de flux d'origines diverses
    • JMS
    • Kafka

Haute disponibilité

  • Tolérance aux pannes
    • Principe de fiabilisation de master node
    • Worker node
    • Nimbus
  • Garantie de traitement des flux
    • Principe
    • Paramètres TOPOLOGY_MESSAGE_TIMEOUT_SECS et TOPOLOGY_ACKERS
  • Traitements temps réel avec Trident
  • Scalabilité
    • Parallélisme dans un cluster Storm
    • Ajouts de noeuds
    • Commande Storm rebalance

Partager cette formation Télécharger au format pdf Ajouter à mes favoris

Calendrier des sessions

11/05/2020 Paris 1 226 € HT Je m'inscris

12/10/2020 Paris 1 226 € HT Je m'inscris

21/12/2020 Paris 1 226 € HT Je m'inscris

Modalité Présentiel

Tarif indicatif : 1 226 € HT

Pour connaître les prochaines dates disponibles, en présentiel ou à distance, contactez-nous.

Contactez-nous


Modalité Présentiel

Tarif indicatif : 1 226 € HT

Pour connaître les prochaines dates disponibles, en présentiel ou à distance, contactez-nous.

Contactez-nous


Modalité Présentiel

Tarif indicatif : 1 226 € HT

Pour connaître les prochaines dates disponibles, en présentiel ou à distance, contactez-nous.

Contactez-nous


Modalité Présentiel

Tarif indicatif : 1 226 € HT

Pour connaître les prochaines dates disponibles, en présentiel ou à distance, contactez-nous.

Contactez-nous


Modalité Présentiel

11/05/2020 Sophia Antipolis 1 226 € HT Je m'inscris

12/10/2020 Sophia Antipolis 1 226 € HT Je m'inscris

21/12/2020 Sophia Antipolis 1 226 € HT Je m'inscris

Modalité Présentiel

Votre société a besoin d'une offre personnalisée ? Contactez-nous

Faites-nous part de votre projet de formation, nous sommes là pour vous guider.

Contactez-nous