Téléchargez le parcours au format PDF
Public concerné
Data analysts, ingénieurs de données, data scientists, architectes de données, chefs de projets.
Objectifs de formation
A l'issue de cette formation, vous serez capable de :
- Décrire la puissance de BigQuery pour réaliser des analytiques
- Concevoir des tables optimisées (partitionnement)
- Exécuter des requêtes optimales pour maîtriser les coûts
- Utiliser BigQuery avec Google Storage, Looker Studio, Bigtable
- Développer avec BigQuery et Python
- Collaborer en tant qu'équipe pour développer rapidement des data stories.
Programme de votre formation
-
#
M2I START AVANT VOTRE FORMATION
Contextualisation du projet de formation et prise en compte des besoins de chacun
- Positionnement initial de l’apprenant par rapport aux objectifs
- Définition des priorités et des objectifs personnels de l’apprenant
- Vidéos de mise en situation
- Accès au Chat interactif myM2i pour interagir avec les membres de son groupe
-
#
M2I LIVE VOTRE FORMATION ANIMÉE PAR NOTRE EXPERT ¹
Programme
Jour 1
Introduction
- Qu'est-ce que Google BigQuery: un moteur SQL serverless et distribué
- Possibilités de BigQuery
- Architecture de BigQuery
- Intégration avec Google Cloud Platform
- Structure des coûts et bonnes pratiques de maîtrise des coûts
- Sécurité et compliance
Exemples de travaux pratiques (à titre indicatif)
- Analyse et visualisation d'un premier jeu de données avec BigQuery
Travailler avec BigQuery
- Opérations CRUD
- Autres opérations : EXCEPT, REPLACE, sous-requêtes avec WITH, agrégation, HAVING, DISTINCT, jointures...
- Sauvegarder et partager des requêtes
Exemples de travaux pratiques (à titre indicatif)
- Requêtes diverses sur de multiples jeux de données
Types de données, fonctions, opérateurs
- Types numériques et fonctions
- Travailler avec le type booléen
- Fonctions sur chaînes de caractères
- Travailler avec :
- Les Timestamp
- Des coordonnées spatiales
- Les données JSON
Exemple de travaux pratiques (à titre indicatif)
- Mise en pratique sur des jeux de données
Jour 2
Scripting Bash avec BigQuery
- Créer des jeux de données et tables
- Exécuter des requêtes
- Objets BigQuery
Exemple de travaux pratiques (à titre indicatif)
- Mise en pratique
Optimiser la performance et les coûts
- La performance dans BigQuery
- Partitionner les tables pour diviser les coûts et délais
- Mesurer et dépanner les problèmes de performance
- Améliorer le temps d'exécution des requêtes
- Optimiser l'accès aux données et leur stockage
- Cas particulier des requêtes en lots (batch queries) et des chargements de fichiers
Exemple de travaux pratiques (à titre indicatif)
- Mise en pratique à travers un comparatif de performance de données partitionnées vs non-partitionnées
Chargement, visualisation, et collaboration dans BigQuery
- Sourcing des données
- Spécifier un schéma de donnée
- Copier dans une nouvelle table
- Data management : DDL et DML
- Charger des données efficacement
- Requêtes fédérées
- Sources de données externes
- Requêtes SQL sur des données hébergées dans Cloud Bigtable
- Utilisation de drivers JDBC / ODBC
- Transferts et exports
- Visualisation des données, création de tableaux de bord avec Looker Studio
- Utiliser Dataflow pour lire/écrire dans BigQuery
- Travailler avec des données locales (on-premises) et méthodes de migration
- Travailler en équipe avec les data canvas
Exemples de travaux pratiques (à titre indicatif)
- Création et requête de tables à partir de données dans GCS, Bigtable, MySQL
Jour 3
Requêtage avancé
- Réutilisation des requêtes, paramétrage, UDF
- SQL avancé
- Fonctions statistiques
Exemple de travaux pratiques (à titre indicatif)
- Mise en pratique
Développer avec BigQuery
- Développer de façon programmatique
- Accéder à BigQuery via l'API REST
- Manipulation des données
- Utiliser Google Cloud Client Library
- Requêtage avec ces librairies
- Accéder à BigQuery avec des outils de data science (Jupyter, R, Cloud Dataflow)
- Incorporation de données dans Google Slides à partir de BigQuery
Exemples de travaux pratiques (à titre indicatif)
- Exécution et planification de programmes en Python intégrant des requêtes sur BigQuery
Jour 4
Machine learning avec BigQuery
- Qu'est-ce que le machine learning
- Construire un modèle de régression et de classification
- Personnaliser BigQuery ML
Exemple de travaux pratiques (à titre indicatif)
- Mise en pratique
Administrer et sécuriser BigQuery
- Sécurité de l'infrastructure
- IAM
- Administrer BigQuery
- Disponibilité, récupération après panne, chiffrement
- Conformité réglementaire
Exemple de travaux pratiques (à titre indicatif)
- Mise en pratique
Le contenu de ce programme peut faire l'objet d'adaptation selon les niveaux, prérequis et besoins des apprenants.
-
#
M2I BOOST APRÈS VOTRE FORMATION
Réactivation et consolidation des acquis en situation de travail
- 30 jours d’accompagnement personnalisé sur myM2i inclus ²
- Ressources Boosters (Abonnement au M2i’Mag Soft Skills, formations offertes, invitations aux conférences d’actualité…)
- ¹ Les actions et les outils présentés dans ce programme le sont à titre indicatif et peuvent faire l’objet d'adaptation selon les niveaux, prérequis et besoins des apprenants. Les compétences clés de ce programme sont traitées à raison d'une compétence par demi-journée de formation.
- ² Sur myM2i, pendant 30 jours post-fin de formation, les apprenants disposent d’une messagerie sécurisée pour échanger, dans la limite de 4 sollicitations, avec leur formateur.
Modalités, méthodes et moyens pédagogiques
Formation délivrée en présentiel ou distanciel* (blended-learning, e-learning, classe virtuelle, présentiel à distance).
Le formateur alterne entre méthode** démonstrative, interrogative et active (via des travaux pratiques et/ou des mises en situation).
Variables suivant les formations, les moyens pédagogiques mis en oeuvre sont :
- Ordinateurs Mac ou PC (sauf pour certains cours de l'offre Management), connexion internet fibre, tableau blanc ou paperboard, vidéoprojecteur ou écran tactile interactif (pour le distanciel)
- Environnements de formation installés sur les postes de travail ou en ligne
- Supports de cours et exercices
En cas de formation intra sur site externe à M2I, le client s'assure et s'engage également à avoir toutes les ressources matérielles pédagogiques nécessaires (équipements informatiques...) au bon déroulement de l'action de formation visée conformément aux prérequis indiqués dans le programme de formation communiqué.
* nous consulter pour la faisabilité en distanciel
** ratio variable selon le cours suivi
Modalités d’évaluation des acquis
- En cours de formation, par des études de cas ou des travaux pratiques
- Et, en fin de formation, par un questionnaire d'auto-évaluation
Accessibilité de la formation
Le groupe M2I s'engage pour faciliter l'accessibilité de ses formations. Toutes nos formations sont accessibles aux personnes en situation de handicap : les détails de l'accueil des personnes sont consultables sur la page Politique Handicap.
Modalités et délais d’accès à la formation
Les formations M2I sont disponibles selon les modalités proposées sur la page programme. Les inscriptions sont possibles jusqu'à 48 heures ouvrées avant le début de la formation. Dans le cas d'une formation financée par le CPF, ce délai est porté à 12 jours ouvrés.
