data engineering

Lakehouse moderne avec Microsoft Fabric et Databricks

Comparez Fabric et Databricks sur un même besoin analytique. Examinez ingestion, tables Delta, calcul, sécurité et consommation BI pour produire un choix d’architecture argumenté et un pilote mesurable.

2 jours · 14 hAvancéHybride

Pour qui ?

Architectes data, data engineers, responsables plateforme data, chefs de projet data.

Prérequis

Connaissance des bases data warehouse, BI ou integration de donnees.

Des compétences à mettre en pratique

Objectifs pédagogiques

  • Comprendre les principes d'une architecture lakehouse
  • Comparer les usages de Microsoft Fabric et Databricks
  • Choisir une trajectoire d'industrialisation data adaptee

Votre progression, jour après jour

Programme détaillé

4 séquences · 14 heures indicatives · ateliers et évaluation

Télécharger le programme (PDF)

Le cas fil rouge

Choisir une architecture lakehouse pour réunir reporting commercial et préparation des données destinées à l'IA.

Préparer votre formation et découvrir la méthode

Préparer la formation

SQL, entrepôts de données et stockage cloud ; dossiers d'architecture et démonstrations sur un environnement préparé.

Apports illustrés, exercices progressifs, ateliers sur un cas fil rouge et retour argumenté sur les productions. Les ateliers et l'évaluation font partie des heures indiquées.

Jour 01Relier lakehouse et besoins analytiques7 h · 2 séquences avec mise en pratique

Séquence 1 · 3 h 30

Relier lakehouse et besoins analytiques

  • Comparer entrepôt, lac et lakehouse sur transactions, formats et usages.
  • Organiser couches brutes, nettoyées et métier sans duplication inutile.
  • Identifier besoins SQL, notebooks, BI et apprentissage automatique.
  • Relier couches bronze, silver et gold aux exigences de qualité, de conservation, de requêtage et de gouvernance.
Notions et méthodes en détail
  • Relier fichiers, tables transactionnelles et consommation aux besoins de fraîcheur et de gouvernance.
  • Comparer bronze, silver et gold ; définir qualité et traçabilité entre couches.
  • Examiner transactions, historique et évolution de schéma sur une petite table Delta.

Atelier prévuClasser les données d'une entreprise fictive et placer chaque transformation sur une architecture cible, avec critères de qualité.

Livrable attenduSchéma d’architecture cible et matrice des besoins.

Vérification en atelierChaque couche possède grain, propriétaire et critère de publication.

Pour aller plus loin

Comparer entrepôt, lac et lakehouse sur un cas associant BI, données semi-structurées et entraînement de modèles.

Séquence 2 · 3 h 30

Explorer Microsoft Fabric

  • Situer OneLake, lakehouse, warehouse, pipelines et modèles sémantiques.
  • Suivre une ingestion jusqu'à une table exploitable en reporting.
  • Examiner espaces de travail, permissions et dépendances de capacité.
  • Examiner le chemin d’accès aux tables, la propagation des permissions et les dépendances d’actualisation entre stockage et modèle sémantique.
Notions et méthodes en détail
  • Suivre un flux vers un lakehouse Fabric puis une table consommée dans un rapport.
  • Distinguer OneLake, raccourci et copie ; repérer droits et dépendances de la source.
  • Comparer notebook et pipeline ; identifier besoins de capacité et supervision.

Atelier prévuDécrire puis observer une chaîne fichier vers indicateur ; relever les contrôles d'accès et les points de surveillance nécessaires.

Livrable attenduParcours de données Fabric documenté et grille de dimensionnement.

Vérification en atelierLe parcours jusqu’au rapport explicite accès et points de contrôle.

Pour aller plus loin

Définir les droits, la séparation des espaces et une stratégie de rafraîchissement ; tester les hypothèses de capacité sur un petit scénario.

Jour 02Explorer Databricks7 h · 2 séquences avec mise en pratique

Séquence 3 · 3 h 30

Explorer Databricks

  • Situer tables Delta, traitements Spark et tâches orchestrées.
  • Examiner catalogage, traçabilité et permissions avec Unity Catalog.
  • Comparer ingestion, SQL analytique et notebooks sur le même cas métier.
  • Relier tables Delta, calcul, orchestration et gouvernance du catalogue ; comprendre transactions, évolution de schéma et historique.
Notions et méthodes en détail
  • Explorer notebook Spark, table Delta et job planifié sur le même scénario.
  • Examiner catalogue, schéma et permissions ; séparer droits de calcul et droits sur les données.
  • Observer partitionnement et lecture trop large ; expliquer le travail de calcul induit.

Atelier prévuConstruire une matrice de correspondance avec Fabric et identifier les écarts qui empêchent une migration automatique.

Livrable attenduPipeline Databricks et relevé des performances avant/après.

Vérification en atelierL’analyse relie organisation et coût sans généraliser un seul benchmark.

Pour aller plus loin

Comparer une stratégie de partitionnement et une optimisation de lecture sur des requêtes représentatives, sans généraliser les mesures d’un seul cas.

Séquence 4 · 3 h 30

Arbitrer la trajectoire d'adoption

  • Comparer compétences disponibles, intégration, coûts et exigences de gouvernance.
  • Définir un pilote mesurable et des critères de sortie.
  • Préparer migration progressive, réversibilité et responsabilités d'exploitation.
  • Comparer coût complet, compétences requises, intégration Microsoft, portabilité et gouvernance opérationnelle.
Notions et méthodes en détail
  • Comparer BI, compétences, isolation, exploitation et dépendance fournisseur dans une grille pondérée.
  • Estimer stockage, calcul, licences et administration avec hypothèses, sans tarif garanti.
  • Définir pilote, preuves de réussite et conditions de réversibilité des données.

Atelier prévuPrésenter deux options d'architecture avec hypothèses de consommation, risques, étapes de migration et décision motivée.

Livrable attenduMatrice de décision argumentée et feuille de route de migration.

Vérification en atelierLa recommandation comporte un test susceptible d’invalider le choix.

Pour aller plus loin

Construire une migration par lots avec coexistence, critères de bascule, retour arrière et preuve de cohérence des indicateurs.

Mettre vos acquis à l’épreuve

Évaluation finale prévue

Mise en situation individuelle et restitution commentée, incluses dans la dernière séquence. Durée indicative : 60 minutes.

Critères de réussite
  • Le choix repose sur des besoins et des contraintes explicites.
  • Les capacités des deux plateformes sont comparées sans promettre leur équivalence.
  • Le pilote comporte des critères mesurables de réussite et d'arrêt.

Adaptation et validation pédagogique. Version enrichie proposée, à valider par le formateur. Répartition pédagogique proposée sur une base de 7 heures par jour, pauses exclues. À ajuster avec le formateur au positionnement initial. Les approfondissements « Pour aller plus loin » sont sélectionnés par le formateur selon le positionnement et le temps disponible ; ils ne constituent pas des heures supplémentaires garanties.

Les ateliers décrivent les travaux prévus. Leurs fichiers, corrigés et évaluations en ligne sont à préparer, sauf ressources explicitement disponibles dans le module pilote.

Références pour approfondir

Documentation des organismes et éditeurs. La progression et les ateliers sont une rédaction originale pour Beyond Expertise.

Pour obtenir plus de détails ou le programme détaillé, contactez le centre Beyond Expertise.

Contacter le centre

Accès, accompagnement et reconnaissance

Le centre doit confirmer les prérequis, le programme final, les dates, les horaires et le tarif avant inscription. Le délai d’accès dépend des disponibilités et du besoin. L’ouverture d’une session et la disponibilité d’un cours e-learning sont confirmées avant inscription.

Les ateliers, méthodes et évaluations du programme sont proposés pour validation pédagogique. Les supports effectivement disponibles sont indiqués dans la section « Contenu e-learning ».

Le parcours ne délivre pas de diplôme ni de certification professionnelle. Aucune éligibilité CPF ou prise en charge n’est garantie. Toute préparation à un examen externe devra faire l’objet d’informations et d’habilitations vérifiées.

Contenu e-learning

Cours e-learning à préparer

Les objectifs et prérequis sont disponibles. Les leçons, supports et évaluations de ce parcours ne sont pas encore intégrés dans cet espace. Le programme détaillé ci-dessus décrit les apprentissages et les ateliers prévus.

Origine des informations et statut du programme

Durée, niveau, modalités, objectifs et tarif relevés sur le site officiel le 11 septembre 2026. Le déroulé détaillé a été enrichi par Beyond Expertise. Validation pédagogique du formateur à réaliser avant animation.

Consulter la fiche du site officiel