Numérique & IA

Formation Data Engineer – concevez des infrastructures data à grande échelle

Proposée par Jedha

Durée
150 h
Lieu
Lyon
Format
Présentiel
Niveau
Avancé

Ce que vous allez apprendre

En 150 heures, apprenez à concevoir et piloter des infrastructures data modernes avec la Modern Data Stack (Airbyte, dbt, Delta Lake, S3). Préparez-vous aux métiers de Data Engineer, Analytics Engineer ou Data Architect.

À l'issue de la formation, vous serez capable de

  • Concevoir et opérer des pipelines data et workflows robustes et scalables
  • Mettre en place des architectures lakehouse au service de l’analyse et de l’IA
  • Garantir la qualité, la traçabilité, la sécurité et la gouvernance des données dans le temps
  • Implémenter et opérer la Modern Data Stack (Airbyte, dbt, Delta Lake, S3)
  • Préparer les certifications associées à la formation

Programme

Module 1 – Data Governance

  • Principes fondamentaux de la gouvernance des données (DMBOK)
  • Évaluation de la maturité data d’une organisation et définition d’une structuration adaptée
  • Intégration des contraintes réglementaires (RGPD)
  • Rôle et usages des data catalogs au sein d’un écosystème data
  • Mise en place de la traçabilité et des responsabilités autour des données

Module 2 – Big Data

  • Principes du calcul et du stockage distribués appliqués aux architectures Big Data
  • Choix des stratégies de scalabilité: verticale vs horizontale
  • Manipulation de données volumineuses avec Spark (DataFrames et Spark SQL)
  • Analyse des performances des traitements Big Data et identification des goulots d’étranglement
  • Optimisation de l’utilisation des ressources

Module 3 – Modern Data Stack

  • Conception d’architectures ELT modernes
  • Mise en place de pipelines d’ingestion et de transformation avec dbt
  • Orchestration et conception d’architectures (batch, temps réel, event-driven) adaptées aux besoins métier avec Airflow
  • Implémentation d’architectures Lakehouse à partir de formats de tables modernes
  • Mise en œuvre de data contracts pour garantir la qualité et la stabilité des schémas

Module 4 – Data Quality CI/CD

  • Mise en place de tests automatisés
  • Détection des anomalies, incohérences et ruptures de schéma
  • Automatisation des contrôles de qualité dans les pipelines CI/CD lors des évolutions du code
  • Exploitation des métadonnées et du lineage pour comprendre, documenter et sécuriser les pipelines data
  • Compréhension des rôles du métastore et du data catalog

Module 5 – Projet final

  • Conception d’un pipeline data complet alimentant un système d’IA
  • Implémentation d’une architecture data performante et scalable
  • Garantie de la qualité, de la traçabilité et de l’observabilité des données
  • Justification des choix techniques et d’architecture dans un contexte professionnel
  • Présentation d’un projet data opérationnel auprès d’un public métier ou technique

Pour qui ?

Prérequis

Public: Personnes souhaitant devenir Data Engineer, Analytics Engineer ou Data Architect, ayant déjà un niveau avancé en data.

Prérequis: Niveau avancé en data (la formation est conçue pour des personnes ayant déjà un bon niveau; un parcours pour débutants est proposé séparément).

Questions fréquentes

Combien de temps dure la formation ?

La formation dure 150 heures, réparties sur plusieurs semaines.

À qui s’adresse cette formation ?

Elle s’adresse aux personnes ayant déjà un niveau avancé en data et souhaitant se spécialiser dans le Data Engineering.

Faut-il des prérequis ?

Oui, un niveau avancé en data est nécessaire. Si vous débutez, un parcours pour débutants est disponible séparément.

Où se déroule la formation ?

Elle a lieu en présentiel, à Lyon.

Peut-on la financer avec le CPF ?

Oui, elle est indiquée comme éligible au CPF. Le centre vous précise la prise en charge selon votre situation.

Comment payer cette formation ?

  • Avec votre CPFCette formation est éligible : vous pouvez la payer avec votre compte personnel de formation. 150 € restent à votre charge, sauf si votre employeur ou France Travail complète.
  • Si vous cherchez un emploiFrance Travail peut financer tout ou partie de la formation avec l’aide individuelle à la formation (AIF), si elle vous aide à retrouver un poste.
  • Si vous êtes salarié(e)Votre employeur peut la prendre en charge dans son plan de formation, souvent avec l’aide de son OPCO.
Estimer mon reste à charge Lire le guide : Le CPF en 2026 Découvrir le métier : Data Engineer

Jedha

Jedha propose à Lyon des formations en cybersécurité, en présentiel dans son école ou à distance, pour découvrir le domaine ou s'y reconvertir.

Découvrir le centre

Quelle formation cherchez‑vous ?