Numérique & IA
Formation Data Engineer – concevez des infrastructures data à grande échelle
Proposée par Jedha
- Durée
- 150 h
- Lieu
- Lyon
- Format
- Présentiel
- Niveau
- Avancé
Ce que vous allez apprendre
En 150 heures, apprenez à concevoir et piloter des infrastructures data modernes avec la Modern Data Stack (Airbyte, dbt, Delta Lake, S3). Préparez-vous aux métiers de Data Engineer, Analytics Engineer ou Data Architect.
À l'issue de la formation, vous serez capable de
- Concevoir et opérer des pipelines data et workflows robustes et scalables
- Mettre en place des architectures lakehouse au service de l’analyse et de l’IA
- Garantir la qualité, la traçabilité, la sécurité et la gouvernance des données dans le temps
- Implémenter et opérer la Modern Data Stack (Airbyte, dbt, Delta Lake, S3)
- Préparer les certifications associées à la formation
Programme
Module 1 – Data Governance
- Principes fondamentaux de la gouvernance des données (DMBOK)
- Évaluation de la maturité data d’une organisation et définition d’une structuration adaptée
- Intégration des contraintes réglementaires (RGPD)
- Rôle et usages des data catalogs au sein d’un écosystème data
- Mise en place de la traçabilité et des responsabilités autour des données
Module 2 – Big Data
- Principes du calcul et du stockage distribués appliqués aux architectures Big Data
- Choix des stratégies de scalabilité: verticale vs horizontale
- Manipulation de données volumineuses avec Spark (DataFrames et Spark SQL)
- Analyse des performances des traitements Big Data et identification des goulots d’étranglement
- Optimisation de l’utilisation des ressources
Module 3 – Modern Data Stack
- Conception d’architectures ELT modernes
- Mise en place de pipelines d’ingestion et de transformation avec dbt
- Orchestration et conception d’architectures (batch, temps réel, event-driven) adaptées aux besoins métier avec Airflow
- Implémentation d’architectures Lakehouse à partir de formats de tables modernes
- Mise en œuvre de data contracts pour garantir la qualité et la stabilité des schémas
Module 4 – Data Quality CI/CD
- Mise en place de tests automatisés
- Détection des anomalies, incohérences et ruptures de schéma
- Automatisation des contrôles de qualité dans les pipelines CI/CD lors des évolutions du code
- Exploitation des métadonnées et du lineage pour comprendre, documenter et sécuriser les pipelines data
- Compréhension des rôles du métastore et du data catalog
Module 5 – Projet final
- Conception d’un pipeline data complet alimentant un système d’IA
- Implémentation d’une architecture data performante et scalable
- Garantie de la qualité, de la traçabilité et de l’observabilité des données
- Justification des choix techniques et d’architecture dans un contexte professionnel
- Présentation d’un projet data opérationnel auprès d’un public métier ou technique
Pour qui ?
Prérequis
Public: Personnes souhaitant devenir Data Engineer, Analytics Engineer ou Data Architect, ayant déjà un niveau avancé en data.
Prérequis: Niveau avancé en data (la formation est conçue pour des personnes ayant déjà un bon niveau; un parcours pour débutants est proposé séparément).
Questions fréquentes
Combien de temps dure la formation ?
La formation dure 150 heures, réparties sur plusieurs semaines.
À qui s’adresse cette formation ?
Elle s’adresse aux personnes ayant déjà un niveau avancé en data et souhaitant se spécialiser dans le Data Engineering.
Faut-il des prérequis ?
Oui, un niveau avancé en data est nécessaire. Si vous débutez, un parcours pour débutants est disponible séparément.
Où se déroule la formation ?
Elle a lieu en présentiel, à Lyon.
Peut-on la financer avec le CPF ?
Oui, elle est indiquée comme éligible au CPF. Le centre vous précise la prise en charge selon votre situation.
Comment payer cette formation ?
- Avec votre CPFCette formation est éligible : vous pouvez la payer avec votre compte personnel de formation. 150 € restent à votre charge, sauf si votre employeur ou France Travail complète.
- Si vous cherchez un emploiFrance Travail peut financer tout ou partie de la formation avec l’aide individuelle à la formation (AIF), si elle vous aide à retrouver un poste.
- Si vous êtes salarié(e)Votre employeur peut la prendre en charge dans son plan de formation, souvent avec l’aide de son OPCO.

Jedha
Jedha propose à Lyon des formations en cybersécurité, en présentiel dans son école ou à distance, pour découvrir le domaine ou s'y reconvertir.
Découvrir le centreFormations similaires

Éligible CPF
Éligible CPF