Numérique & IA

Apache Kafka : architecture, développement et administration

Proposée par Ambient It · certifié Qualiopi

Durée
35 h sur 5 jours
Lieu
Pantin
Format
Hybride
Niveau
Avancé

Ce que vous allez apprendre

Maîtrisez Kafka de bout en bout: de l'installation à la sécurisation, en passant par le développement d'applications temps réel et l'ingestion de données avec Kafka Connect.

À l'issue de la formation, vous serez capable de

  • Comprendre l'architecture de Kafka et son fonctionnement multi-clients
  • Configurer Kafka pour intégrer des données de sources et formats variés
  • Développer des producers et consumers en Java avec l'API REST
Lire la suite
  • Implémenter un consumer multi-thread et gérer les offsets
  • Utiliser KSQL, Kafka Connect et Kafka Streams pour le traitement de flux
  • Sécuriser les données et administrer un cluster Kafka

Programme

Introduction

  • Historique et complexité des systèmes
  • Le traitement en temps réel: une importance business
  • Kafka: une plateforme de données de flux

Les fondamentaux

  • Aperçu de Kafka et efficacité
  • Producers
  • Brokers
  • Consumers
  • Utilisation de ZooKeeper

Installation et administration

  • Installation et options avancées
  • Considérations matérielles (hardware)
  • Administrer Kafka

Architecture

  • Fichiers journaux de Kafka
  • Réplication et fiabilité
  • Chemins d'écriture et de lecture de Kafka
  • Partitions, Consumer Groups et scalabilité

Développer avec Kafka

  • Utiliser Maven pour la gestion de projet
  • Accéder par programmation à Kafka
  • Écrire un Producer en Java
  • Utiliser l'API REST pour écrire un Producer
  • Écrire un Consumer en Java
  • Utiliser l'API REST pour écrire un Consumer

Développement avancé avec Kafka

  • Créer un Consumer multi-thread
  • Gestion des offsets Consumer
  • Rebalancing (rééquilibrage)
  • Gestion manuelle des offsets (commits)
  • Partitionnement des données
  • Message Durability: gestion de la durée des messages
Voir tout le programme

Nouveautés de la version Kafka 3.0

  • Nouvelles fonctionnalités de Kafka
  • Changement d'API
  • Amélioration de KRaft
  • Amélioration des métadonnées Kafka Connect
  • Option de configuration MirrorMaker 2
  • Dépréciation de Java 8 et Scala 2.12 dans Kafka

Schema Management

  • Introduction à Avro
  • Avro Schemas
  • Utilisation du Schema Registry

Kafka Connect: Data Movement

  • Cas d'utilisation de Kafka Connect
  • Les bases de Kafka Connect
  • Modes: standalone et distribué
  • Configuration du mode distribué
  • Tracking Offsets
  • Configuration du connecteur
  • Comparaison d'utilisation avec des options avancées

Kafka Streams

  • Cas d'utilisation de Kafka Streams
  • Kafka Streams: les fondamentaux
  • Étude d'une application et usage de Kafka Streams

Tuning et supervision avancée (module optionnel - 2 jours)

  • Log Compaction Configuration Settings
  • Hardware and Capacity Planning
  • Traitement des oversized messages
  • Monitoring et alerte
  • ZooKeeper and OS-Level Monitoring
  • Key Kafka Metrics
  • Cluster Administration
  • Key Cluster Administration Tasks
  • Replicating Clusters avec MirrorMaker
  • Kafka Security
  • SSL for Encryption and Authentication
  • SASL for Authentication Authorization

Pour qui ?

Développeurs, architectes logiciels, administrateurs systèmes souhaitant maîtriser Apache Kafka.

Prérequis

Connaissances de base en programmation Java et en administration système.

Questions fréquentes

Combien de temps dure la formation ?

La formation dure 5 jours, soit 35 heures, avec un module optionnel de 2 jours supplémentaires.

À qui s'adresse cette formation ?

Elle s'adresse aux développeurs, architectes logiciels et administrateurs systèmes qui souhaitent maîtriser Apache Kafka.

Comment se déroule la formation ?

Elle est proposée en présentiel (département Seine-Saint-Denis) ou à distance, avec un module optionnel de 2 jours.

Peut-on la financer avec le CPF ?

Oui, elle est indiquée comme éligible au CPF. Le centre vous précise la prise en charge selon votre situation.

Quel est le prix de la formation ?

Le centre affiche 2 400 €.

Quels sont les prérequis ?

Public : Développeurs, architectes logiciels, administrateurs systèmes souhaitant maîtriser Apache Kafka. Prérequis : Connaissances de base en programmation Java et en administration système.

Comment payer cette formation ?

  • Avec votre CPFCette formation est éligible : vous pouvez la payer avec votre compte personnel de formation. 150 € restent à votre charge, sauf si votre employeur ou France Travail complète.
  • Si vous cherchez un emploiFrance Travail peut financer tout ou partie de la formation avec l’aide individuelle à la formation (AIF), si elle vous aide à retrouver un poste.
  • Si vous êtes salarié(e)Votre employeur peut la prendre en charge dans son plan de formation, souvent avec l’aide de son OPCO.
Estimer mon reste à charge Lire le guide : Le CPF en 2026

Ambient It

L'organisme propose des formations informatiques, nouvelles technologies et NTIC. Il couvre des domaines comme la cybersécurité, le web, le BigData et le DevOps, avec des parcours sur Angular, Kubernetes, Spark, Docker ou ElasticStack.

Découvrir le centre
2 400 €

Quelle formation cherchez‑vous ?