Numérique & IA

Kafka : brokers, topics, partitions et traitement de flux temps réel

Proposée par Retengr · certifié Qualiopi

Durée
21 h sur 3 jours
Lieu
Toulouse
Format
Hybride
Niveau
Intermédiaire

Ce que vous allez apprendre

Vous êtes architecte, développeur ou chef de projet technique ? Cette formation de 3 jours vous permet de comprendre ce qu'est un cluster Kafka, d'écrire un programme pour envoyer et consommer des données, et de maîtriser l'administration de Kafka.

À l'issue de la formation, vous serez capable de

  • Comprendre ce qu'est un cluster Kafka: brokers, topics, partitions, consumer groups
  • Écrire un programme pour envoyer des données dans Kafka
  • Écrire un programme pour consommer les données de Kafka
Lire la suite
  • S'intégrer à l'existant grâce à Kafka Connect et Kafka REST Proxy
  • Apprendre les bases de l'administration de Kafka
  • Utiliser Kafka Stream pour traiter les données en continu

Programme

À quoi sert Kafka ?

  • La collecte des données
  • Un outil compatible avec le Big Data
  • Pensé pour un traitement des données en streaming

Les principes de base

  • Les piliers: Producers, Consumers, Brokers et Zookeeper
  • Comparaison avec les Message Oriented Middleware

Architecture Kafka

  • Les logs files
  • Les replicas
  • Partitions
  • Consumers Groups

Développer avec Kafka

  • Écrire un producer
  • Écrire son propre Partitioner
  • Écrire un consumer
  • Gestion d'offset
  • Valider les lectures

La gestion de schémas

  • AVRO: un système de sérialisation
  • Présentation de schema registry
  • Versionnez vos schémas

Kafka Connect

  • Présentation
  • Les différents types de connecteurs
  • Les modes standalone et distribués
  • Les alternatives: NIFI, ETL, Flume...
Voir tout le programme

Les bases de l'administration

  • Prérequis et installation
  • Les versions de Kafka, compatibilité
  • Configuration des topics
  • Politique de log retention
  • Compactage
  • Configuration des partitions
  • La sécurité

Kafka Streaming

  • Présentation
  • Création d'une application
  • Un exemple Kafka Streaming
  • Gestion des streams
  • KSQL

Pour qui ?

Prérequis

Public: Architectes, développeurs, chefs de projet technique

Prérequis: Une connaissance des technologies Web. La connaissance d'un langage de programmation structuré est souhaitable. Aucune connaissance spécifique au Big Data n'est nécessaire. Un entretien téléphonique avec le formateur permet de valider le niveau et l'adéquation du contenu.

Questions fréquentes

Combien de temps dure la formation Kafka ?

La formation dure 3 jours, soit 21 heures.

À qui s'adresse cette formation ?

Elle s'adresse aux architectes, développeurs et chefs de projet technique.

Comment se déroule la formation ?

Elle est proposée à distance ou en présentiel, avec 60 % de travaux pratiques. Chaque participant dispose d'un ordinateur et d'une machine virtuelle dans le cloud Amazon. Aucune installation préalable n'est nécessaire.

Peut-on la financer ?

Elle n’est pas indiquée comme éligible au CPF, mais France Travail ou votre employeur peuvent la financer selon votre situation.

Quel est le prix de la formation ?

Le centre affiche 1 980 €.

Quels sont les prérequis ?

Public : Architectes, développeurs, chefs de projet technique Prérequis : Une connaissance des technologies Web. La connaissance d'un langage de programmation structuré est souhaitable. Aucune connaissance spécifique au Big Data n'est nécessaire. Un entreti…

Comment payer cette formation ?

  • Votre CPFCette formation n’est pas indiquée comme éligible au CPF. Le centre vous dira si une autre version l’est.
  • Si vous cherchez un emploiFrance Travail peut financer tout ou partie de la formation avec l’aide individuelle à la formation (AIF), si elle vous aide à retrouver un poste.
  • Si vous êtes salarié(e)Votre employeur peut la prendre en charge dans son plan de formation, souvent avec l’aide de son OPCO.
Estimer mon reste à charge Lire le guide : France Travail et AIF

Retengr

Retengr est un centre de formation spécialisé dans les hautes technologies informatiques, basé à Toulouse. Cet organisme de formation propose des formations expertes pour les professionnels de l'informatique, avec une expertise reconnue en Data, DevOps, Web client, Agilité, Mobilité et Architecture logicielle.

Découvrir le centre
1 980 €

Quelle formation cherchez‑vous ?