> Formations > Technologies numériques > Technologies Web > Web Services, SOA, intégration d'applications > Formation Apache Kafka, centraliser les flux de données en temps réel > Formations > Technologies numériques > Formation Apache Kafka, centraliser les flux de données en temps réel

Apache Kafka, centraliser les flux de données en temps réel

Un système unifié d'agents de messages

Apache Kafka, centraliser les flux de données en temps réel

Un système unifié d'agents de messages
Télécharger au format pdf Partager cette formation par e-mail 2


Cette formation vous permettra de maîtriser les agents de messages du projet open source Kafka, de la fondation Apache, pour la manipulation de flux de données en temps réel à faible latence. Vous apprendrez à utiliser KSQL, la mise en place de la sécurité des données et les outils de gestion de Kafka.


Inter
Intra
Sur mesure

Cours pratique en présentiel ou en classe à distance

Réf. AKU
Prix : 2050 € H.T.
  3j - 21h
Pauses-café et
déjeuners offerts




Cette formation vous permettra de maîtriser les agents de messages du projet open source Kafka, de la fondation Apache, pour la manipulation de flux de données en temps réel à faible latence. Vous apprendrez à utiliser KSQL, la mise en place de la sécurité des données et les outils de gestion de Kafka.

Objectifs pédagogiques
À l’issue de la formation, le participant sera en mesure de :
  • Comprendre les principes de communications inter applications
  • Appréhender l'architecture de Kafka
  • Mettre en œuvre KSQL
  • Travailler en sécurité avec Kafka

Public concerné
Architectes, chefs de projet, développeurs, équipes DevOps.

Prérequis
Notions d'architectures applicatives en entreprise, connaissance des protocoles réseaux, bonnes connaissances en Java ou autre langage. Des connaissances en Spring ou Node.js sont un plus.

Programme de la formation

L’évolution des systèmes informatiques et domaines d’utilisation de Kafka

  • Les architectures applicatives en entreprise : cloud, microservices, big data, architectures élastiques, SOA.
  • Communication entre applications.
  • Utilité de Kafka.
  • Les brokers de messages : producers, consumers, brokers.
  • Comparaisons entre les différents brokers et Kafka.

Vue d’ensemble de Kafka

  • Les clusters.
  • Les brokers.
  • Les topics.
  • Les partitions.
  • Les offsets.
  • Présentation de ZooKeeper.

Architecture à haute disponibilité

  • Réplication et sécurité de la donnée : cohérence des messages, gestion des pannes de brokers, gestion des logs.
  • Cluster de brokers : mise en place et configuration, monitoring, gestion des logs.
  • Cluster de Zookeeper.
  • Le "Schema Registry".
  • Kafka Connect.
  • Gestion des groupes et des charges.

Vue d'ensemble de KSQL et écosystème

  • Cas d'utilisation de KSQL : pourquoi KSQL, exemples de cas d'utilisation, KSQL et licensing.
  • KSQL & Kafka.
  • Utilisation interactive de KSQL.
  • Architecture de KSQL.
  • KSQL CLI.
  • Les modes serveur de KSQL.

Utiliser KSQL

  • Kafka Streams et Tables.
  • Message Kafka et formats de données.
  • Manipulation et agrégation de données.
  • Fonctions définies par l'utilisateur (UDF).
  • Enrichissement des données et jointures.
  • Agrégations fenêtrées (Windowed opération).
  • Métrique et observabilité.

Kafka Streams

  • Anatomie d’une application Streams.
  • Configuration d’une application Streams.
  • Topologie d’une application Streams.
  • Opérations Stateless et Stateful.
  • Kafka Streams DSL.
  • Les opérations de type fenêtre glissante.
  • L’API processeur.

Sécurité avec Kafka

  • Le chiffrement SSL.
  • Configuration avec SASL.
  • Utilisation d’ACL.
  • Sécuriser Zookeeper.

Les outils autour de Kafka

  • Outils de gestion de Kafka.
  • Monitoring de Kafka.
  • Apache Avro.


Modalités pratiques
Travaux pratiques
Développement d'un projet fil rouge faisant communiquer entre elles plusieurs applications en passant par Kafka.

Modalités d'évaluation
Le formateur évalue la progression pédagogique du participant tout au long de la formation au moyen de QCM, mises en situation, travaux pratiques…
Le participant complète également un test de positionnement en amont et en aval pour valider les compétences acquises.

Solutions de financement
Pour trouver la meilleure solution de financement adaptée à votre situation : contactez votre conseiller formation.
Il vous aidera à choisir parmi les solutions suivantes :
  • Le plan de développement des compétences de votre entreprise : rapprochez-vous de votre service RH.
  • Le dispositif FNE-Formation.
  • L’OPCO (opérateurs de compétences) de votre entreprise.
  • Pôle Emploi sous réserve de l’acceptation de votre dossier par votre conseiller Pôle Emploi.
  • Le plan de développement des compétences de votre entreprise : rapprochez-vous de votre service RH.
  • Le dispositif FNE-Formation.
  • L’OPCO (opérateurs de compétences) de votre entreprise.
  • Pôle Emploi sous réserve de l’acceptation de votre dossier par votre conseiller Pôle Emploi.

Avis clients
Les avis clients sont issus des évaluations de fin de formation. La note est calculée à partir de l’ensemble des évaluations datant de moins de 12 mois. Seules celles avec un commentaire textuel sont affichées.
RONAN L.
06/04/22
3 / 5

Globalement satisfait. Après un démarrage un peu poussif (cf. plus bas), les objectifs que je m’étais fixé sont globalement atteints. Je ne referai pas de nouvelle formation à distance car trop compliqué (communication, suivi, interactions). Un bémol sur les exercices (cf. plus bas)
ISMAEL I.
06/04/22
2 / 5

Je pense que le contenu doit être mis à jour . Le formateur n’utilise pas Kafka de manière active et cela se ressent pour quelqu’un comme moi qui connait déjà Kafka . Il faudrait mettre l’accent d’abord sur les concepts (Toplogies ,pipelines, DAGS , Stream , Tables etc...) Les exemples doivent être fonctionnels . Dans cette session , beaucoups de soucis infra ou de bugs . Du coups , on perd pas mal de temps à fai
DU CRAY P.
16/02/22
5 / 5

Bonne approche bonnes compétences du formateur




Horaires
En présentiel, les cours ont lieu de 9h à 12h30 et de 14h à 17h30.
Les participants sont accueillis à partir de 8h45. Les pauses et déjeuners sont offerts.
En classe à distance, la formation démarre à partir de 9h.
Pour les stages pratiques de 4 ou 5 jours, quelle que soit la modalité, les sessions se terminent à 15h30 le dernier jour.

Dates et lieux
Pour vous inscrire, sélectionnez la ville et la date de votre choix.
Du 2 au 4 novembre 2022 *
FR
Classe à distance
Session garantie
S’inscrire
Du 2 au 4 novembre 2022 *
FR
Paris La Défense
Session garantie
S’inscrire
Du 2 au 4 novembre 2022 *
FR
Classe à distance
Session garantie
S’inscrire
Du 9 au 11 janvier 2023
FR
Lyon
S’inscrire
Du 16 au 18 janvier 2023
FR
Toulouse
S’inscrire
Du 16 au 18 janvier 2023
FR
Avignon
S’inscrire
Du 30 janvier au 1 février 2023
FR
Nantes
S’inscrire
Du 15 au 17 février 2023
FR
Paris La Défense
S’inscrire
Du 15 au 17 février 2023
FR
Classe à distance
S’inscrire
Du 29 au 31 mars 2023
FR
Aix-en-Provence
S’inscrire
Du 3 au 5 avril 2023
FR
Lyon
S’inscrire
Du 12 au 14 avril 2023
FR
Nantes
S’inscrire
Du 17 au 19 avril 2023
FR
Avignon
S’inscrire
Du 17 au 19 avril 2023
FR
Toulouse
S’inscrire
Du 26 au 28 avril 2023
FR
Classe à distance
S’inscrire
Du 26 au 28 avril 2023
FR
Paris La Défense
S’inscrire
Du 21 au 23 juin 2023
FR
Aix-en-Provence
S’inscrire
Du 5 au 7 juillet 2023
FR
Paris La Défense
S’inscrire
Du 5 au 7 juillet 2023
FR
Classe à distance
S’inscrire
Du 10 au 12 juillet 2023
FR
Toulouse
S’inscrire
Du 10 au 12 juillet 2023
FR
Avignon
S’inscrire
Du 10 au 12 juillet 2023
FR
Lyon
S’inscrire
Du 19 au 21 juillet 2023
FR
Nantes
S’inscrire
Du 27 au 29 septembre 2023
FR
Aix-en-Provence
S’inscrire
Du 9 au 11 octobre 2023
FR
Toulouse
S’inscrire
Du 9 au 11 octobre 2023
FR
Avignon
S’inscrire
Du 16 au 18 octobre 2023
FR
Lyon
S’inscrire
Du 18 au 20 octobre 2023
FR
Paris La Défense
S’inscrire
Du 18 au 20 octobre 2023
FR
Classe à distance
S’inscrire
Du 25 au 27 octobre 2023
FR
Nantes
S’inscrire
Du 18 au 20 décembre 2023
FR
Aix-en-Provence
S’inscrire