Manipulation de flux de données avec Apache Kafka
Objectifs
- comprendre le fonctionnement de Kafka
- configurer Kafka pour intégrer les données de différents formats et de sources différentes
- créer des applications qui s’abonnent et publient des données provenant d’un cluster Kafka
Programme Détaillé
Introduction à Kafka
La nécessité de communiquer entre applications
L'avènement des traitements temps-réel
Les avantages de Kafka
Installer et configurer Kafka
Configuration des composants du système : Zookeeper, brokers, topics, consumers, producers
Prise en main
Gestion du cluster
Administration des logs
Monitoring du système
Gestion des alertes
Développement pour Kafka
Développer un consumer en Java pour s’abonner à un topic kafka
Utiliser des APIs REST pour produire ou consommer des données.
Kafka Streams
Présentation du concept de streaming et pipeline de données
Utilisation de l’API
Kafka Connect
Gestion des transformations avec les connecteurs
Présentation de ksqlDB
Requêtes ksqlDB et opérations en ligne de commande
Traitement des données issues d’un stream
Nos formateurs DEMOS sont recrutés conformément aux spécifications mentionnées pour chaque formation. Ce sont des professionnels en activité et/ou des experts dans leur domaine. Ils utilisent des méthodes et outils appropriés aux formations qu’ils dispensent et adaptent leur pédagogie au public accueilli.
Avant la formation : IMPLIQUER
Questionnaire pré-formation et/ou recueil des besoins pour préciser les attentes individuelles, à l’entrée en formation.
Pendant la formation : APPLIQUER
Méthodes actives et participatives, apports théoriques (10%), mises en pratique (70%) et échanges (20%)
Elaboration de son plan d’actions personnalisé
Après la formation : ACCOMPAGNER
Les conseillers formation sont à votre disposition si vous avez besoin de précisions.
SUIVI & EVALUATION
Pour assurer un suivi individuel, Demos a mis en place 2 types d’évaluation :
Une évaluation de compétences en ligne en début et en fin de formation qui peut prendre différentes formes selon le contenu de la formation suivie : Tests d’évaluation des acquis, cas pratiques, mises en situation, soutenance devant un jury pour les formations à finalité certifiante.
Une évaluation de la satisfaction de chaque stagiaire est réalisée en ligne. Cette évaluation est complétée par l’appréciation du formateur à l’issue de chaque session.