Data Pipeline avec Kafka

Avoir des connaissances de bases en Big Data

S’initier à la théorie sur les pipelines de données
Maitriser les concepts fondamentaux derrière Kafka
Découvrir les principaux composants tels que Kafka Streams et Kafka Connect

Accessible selon le nombre de places disponibles.
Les participants recevront leur convocation au plus tôt deux semaines avant le début de la formation.

À l’issue de chaque module, le formateur évaluera chacun des participants en fonction des cas pratiques et exercices effectués.

Une attestation de formation vous sera remise.

• Alternance d’exercices, cas pratiques, QCM et de notions théoriques, projet Fil Rouge.
• Evaluations régulières et retour du formateur sur les points moins bien assimilés.
• Les supports de cours seront mis à disposition via notre la plate-forme de téléchargement AJC Classroom.
• Accès à notre plateforme à distance de Classe Virtuelle
  Mêmes possibilités et interactions avec votre formateur que lors d’une formation présentielle. En effet, votre formation se déroulera en connexion continue 7h/7 :
  • • • Echanges directs avec le formateur et l’équipe pédagogique à travers la visioconférence, les forums et chats
      • Vérification de l’avancement de votre travail et évaluation par votre formateur à l’aide d’exercices et de cas pratiques
      • Suivi pédagogique et conseils personnalisés pendant toute la formation

   

  Vous recevrez les informations de connexion par mail dès votre inscription. En cas de problème de connexion, vous pourrez joindre notre équipe à tout moment (avant ou même pendant la formation) au 0182837241 ou par mail à l’adresse hotline@ajc-formation.fr.

Les personnes en situation de handicap sont invitées à nous communiquer leurs besoins spécifiques. Nous ferons tout pour les mettre dans les meilleures conditions de suivi de la formation (compensation, accessibilité…)

Attestation de formation

Développeurs
Data scientists
Architectes
Chefs de projet
Ingénieurs d’études

Présentation du projet Kafka

• Retour sur l’historique du projet
• L’intérêt de Kafka dans le Big Data
• L’architecture fonctionnelle de
• Kafka
• Les composants du système :  brokers, topics, conumer, producers
• Principes de fonctionnement

Installation

• Installer Kafka
• Configurer les composants
• Installer l’écosystème de
• développement de Kafka
• Installer le matériel nécessaire
• Effectuer des manipulations de base

Configuration et utilisation des APIs

• Etudier la conception des APIs et  leur implémentation
• Comprendre les cas d’usages et les
• solutions
• Gérer la couche réseau et le format  des messages
• Gérer, administrer et compacter les  Logs
• Gérer le schéma de distribution des  données
• Effectuer les actions de base sur les  topics
• Gérer les Datacenters
• Monitorer le système et gérer les  alertes
• Mise en œuvre de Zookeeper
   

Mise en place de la sécurité du système

• Comprendre les enjeux et les  principes de sécurité d’un système  Kafka
• Utiliser le protocole SSL/TLS pour le
• cryptage et l’authentification
• Utiliser la couche SASL pour
• l’authentification
• Utiliser des listes de contrôle ACL  pour les autorisations
• Authentifier avec Zookeeper

Aller plus loin avec Kafka

• Data stream scalable avec Kafka  Connect
• Utiliser Kafka Connect pour
• l’intégration de données
• Developper des connecteurs  personnalisés