INNOV MAROC
Informatique & Digital Big Data : développement, langages et NOSQL

Formation Développement avancé avec Apache Kafka et l’écosystème Confluent

Référence

BSI432

Durée

4 jours

Objectifs pédagogiques

  • Comprendre en profondeur les concepts clés de Kafka : architecture, topics, partitions, réplication, messages et politiques de rétention
  • Développer des producteurs et consommateurs Kafka performants, tolérants aux pannes et adaptés aux fortes charges
  • Maîtriser la gestion et l’évolution des schémas de données avec le Schema Registry
  • Concevoir et déployer des applications de streaming avec Kafka Streams et ksqlDB
  • Intégrer Kafka à d’autres systèmes via Kafka Connect et gérer la configuration avancée des connecteurs
  • Optimiser les stratégies de partitionnement, la gestion des offsets et la fiabilité des messages

Public cible

  • Développeurs et ingénieurs logiciels
  • Développeurs ETL et spécialistes de l’intégration de données
  • Architectes et Data Engineers manipulant des flux de données temps réel
  • Data Scientists interagissant avec Kafka comme source ou destination

Prochaines Sessions

Inscrivez-vous dès maintenant

À distance
Innov Systems

27 au 30 Oct. 2026

Inscription avant le 06 Oct. 2026

Besoin urgent ? Demandez une session personnalisée (délai min. 15-20 jours ouvrés)

Devis personnalisé

Programme Détaillé

  • Comprendre l’architecture distribuée et le rôle des brokers
  • Notions de cluster, topics, partitions et réplication
  • Stratégies de rétention et compactage des logs
  • Modes de connexion et sécurisation des accès
  • Concepts de base : envoi asynchrone, acks, batching
  • Développement d’un producteur Kafka simple
  • Paramètres clés pour la performance et la résilience
  • Gestion des erreurs et reprises automatiques
  • Gestion des envois par lot et compression des messages
  • Transactions et envoi atomique de messages
  • Réaction aux échecs et gestion des exceptions
  • Tests et optimisation des performances producteur
  • Concepts de base : polling, commit des offsets
  • Développement d’un consommateur Kafka simple
  • Gestion des offsets : automatique vs manuel
  • Sécurité et authentification côté consommateur
  • Fonctionnement des Consumer Groups et répartition de charge
  • Stratégies de rebalancing et tolérance aux pannes
  • Optimisation du traitement parallèle et gestion des threads
  • Ajustement manuel des offsets
  • Avantages de l’utilisation de schémas dans Kafka
  • Création de schémas en Avro, JSON Schema et Protobuf
  • Stratégies d’évolution : compatibilité arrière et avant
  • Validation et tests des schémas
  • Configuration et déploiement du Schema Registry
  • Utilisation côté producteurs et consommateurs
  • Gestion des versions et migration des schémas
  • Concepts clés de Kafka Streams : KStream, KTable, joins, windows
  • DSL Kafka Streams et traitement d’événements complexes
  • Montage d’une application Kafka Streams de bout en bout
  • Principes et cas d’usage de ksqlDB
  • Écriture de requêtes SQL pour traiter les flux
  • Agrégation, fenêtrage et jointures en ksqlDB
  • Bonnes pratiques de déploiement
  • Architecture et rôle des workers Kafka Connect
  • Installation et configuration des connecteurs
  • Gestion des connecteurs sources et sinks
  • Développement d’un connecteur personnalisé
  • Gestion des erreurs et reprise après incident
  • Surveillance et optimisation des connecteurs
  • Stratégies de partitionnement et création d’un partitionneur personnalisé
  • Mise à l’échelle horizontale des producteurs et consommateurs
  • Gestion de la taille et du format des messages
  • Paramétrage pour haute performance et faible latence
  • Effets du compactage sur les offsets
  • Ajustement manuel des offsets selon les besoins métier
  • Stratégies de reprise après crash
  • Authentification SASL et chiffrement TLS
  • Gestion des permissions avec ACLs
  • Tests, monitoring et observabilité avec Confluent Control Center et outils open source
  • Mise en place complète d’un pipeline Kafka avec producteurs, consommateurs, schémas et connecteurs
  • Déploiement d’une application de streaming temps réel avec Kafka Streams ou ksqlDB
  • Tests de performance et tolérance aux pannes

Approche pédagogique

Support Ecrit et Projection
Exposés Interactifs, Podcasts et Vidéos
Brainstorming et Jeux de Rôle
Cas Pratiques et Labs inclus pour leur impact opérationnel
Test de Validation des Acquis des Connaissances

✨ Formations Recommandées

Perfectionnez vos compétences avec ces formations complémentaires

Data Visualization : transformez vos données en décisions stratégiques impactantes

Réf. BDI29

5 jours 12 Oct. 2026
Voir le programme

Big Data : Pig, Hive et Impala avec Hadoop

Réf. BSI31

5 jours 12 Oct. 2026
Voir le programme
Questions fréquentes

Vous trouverez ici les réponses aux questions les plus fréquentes que nous recevons de la part de nos clients. Notre objectif : vous éclairer et vous accompagner au mieux dans le développement des compétences de vos équipes.

Partie 1 : Nos Formations et Notre Approche Pédagogique

Les deux, mais notre véritable valeur ajoutée réside dans le sur-mesure. Nous partons du principe que chaque entreprise a un contexte, une culture et des défis uniques. Notre processus commence toujours par une phase d'écoute et de diagnostic pour co-construire avec vous le programme qui aura le plus d'impact.

Nos formateurs sont des experts seniors dotés d'une double compétence :

  1. Une expertise métier solide : Ils ont tous une expérience significative en entreprise au Maroc et comprennent les réalités du terrain.
  2. Une expertise pédagogique confirmée : Ils sont formés aux techniques d'animation pour adultes, favorisant l'interactivité et la pratique.

Nous nous adaptons à vos contraintes et objectifs avec plusieurs formats :

  • Présentiel Intra-entreprise : Chez vous, pour une immersion totale.
  • Présentiel Inter-entreprises : Pour favoriser le partage d'expériences.
  • Distanciel : Des sessions live, interactives et dynamiques.

Partie 2 : Financement et Aspects Administratifs (Spécificités Marocaines)

Oui, absolument. En tant qu'organisme de formation agréé, nos actions sont éligibles au remboursement via les Contrats Spéciaux de Formation (CSF) gérés par l'OFPPT et les GIAC. C'est un levier essentiel pour optimiser votre budget formation.

Oui, c'est un service clé que nous proposons. Nous vous accompagnons de A à Z dans le montage de votre dossier d'ingénierie financière. Notre expertise du système marocain vous garantit la constitution d'un dossier conforme et le suivi jusqu'au remboursement, transformant cette contrainte administrative en une simple formalité pour vous.

Nos tarifs sont transparents et dépendent de la durée, du niveau de personnalisation, du nombre de participants et du format. Le meilleur moyen d'avoir une idée précise est de nous demander un devis personnalisé et gratuit, qui sera accompagné d'une proposition pédagogique détaillée.

Partie 3 : Processus, Logistique et Suivi

Notre processus est simple et centré sur vos besoins :

  1. Prise de Contact & Analyse : Échange pour comprendre vos enjeux.
  2. Proposition sur-mesure : Envoi d'une proposition pédagogique et financière.
  3. Validation & Planification : Ajustements et fixation du calendrier.
  4. Réalisation de la Formation.
  5. Évaluation & Suivi : Mesure de la satisfaction et bilan complet.

Oui. Notre réseau de formateurs nous permet d'intervenir sur l'ensemble du territoire marocain, que vos locaux soient à Casablanca, Rabat, Tanger, Marrakech, Agadir ou dans toute autre ville du Royaume.

Oui, la formation ne s'arrête pas à la fin de la session. Nous assurons un suivi rigoureux : remise des attestations, envoi d'un rapport de synthèse, et mise en place d'une évaluation à froid (quelques semaines après) pour mesurer le transfert des compétences. Des sessions de coaching de suivi sont également possibles.

Partie 4 : Impact et Retour sur Investissement (ROI)

Nous utilisons une approche à plusieurs niveaux (inspirée du modèle de Kirkpatrick) :

  • Niveau 1 (Satisfaction) : Évaluation à chaud.
  • Niveau 2 (Apprentissage) : Quizz et mises en situation.
  • Niveau 3 (Comportement) : Évaluation à froid et entretiens avec les managers.
  • Niveau 4 (Résultats) : Analyse de l'impact sur vos indicateurs de performance (KPIs).

Pour trois raisons principales :

  1. Notre Expertise Locale : Nous sommes des spécialistes du marché marocain et africain, de sa culture et de ses mécanismes administratifs (CSF).
  2. Notre Approche Sur-Mesure : Nous ne vendons pas de formations, nous construisons des solutions adaptées à votre besoin.
  3. Notre Engagement sur l'Impact : Nous sommes focalisés sur le retour sur investissement tangible de votre budget formation.

Des questions sur cette formation ?

Notre équipe pédagogique est à votre disposition pour répondre à toutes vos questions et vous accompagner dans votre projet de formation.

Ils nous font déjà confiance

Alstom
Arcelor Mittal
Lafarge
Aircelle
Dell
Jcop Delafon
Credit Agricole
Oncf
Akwagroup
Cdg
Holcim
Cdg Capital
Centrale Laitiere
Cgi
Dufry
Bmce
Celliers Meknes
Ciment Du Maroc
Axa
Fresenius Medical
Inwi
Hyatt
Attijari Bank
Wafasalaf
Tectra
Chronopost
Banque Populaire
Basf
Arval
Les Eaux Minerales De Oulmes
Cegelec
Merck
Onhym
Sgmb
Radeema
Somfy
Vitogaz
Anp
Atos
Cim Equipement
Fiat
Lesieur
Managem
Onep
Renault
Sacem
Sofac
Maersk
Maroc Export
Marsa Maroc
Meditel
Mascir
Medz
Novartis
Novec
Pfizer
Poste Maroc
Rekrute
Rma Watanya
Salafin Company
Sicpa
Sigmatel
Somed
Sothema
Spie
St microel ectronics
Total
Ups
Zurich
Abcd
Afinis
Cimat
Conseil Ingeniere Developpement
Dyar Al Mansour
Gm Equipement
Gsm Almaghreb
Hps Optima
Jetalu
Abb
Akka
Almageo
Aufait
Electroplanet
Jlec
Lca Fondcou
Ocp
Sofitel
Tangerois
2m
Isma wood
Sofrecom
Maroc Assistance Internationale
Mondi Packaging
Plastex
Ubisoft
Veolia Transdev
Vivalis
Premium
Syngenta
Cst Sensors
Bymaro
Promopharm
Inotecha
Bottu
Servier
Somadir
Omnidior
Oberthur
Saham Pharma
Taqa Morocco
Pharma 5
Lpee
Foodipex
Quadritech
Elephant Vert
Biocorp
Mc Pharma
Bosch
Essilor
Kroschu
Nomac
Inabensa

Plus de 1 500 Références au Maroc et dans le Monde

Discuter sur WhatsApp