Formation Apache Kafka Connect
Kafka Connect est une API permettant de déplacer d'importantes collections de données entre Apache Kafka et d'autres systèmes.
Cette formation en direct, animée par un instructeur (sur site ou à distance), est destinée aux développeurs souhaitant intégrer Apache Kafka aux bases de données et aux applications existantes pour le traitement, l'analyse, etc.
À la fin de cette formation, les participants seront en mesure de:
- Utiliser Kafka Connect pour ingérer d'importantes quantités de données depuis une base de données vers des topics Kafka.
- Ingréer les données de journal générées par des serveurs d'applications dans des topics Kafka.
- Make toute donnée collectée disponible pour le traitement en flux.
- Exporter des données à partir des topics Kafka vers des systèmes secondaires pour le stockage et l'analyse.
Format du cours permettant d'évaluer les participants
- Cours interactif avec discussion.
- De nombreux exercices et pratiques.
- Mise en œuvre pratique dans un environnement de laboratoire live.
Options de personnalisation du cours
- Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour organiser cela.
Plan du cours
Introduction
Aperçu de l'écosystème Apache Kafka (Zookeeper, Streams, Connect, etc.)
Les composants d'un cluster Kafka Connect
Installation et fonctionnement Apache Kafka
Configuration des connecteurs
Ingestion de données Database dans Apache Kafka
Application des transformations
Acquisition de données à partir d'un Web Server journal
Validation de la connexion
Gérer les connexions avec l'API REST
Acquisition de données en temps réel à partir du web
Étude de cas : Lire et transformer les données de Twitter
Traiter et analyser des données avec Kafka Streams
Déployer Kafka Connect
Rédiger son propre connecteur
Définition des flux d'entrée/sortie dynamiques
Surveillance et gestion de Kafka Connect en production
Dépannage
Résumé et conclusion
Pré requis
- Expérience avec Apache Kafka.
- Expérience en programmation Java.
Audience
- Développeurs
Les formations ouvertes requièrent plus de 3 participants.
Formation Apache Kafka Connect - Booking
Formation Apache Kafka Connect - Enquiry
Apache Kafka Connect - Demande d'informations consulting
Demande d'informations consulting
Nos clients témoignent (5)
l'approche interactive de l'enseignant, qui ne se contente pas d'un récit direct, mais répond aux questions de l'auditoire.
Rens - Canon Medical Informatics Europe B.V.
Formation - Administration of Kafka Topic
Traduction automatique
Les laboratoires et les diapositives se combinent bien avec les connaissances et l'amour de Jorge pour Kafka.
Willem - BMW SA
Formation - Apache Kafka for Developers
Traduction automatique
très interactif...
Richard Langford
Formation - SMACK Stack for Data Science
Traduction automatique
Une pratique suffisante, le formateur est compétent
Chris Tan
Formation - A Practical Introduction to Stream Processing
Traduction automatique
Excellentes compétences, exemples, très bons exercices
Marek Konieczny - G2A.COM Limited
Formation - Kafka for Administrators
Traduction automatique
Cours à venir
Cours Similaires
Building Kafka Solutions with Confluent
14 HeuresCette formation en direct, animée par un instructeur (sur site ou à distance), est destinée aux ingénieurs souhaitant utiliser Confluent (une distribution de Kafka) pour créer et gérer une plate-forme de traitement de données en temps réel pour leurs applications.
À la fin de cette formation, les participants seront en mesure de:
- Installer et configurer le Confluent Platform.
- Utiliser les outils et services de gestion de Confluent pour exécuter Kafka plus facilement.
- Stockez et traitez les données de flux entrantes.
- Optimisez et gérez des clusters Kafka.
- Sécurisez les flux de données.
Format du cours permettant d'évaluer les participants
- Cours interactif et discussion.
- Beaucoup d'exercices et de pratique.
- Mise en œuvre pratique dans un environnement de laboratoire en direct.
Options de personnalisation du cours
- Ce cours est basé sur la version open source de Confluent : Confluent Open Source.
- Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour en faire la demande.
Building Data Pipelines with Apache Kafka
7 HeuresApache Kafka est une plate-forme de diffusion distribuée. C'est un standard de facto pour la construction de pipelines de données qui résout de nombreux cas d'utilisation liés au traitement de données: il peut être utilisé comme une file d'attente de messages, un journal distribué, un processeur de flux, etc.
Nous commencerons par une théorie sur les pipelines de données en général, puis nous poursuivrons avec les concepts fondamentaux derrière Kafka. Nous découvrirons également des composants importants tels que Kafka Streams et Kafka Connect.
A Practical Introduction to Stream Processing
21 HeuresDans cette formation dirigée par un instructeur en <loc> ; (sur site ou à distance), les participants apprendront comment configurer et intégrer différents Stream Processing frameworks avec des systèmes de stockage de big data existants et des applications logicielles et microservices connexes.
A l'issue de cette formation, les participants seront capables de :
- Installer et configurer différents Stream Processing frameworks, tels que Spark Streaming et Kafka Streaming.
- Comprendre et sélectionner le framework le plus approprié pour le travail à effectuer.
- Traiter des données en continu, de manière concurrente et enregistrement par enregistrement.
- Intégrer les solutions Stream Processing aux bases de données existantes, aux entrepôts de données, aux lacs de données, etc.
- Intégrer la bibliothèque de traitement de flux la plus appropriée avec les applications d'entreprise et les microservices.
Distributed Messaging with Apache Kafka
14 HeuresCe cours s'adresse aux architectes d'entreprise, aux développeurs, aux administrateurs système et à tous ceux qui souhaitent comprendre et utiliser un système de messagerie distribuée à haut débit. Si vous avez des exigences plus spécifiques (par exemple, uniquement du côté de l'administration système), ce cours peut être adapté pour mieux répondre à vos besoins.
Kafka for Administrators
21 HeuresCette formation en direct avec instructeur (en ligne ou sur site) s'adresse aux administrateurs système qui souhaitent mettre en place, déployer, gérer et optimiser un cluster Kafka de niveau entreprise.
A l'issue de cette formation, les participants seront capables de :
- Mettre en place et administrer un cluster Kafka.
- Évaluer les avantages et les inconvénients du déploiement de Kafka sur site et dans le cloud.
- Déployer et surveiller Kafka à l'aide de divers outils d'environnement sur site et dans le nuage.
Apache Kafka for Developers
21 HeuresCette formation en direct avec instructeur (en ligne ou sur site) s'adresse aux développeurs de niveau intermédiaire qui souhaitent développer des applications big data avec Apache Kafka.
A l'issue de cette formation, les participants seront capables de :
-
Développer des producteurs et des consommateurs Kafka pour envoyer et lire des données à partir de Kafka.
Intégrer Kafka avec des systèmes externes en utilisant Kafka Connect.
Ecrire des applications de streaming avec Kafka Streams & ; ksqlDB.
Intégrer une application client Kafka avec Confluent Cloud pour des déploiements Kafka basés sur le cloud.
Acquérir une expérience pratique grâce à des exercices et des cas d'utilisation réels.
Apache Kafka for Python Programmers
7 HeuresCette formation en direct avec instructeur dans France (en ligne ou sur site) est destinée aux ingénieurs de données, aux scientifiques de données et aux programmeurs qui souhaitent utiliser les fonctionnalités Apache Kafka dans les flux de données avec Python.
À la fin de cette formation, les participants seront en mesure d'utiliser Apache Kafka pour surveiller et gérer les conditions dans les flux de données continus en utilisant la programmation Python.
Security for Apache Kafka
7 HeuresCette formation en direct, dirigée par un formateur (en ligne ou sur site), s'adresse aux testeurs de logiciels souhaitant intégrer des mesures de sécurité réseau dans une application Apache Kafka.
A l'issue de cette formation, les participants seront capables de :
- Déployer Apache Kafka sur un serveur basé sur le cloud.
- Mettre en œuvre une encryption SSL pour prévenir les attaques.
- Ajouter une authentification ACL pour suivre et contrôler l'accès des utilisateurs.
- Assurer que les clients fiables ont accès aux clusters Kafka avec une authentification SSL et SASL.
Apache Kafka and Spring Boot
7 HeuresCette formation en direct avec instructeur en <loc> ; (en ligne ou sur site) est destinée aux développeurs de niveau intermédiaire qui souhaitent apprendre les principes fondamentaux de Kafka et l'intégrer à Spring Boot.
A l'issue de cette formation, les participants seront capables de :
- Comprendre Kafka et son architecture.
- Apprendre à installer, configurer et mettre en place un environnement Kafka de base.
- Intégrer Kafka à Spring Boot.
Stream Processing with Kafka Streams
7 HeuresKafka Streams est une bibliothèque côté client permettant de créer des applications et des microservices dont les données sont transmises depuis et vers un système de messagerie Kafka. Apache Kafka s’appuyait traditionnellement sur Apache Spark ou Apache Storm pour traiter les données entre les producteurs de messages et les consommateurs. En appelant l'API Kafka Streams depuis une application, les données peuvent être traitées directement dans Kafka, ce qui évite d'avoir à les envoyer à un cluster distinct.
Au cours de cette formation en direct animée par un instructeur, les participants apprendront comment intégrer Kafka Streams à un ensemble d’exemples d’applications Java qui transmettent des données depuis et vers Apache Kafka pour le traitement de flux.
À la fin de cette formation, les participants seront en mesure de:
- Comprendre les fonctionnalités et les avantages de Kafka Streams par rapport à d'autres frameworks de traitement de flux
- Traiter des données de flux directement au sein d'un cluster Kafka
- Rédiger une application ou un microservice Java ou Scala qui s'intègre avec Kafka et Kafka Streams
- Rédiger un code concis qui transforme des sujets d'entrée Kafka en sujets de sortie Kafka
- Construire, empaqueter et déployer l’application
Public
- Développeurs
Format du cours permettant d'évaluer les participants
- Mixte de cours magistral, discussions, exercices et pratique intensive
Remarques
- Pour demander une formation sur mesure pour ce cours, veuillez nous contacter pour en faire la demande.
Administration of Kafka Topic
14 HeuresCette formation en direct avec instructeur à France (en ligne ou sur site) s'adresse aux administrateurs système de niveau débutant à intermédiaire qui souhaitent apprendre à gérer efficacement les sujets Kafka pour une diffusion et un traitement efficaces des données.
A l'issue de cette formation, les participants seront capables de :
- Comprendre les principes fondamentaux et l'architecture des sujets Kafka.
- Créer, configurer et gérer les sujets Kafka.
- Contrôler l'état, les performances et la disponibilité des sujets Kafka.
- Mettre en œuvre des mesures de sécurité pour les sujets Kafka.
Confluent KSQL
7 HeuresCette formation en direct dans France (en ligne ou sur site) est destinée aux développeurs qui souhaitent mettre en œuvre le traitement de flux Apache Kafka sans écrire de code.
A l'issue de cette formation, les participants seront capables de :
- Installer et configurer Confluent KSQL.
- Mettre en place un pipeline de traitement de flux en utilisant uniquement des commandes SQL (pas de codage Java ou Python).
- Effectuer le filtrage des données, les transformations, les agrégations, les jointures, le fenêtrage et la sessionnalisation entièrement en SQL.
- Concevoir et déployer des requêtes interactives et continues pour l'ETL en continu et l'analyse en temps réel.
SMACK Stack for Data Science
14 HeuresCette formation en direct avec instructeur (en ligne ou sur site) s'adresse aux data scientists qui souhaitent utiliser la pile SMACK pour construire des plateformes de traitement de données pour des solutions big data.
A l'issue de cette formation, les participants seront capables de :
- Mettre en place une architecture de pipeline de données pour le traitement des big data.
- Développer une infrastructure de cluster avec Apache Mesos et Docker.
- Analyser les données avec Spark et Scala.
- Gérer les données non structurées avec Apache Cassandra.
Spark Streaming with Python and Kafka
7 HeuresCette formation en direct avec instructeur dans France (en ligne ou sur site) est destinée aux ingénieurs de données, aux scientifiques de données et aux programmeurs qui souhaitent utiliser les fonctionnalités de Spark Streaming dans le traitement et l'analyse de données en temps réel.
À la fin de cette formation, les participants seront en mesure d'utiliser Spark Streaming pour traiter des flux de données en temps réel et les utiliser dans des bases de données, des systèmes de fichiers et des tableaux de bord en temps réel.
Microservices with Spring Cloud and Kafka
21 HeuresCette formation en direct avec instructeur en <loc> ; (en ligne ou sur site) s'adresse aux développeurs qui souhaitent transformer une architecture traditionnelle en une architecture basée sur des microservices hautement concurrents en utilisant Spring Cloud, Kafka, Docker, Kubernetes et Redis.
A l'issue de cette formation, les participants seront capables de :
- Mettre en place l'environnement de développement nécessaire à la construction de microservices.
- Concevoir et mettre en œuvre un écosystème de microservices hautement concurrents en utilisant Spring Cloud, Kafka, Redis, Docker et Kubernetes.
- Transformer les services monolithiques et SOA en architecture basée sur les microservices.
- Adopter une approche DevOps pour développer, tester et publier des logiciels.
- Assurer une concurrence élevée entre les microservices en production.
- Surveiller les microservices et mettre en œuvre des stratégies de récupération.
- Effectuer des réglages de performance.
- Apprendre les tendances futures en matière d'architecture de microservices.