Les formations Apache Kafka

This instructor-led, live training in Quebec (online or onsite) is aimed at intermediate-level developers who wish to develop big data applications with Apache Kafka. By the end of this training, participants will be able to:

• Develop Kafka producers and consumers to send and read data from Kafka.
• Integrate Kafka with external systems using Kafka Connect.
• Write streaming applications with Kafka Streams & ksqlDB.
• Integrate a Kafka client application with Confluent Cloud for cloud-based Kafka deployments.
• Gain practical experience through hands-on exercises and real-world use cases.

Ce cours s'adresse aux architectes d'entreprise, aux développeurs, aux administrateurs système et à tous ceux qui souhaitent comprendre et utiliser un système de messagerie distribuée à haut débit. Si vous avez des exigences plus spécifiques (par exemple, uniquement du côté de l'administration système), ce cours peut être adapté pour mieux répondre à vos besoins.

Apache Samza est un framework de calcul asynchrone open source quasi-temps réel pour le traitement de flux. Il utilise Apache Kafka pour la messagerie et Apache Hadoop YARN pour la tolérance aux pannes, l'isolation du processeur, la sécurité et la gestion des ressources. Cette formation en direct, animée par un instructeur, présente les principes sous-jacents aux systèmes de messagerie et au traitement de flux distribué, tout en guidant les participants dans la création d'un exemple de projet et d'exécution de travaux basé sur Samza. À la fin de cette formation, les participants seront en mesure de:

• Utilisez Samza pour simplifier le code nécessaire à la production et à la consommation de messages.
• Découpler le traitement des messages d'une application.
• Utilisez Samza pour implémenter un calcul asynchrone en temps quasi réel.
• Utilisez le traitement de flux pour fournir un niveau d'abstraction plus élevé sur les systèmes de messagerie.

Public

• Développeurs

Format du cours

• Partie de conférence, partie de discussion, exercices et exercices intensifs

Kafka Streams est une bibliothèque côté client permettant de créer des applications et des microservices dont les données sont transmises depuis et vers un système de messagerie Kafka. Apache Kafka s’appuyait traditionnellement sur Apache Spark ou Apache Storm pour traiter les données entre les producteurs de messages et les consommateurs. En appelant l'API Kafka Streams depuis une application, les données peuvent être traitées directement dans Kafka, ce qui évite d'avoir à les envoyer à un cluster distinct. Au cours de cette formation en direct animée par un instructeur, les participants apprendront comment intégrer Kafka Streams à un ensemble d’exemples d’applications Java qui transmettent des données depuis et vers Apache Kafka pour le traitement de flux. À la fin de cette formation, les participants seront en mesure de:

• Comprendre les fonctionnalités et les avantages de Kafka Streams par rapport aux autres infrastructures de traitement de flux
• Traiter les données de flux directement dans un cluster Kafka
• Écrire une application ou un microservice Java ou Scala intégrant Kafka et Kafka Streams
• Écrivez un code concis qui transforme les sujets d’entrée de Kafka en sujets de sortie de Kafka
• Construire, empaqueter et déployer l'application

Public

• Développeurs

Format du cours

• Partie de conférence, partie de discussion, exercices et exercices intensifs

Remarques

• Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour organiser

Stream Processing fait référence au traitement en temps réel de «données en mouvement», c’est-à-dire à l’exécution de calculs sur les données reçues. Ces données sont lues comme des flux continus à partir de sources de données telles que des événements de capteurs, l’activité des utilisateurs du site Web, des transactions financières, des balayages de carte de crédit, des flux de clics, etc. Stream Processing infrastructures de Stream Processing permettent de lire de grands volumes de données entrantes et fournissent des informations précieuses presque instantanément. Au cours de cette formation en direct animée par un instructeur (sur site ou à distance), les participants apprendront à configurer et à intégrer différents cadres de Stream Processing avec des systèmes de stockage de données volumineux existants ainsi que des applications logicielles et microservices connexes. À la fin de cette formation, les participants seront en mesure de:

• Installez et configurez différents frameworks de Stream Processing , tels que Spark Streaming et Kafka Streaming.
• Comprendre et sélectionner le cadre le plus approprié pour le travail.
• Traitement des données en continu, simultanément et enregistrement par enregistrement.
• Intégrez les solutions de Stream Processing continu aux bases de données, aux entrepôts de données, aux lacs de données, etc. existants
• Intégrez la bibliothèque de traitement de flux la plus appropriée aux applications d'entreprise et aux microservices.

Public

• Les développeurs
• Architectes logiciels

Format du cours

• Partie de conférence, partie de discussion, exercices et exercices intensifs

Remarques

• Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour organiser cela.

Cette formation en direct, animée par un instructeur (sur site ou à distance), est destinée aux ingénieurs souhaitant utiliser Confluent (une distribution de Kafka) pour créer et gérer une plate-forme de traitement de données en temps réel pour leurs applications. À la fin de cette formation, les participants seront en mesure de:

• Installez et configurez Confluent Platform.
• Utilisez les outils et les services de gestion de Confluent pour exécuter Kafka plus facilement.
• Stocker et traiter les données de flux entrants.
• Optimiser et gérer les clusters Kafka.
• Flux de données sécurisés.

Format du cours

• Conférence interactive et discussion.
• Beaucoup d'exercices et de pratique.
• Mise en œuvre pratique dans un environnement de laboratoire réel.

Options de personnalisation du cours

• Ce cours est basé sur la version open source de Confluent: Confluent Open Source.
• Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour organiser cela.

Apache Kafka est une plate-forme de diffusion distribuée. C'est un standard de facto pour la construction de pipelines de données qui résout de nombreux cas d'utilisation liés au traitement de données: il peut être utilisé comme une file d'attente de messages, un journal distribué, un processeur de flux, etc. Nous commencerons par une théorie sur les pipelines de données en général, puis nous poursuivrons avec les concepts fondamentaux derrière Kafka. Nous découvrirons également des composants importants tels que Kafka Streams et Kafka Connect.

Spring Cloud est un framework de microservices permettant de créer Java applications Java pour le cloud. Ces microservices sont souvent exécutés en tant que conteneurs Docker dans un cluster Kubernetes . D'autres composants incluent des courtiers de messages tels que Kafka pour permettre la communication interservices et des bases de données telles que Redis pour stocker et mettre en mémoire tampon les données d'application. Cette formation en direct, animée par un instructeur (sur site ou à distance), est destinée aux développeurs qui souhaitent transformer une architecture traditionnelle en une architecture hautement concurrentielle basée sur des microservices, utilisant Spring Cloud , Kafka, Docker , Kubernetes et Redis . À la fin de cette formation, les participants seront en mesure de:

• Configurez l'environnement de développement nécessaire à la création de microservices.
• Concevoir et mettre en œuvre un écosystème de microservices hautement concurrentiel utilisant Spring Cloud , Kafka, Redis , Docker et Kubernetes .
• Transformez les services monolithiques et SOA en architecture à base de microservices.
• Adoptez une approche DevOps pour développer, tester et publier des logiciels.
• Assurez une haute concurrence entre les microservices en production.
• Surveiller les microservices et mettre en œuvre des stratégies de récupération.
• Effectuer le réglage des performances.
• Découvrez les tendances futures de l’architecture des microservices.

Format du cours

• Conférence interactive et discussion.
• Beaucoup d'exercices et de pratique.
• Mise en œuvre pratique dans un environnement de laboratoire réel.

Options de personnalisation du cours

• Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour organiser cela.

Kafka Connect est une API permettant de déplacer d'importantes collections de données entre Apache Kafka et d'autres systèmes. Cette formation en direct, animée par un instructeur (sur site ou à distance), est destinée aux développeurs souhaitant intégrer Apache Kafka aux bases de données et aux applications existantes pour le traitement, l'analyse, etc. À la fin de cette formation, les participants seront en mesure de:

• Utilisez Kafka Connect pour ingérer de grandes quantités de données d’une base de données dans des rubriques Kafka.
• Intégrez les données de journal générées par un serveur d'applications dans les rubriques Kafka.
• Rendez toutes les données collectées disponibles pour le traitement de flux.
• Exportez les données des rubriques Kafka vers des systèmes secondaires pour les stocker et les analyser.

Format du cours

• Conférence interactive et discussion.
• Beaucoup d'exercices et de pratique.
• Mise en œuvre pratique dans un environnement de laboratoire réel.

Options de personnalisation du cours

• Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour organiser cela.

Confluent K SQL est un framework de traitement de flux construit sur Apache Kafka . Il permet le traitement de données en temps réel à l'aide d'opérations SQL . Cette formation en direct, animée par un instructeur (sur site ou à distance), est destinée aux développeurs souhaitant mettre en œuvre Apache Kafka traitement de flux Apache Kafka sans écrire de code. À la fin de cette formation, les participants seront en mesure de:

• Installez et configurez Confluent K SQL .
• Configurez un pipeline de traitement de flux en utilisant uniquement SQL commandes SQL (sans codage Java ou Python ).
• Effectuez le filtrage, les transformations, les agrégations, les jointures, le fenêtrage et la mise en session des données entièrement en SQL .
• Concevez et déployez des requêtes continues et interactives pour la diffusion en continu d'ETL et d'analyse en temps réel.

Format du cours

• Conférence interactive et discussion.
• Beaucoup d'exercices et de pratique.
• Mise en œuvre pratique dans un environnement de laboratoire réel.

Options de personnalisation du cours

• Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour organiser cela.

Apache Kafka est un système de messagerie permettant de stocker et de traiter de gros volumes de données en streaming et en temps réel. Cette formation en direct, animée par un instructeur (sur site ou à distance), est destinée aux administrateurs système qui souhaitent configurer, déployer, gérer et optimiser un cluster Kafka de niveau entreprise. À la fin de cette formation, les participants seront en mesure de:

• Configurez et administrez un cluster Kafka.
• Évaluez les avantages et les inconvénients du déploiement de Kafka sur site ou dans le cloud.
• Déployez et surveillez Kafka en utilisant divers outils d’environnement sur site et en nuage.

Format du cours

• Conférence interactive et discussion.
• Beaucoup d'exercices et de pratique.
• Mise en œuvre pratique dans un environnement de laboratoire réel.

Options de personnalisation du cours

• Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour organiser cela.

Apache Kafka est un logiciel de traitement des flux pour le traitement des flux de données en temps réel. Avec Apache Kafka et son système ouvert, la sécurité réseau est compromise et les données sensibles sont menacées. Cette formation en direct dirigée par un instructeur (sur place ou à distance) s'adresse aux testeurs de logiciels qui souhaitent mettre en œuvre des mesures de sécurité réseau dans une application Apache Kafka. À la fin de cette formation, les participants pourront :

• Déployez Apache Kafka sur un serveur basé sur le cloud.
• Implémentez le chiffrement SSL pour prévenir les attaques.
• Ajoutez l'authentification ACL pour suivre et contrôler l'accès des utilisateurs.
• Assurez-vous que les clients crédibles ont accès aux clusters Kafka avec l'authentification SSL et SASL.

Format du cours

• Conférence interactive et discussion.
• Beaucoup d'exercices et de pratique.
• Mise en œuvre pratique dans un environnement de laboratoire en direct.

Options de personnalisation de cours

• Pour demander une formation personnalisée pour ce cours, s'il vous plaît contactez-nous pour organiser.

SMACK est une collection de logiciels de plateforme de données, à savoir Apache Spark, Apache Mesos, Apache Akka, Apache Cassandra, et Apache Kafka. Grâce à la barre SMACK, les utilisateurs peuvent créer et échanger des plateformes de traitement des données. Cette formation guidée par des instructeurs, en direct (online ou sur site) est destinée à des scientifiques de données qui souhaitent utiliser le SMACK stack pour construire des plateformes de traitement de données pour des solutions de big data. À la fin de cette formation, les participants seront en mesure de :

Implémentation d'une architecture de pipeline de données pour le traitement de données grandes. Développer une infrastructure de cluster avec Apache Mesos et Docker. Analyse des données avec Spark et Scala. Gérer les données non structurées avec Apache Cassandra.

Le format du cours

Lecture et discussion interactives. Beaucoup d’exercices et de pratiques. La mise en œuvre dans un environnement de laboratoire en direct.

Options de personnalisation de cours

Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour organiser.

Apache Kafka est une plate-forme de traitement de flux à source ouverte qui fournit une plate-forme rapide, fiable et à faible latence pour gérer les analyses de données en temps réel. Apache Kafka peut être intégré avec des langues de programmation disponibles telles que Python. Cette formation guidée par des instructeurs, en direct (online ou sur site) est destinée à des ingénieurs de données, des scientifiques de données et des programmateurs qui souhaitent utiliser Apache Kafka des fonctionnalités en streaming de données avec Python. À la fin de cette formation, les participants seront en mesure d’utiliser Apache Kafka pour surveiller et gérer les conditions dans les flux de données continus en utilisant la programmation Python. Le format du cours

Lecture et discussion interactives. Beaucoup d’exercices et de pratiques. La mise en œuvre dans un environnement de laboratoire en direct.

Options de personnalisation de cours

Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour organiser.

Apache Spark Streaming est un système de traitement scalable et open source qui permet aux utilisateurs de traiter des données en temps réel à partir de sources soutenues. Spark Streaming permet le traitement tolérant des flux de données. Cette formation guidée par des instructeurs, en direct (online ou sur site) est destinée à des ingénieurs de données, des scientifiques de données et des programmateurs qui souhaitent utiliser Spark Streaming des fonctionnalités dans le traitement et l'analyse des données en temps réel. À la fin de cette formation, les participants seront en mesure d’utiliser Spark Streaming pour traiter les flux de données en direct pour l’utilisation dans les bases de données, les systèmes de fichiers et les dashboards en direct. Le format du cours

Lecture et discussion interactives. Beaucoup d’exercices et de pratiques. La mise en œuvre dans un environnement de laboratoire en direct.

Options de personnalisation de cours

Pour demander une formation personnalisée pour ce cours, veuillez nous contacter pour organiser.