Traitement et gestion de Big data en temps réel avec Spark et Kafka

Traitement et gestion de Big data en temps réel avec Spark et Kafka

0
(0 Évaluations)

Par IDRISSI

Français

Date Début : 08/11/2025 Date Fin : 12/11/2025

Ce que vous apprendrez ?

  • Comparer et contraster différentes approches de gestion des données en temps réel, incluant les aspects de scalabilité et de tolérance aux pannes.
  • Déboguer et optimiser des applications Spark et Kafka pour le traitement de Big Data en temps réel.
  • Évaluer les performances de différents algorithmes de traitement de données en temps réel sur de grands ensembles de données.
  • Implémenter des pipelines de traitement de données en temps réel en utilisant Spark Streaming et Kafka.
  • Décrire l'architecture et les composants clés de Spark et Kafka pour le traitement de données en temps réel.

Prérequis

  • Notions fondamentales en Big Data et architectures distribuées Bases en programmation Scala ou Python pour Spark Compréhension du modèle de programmation de Spark (RDD, DataFrame, Dataset) Familiarité avec les systèmes de messagerie et streaming (Kafka, RabbitMQ, etc.) Connaissance des bases de données distribuées et stockage (HDFS, Parquet, Cassandra, etc.) Notions en gestion des flux de données en temps réel (Spark Streaming, Kafka Streams, Flink, etc.) Expérience en déploiement et gestion des clusters Big Data (YARN, Kubernetes, Docker, etc.

Contenu de la Formation

Total: 20 Chapitres Total hours: 6-12
  • Définition et enjeux du Big Data
  • Introduction à Apache Spark : Architecture et Fonctionnement
  • RDDs et Transformations
  • Actions et Optimisations de base
  • Introduction à Spark Streaming
  • DStreams et opérations de base
  • Fenêtrage et agrégation
  • Intégration avec des sources de données externes
  • Architecture et concepts de base de Kafka
  • Produire et consommer des messages avec Kafka
  • Intégration de Kafka avec Spark Streaming
  • Gestion des erreurs et des fautes
  • Conception d'une application de traitement de données en temps réel
  • Mise en œuvre d'une pipeline de traitement de données
  • Tests et débogage d'applications Spark Streaming
  • Optimisation des performances
  • Etude de cas concrets de traitement de données en temps réel
  • Meilleures pratiques pour le développement d'applications Spark et Kafka
  • Sécurité et scalabilité des applications
  • Défis et perspectives futures du Big Data en temps réel

À TÉLÉCHARGER

Détails du cours en PDF

À propos de l'instructeur

Avatar image
IDRISSI

nouhaila.idrissi@openskillroom.com

Nouhaila IDRISSI est Maître de conférences en Informatique et en Intelligence Artificielle. Après avoir terminé ses études à l’ENSIAS, elle a obtenu un doctorat en informatique et en apprentissage profond de l’École Mohammadia d'ingénieurs (EMI). Notre formatrice dispose de compétences pluridisciplinaires et complémentaires en IA, Big Data, Machine Learning, Deep Learning, NLP, Data Warehousing, BI et Cloud computing. Parallèlement à ses activités académiques, Dr IDRISSI est une collaboratrice active dans le milieu industriel, contribuant à combler le fossé entre la recherche académique et les applications du monde réel.

Retour des Apprenants

Avis

Pour ajouter un avis sur le cours, vous devez d'abord vous connecter. Connectez-vous ici

course-img

Aperçu de ce cours

2730 DH 35% off

4 days Restant à ce prix !

Caractéristiques du cours

  • Durée 6-12 hour
  • Language Français
  • Niveau de compétence.
  • CertificateNon
  • Nombre maximum d'inscrits
  • Type de formation

Cours connexes

Related course image
Comment définir des analyseurs dans Elasticsearch ?
Ehabib Benlahmer

4 200,00 DH

Related course image
Comment créer des dashboards interactifs dans Kibana ?
ENNANIA

4 200,00 DH

Related course image
Comment créer des analyseurs personnalisés dans Elasticsearch ?
Ehabib Benlahmer

4 200,00 DH

Related course image
Maîtrisez la gestion des flux de données en temps réel avec Kafka
ENNANIA

4 200,00 DH

Related course image
Créer et Automatiser vos workflows de données comme un pro avec KNIME
ENNANIA

4 200,00 DH

Plus de cours par IDRISSI

Image du cours
Création d’un Système de Collaboration Interne pour les Entreprises avec Windows Server 2019

Date Début : 04/04/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Nouveau
Administration de Serveurs à Distance avec PowerShell et Windows Server 2019

Date Début : 01/07/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Nouveau
Installation et Configuration d’un Domaine Active Directory sous Windows Server 2019, Gestion des Serveurs DNS, DHCP, IIS, Virtualisation avec Hyper-V et Gestion Avancée des Group Policies (GPO)

Date Début : 10/07/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Administration Windows Server 2019, Gestion des Rôles et Fonctionnalités

Date Début : 02/06/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Nouveau
Migration d’Applications vers AWS : Stratégies et Bonnes Pratiques

Date Début : 29/05/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Gestion et Sécurisation des Données dans le Cloud avec AWS S3 et IAM

Date Début : 21/05/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Conception d’Architectures Cloud Évolutives avec AWS EC2, ELB et Auto Scaling

Date Début : 14/05/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Avancé
Amazon S3, EC2 et RDS : Stockage, Calcul et Bases de Données dans AWS

Date Début : 04/06/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Prise en Main de la Console AWS : Concepts, Services et Applications de Base

Date Début : 05/05/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Avancé
Préparation à la certification Amazon Web Services (AWS) - Cloud Practitioner

Date Début : 04/06/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Optimisation des Stratégies Marketing avec Data Mining et Modèles Prédictifs

Date Début : 08/11/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Prévision des Tendances du Marché avec le Data Mining et les Modèles Régressifs

Date Début : 03/11/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Segmentation Client avec Machine Learning, les techniques de Data Mining et Clustering K-Means

Date Début : 03/11/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Analyse des Comportements d’Achat avec les Règles d’Association (Apriori)

Date Début : 11/10/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Création de Modèles Prédictifs en Data Mining avec Machine Learning

Date Début : 01/07/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Techniques de Réduction de Dimensions en Data Mining : PCA et t-SNE

Date Début : 16/10/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Clustering et Classification Avancée en Data Mining avec Python

Date Début : 12/10/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Découverte de Modèles Cachés dans les Données avec le Data Mining

Date Début : 07/10/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Construire un Data Warehouse pour un système décisionnel avec les outils de BI

Date Début : 08/09/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Analyse multidimensionnelle avec SQL Server, SSAS, SSMS, SSDT, Multidimensional Expressions (MDX) et Data Analysis Expression (DAX)

Date Début : 08/09/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Mise en Place d'une Solution de Business Intelligence (BI) pour la Prise de Décision en Entreprise

Date Début : 03/01/2026

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Création de Modèles OLAP avec SQL Server Analysis Services (SSAS) pour des Analyses Multi-Dimensionnelles

Date Début : 12/12/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Création et Optimisation des Processus ETL avec SQL Server et SQL Server Integration Services (SSIS) : Gestion des Flux de Données Complexes

Date Début : 03/12/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Pentaho Data Integration : Une solution ETL complète

Date Début : 03/12/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Maîtriser la Suite Microsoft Business Intelligence (MSBI) : Création d'un Système BI Complet avec SQL Server, SSIS, SSAS, et SSRS

Date Début : 27/11/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Exploitation de solutions Big Data et NoSQL pour Stocker et Gérer les Données Non Structurées à grande échelle

Date Début : 27/11/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Apache Spark pour le Big Data l'ingénierie des données et l'apprentissage automatique

Date Début : 18/11/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Big Data Analytics avec Spark

Date Début : 13/11/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Architecture et Design de Systèmes Big Data : Intégration de Hadoop, MapReduce, HDFS, HBase, Pig, Spark, Hive, HBase et Kafka

Date Début : 13/11/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Traitement et gestion de Big data en temps réel avec Spark et Kafka

Date Début : 08/11/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
IA Générative pour la Finance : Prédiction de Marchés et Détection de Fraudes

Date Début : 02/02/2026

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Applications d'IA Générative dans le Marketing : Personnalisation, Création de Contenu et Publicités Automatisées

Date Début : 02/02/2026

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Pipeline Complet de Traitement de Données Textuelles avec python, Word Embeddings, Glove et TensorFlow

Date Début : 26/01/2026

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Génération Automatique de Contenu et Créativité Augmentée avec les LLMs

Date Début : 01/05/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Automatisation des Processus RH avec l’IA et les LLMs : Traitement de CV et Génération de Réponses Personnalisées

Date Début : 26/01/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Développement de Chatbots Intelligents avec TensorFlow et NLP avancé

Date Début : 19/01/2026

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Nouveau
Large Language Models (LLMs) au Service de la Relation Client : Chatbots et Assistants Virtuels

Date Début : 19/06/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
NLP et Deep Learning pour le Secteur Bancaire : Détection de Fraude et Analyse des Risques

Date Début : 16/03/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Du Texte aux Insights : Exploiter le Pouvoir du NLP, NLTK, Spacy, Gensim, Bert et GPT

Date Début : 12/01/2026

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Développer un système de Résumé Automatique de Documents avec NLP, Transformers, BERT, et GPT

Date Début : 12/01/2026

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
NLP avec NLTK et Deep Learning pour le Marketing : Personnalisation et Analyse de la Concurrence

Date Début : 01/04/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Automatisation des Processus Documentaires avec spaCy : NER, Tokenisation et Parsing Syntaxique

Date Début : 16/02/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Classification de Textes, Analyse de Sentiments, et Extraction d'Entités Nommées avec NLP, NLTK et spaCy

Date Début : 20/02/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Analyse de Sentiments sur les Réseaux Sociaux avec Natural Language Processing (NLP), NLTK, Transformers, Deep Learning et Python

Date Début : 31/03/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Analyse de Sentiments pour les produits de l’entreprise avec Natural Language Processing (NLP), Deep Learning et Python

Date Début : 01/07/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Pipeline Complet de Machine Learning avec Python : Nettoyage des Données, Feature Engineering et Évaluation

Date Début : 20/04/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Veille concurrentielle de marché par l’IA et Machine Learning: des Modèles Linéaires au Réseaux Profonds

Date Début : 28/04/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Nouveau
Analyser les données de son entreprise avec l’IA et l’IA Générative

Date Début : 10/06/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Segmentation Client et Optimisation des Offres de Produits Financiers avec Deep Learning

Date Début : 09/02/2026

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Transformer les Données Textuelles en Valeur Commerciale et Analyser les Tendances et les préférences du client avec python, NLP, Modèles de Langage Pré-entraînés, Machine Learning, TensorFlow, Keras et systèmes de recommandation

Date Début : 03/06/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Création de Modèles Séquentiels avec Keras pour la Traduction Automatique et le Résumé de Textes

Date Début : 01/04/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Détection d'Anomalies dans les Transactions Financières avec Python, TensorFlow et PyTorch

Date Début : 02/04/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Création de Modèles GANs (Generative Adversarial Networks) pour la Génération d'Images et de Vidéos

Date Début : 28/04/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Détection de Thèmes et Analyse des Opinions avec RNNs et LSTMs sous TensorFlow et Keras

Date Début : 31/03/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Créer un modèle prédictif de Churn Client avec python, SVM et Machine Learning

Date Début : 23/02/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
De la Factorisation Matricielle au Deep Learning : Personnaliser l'Expérience Utilisateur avec l’IA et les systèmes de recommandation intelligents

Date Début : 06/04/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Nouveau
Développement d’un Système de Recommandation Hybride pour les Plateformes de Streaming Vidéo avec Machine Learning et Deep Learning

Date Début : 28/05/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Développement de Systèmes de Recommandation Hybrides : Filtrage Collaboratif et Basé sur le Contenu pour améliorer l'expérience utilisateur et augmenter les ventes

Date Début : 06/05/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Explorez les possibilités infinies de l’IA générative

Date Début : 16/02/2026

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Systèmes de recommandation pour les applications commerciales avec Python, Machine Learning, Deep Learning, Pandas, Tensorflow, keras et Matplotlib

Date Début : 02/04/2025

IDRISSI -35%

0
(0)

2 730,00 DH
4 200,00 DH

Image du cours
Avancé
NLP et Deep Learning pour la détection des fraudes bancaires

Date Début : 23/01/2025

IDRISSI -35%

5
(1)

2 730,00 DH
4 200,00 DH

Image du cours
Avancé
Formation NLP et NLTK pour le marketing

Date Début : 27/01/2025

IDRISSI -35%

5
(1)

2 730,00 DH
4 200,00 DH

Devenir enseignant, Partagez vos connaissances

Rejoignez OpenskillRoom, la plateforme de formations synchrones qui valorise votre expertise.

Entreprise

Formation

Autre

© 2024 Suptechnology. All Rights Reserved.