IA & Data

Formation Data Engineering avec Kafka, Cassandre et Spark (4-115)

3 jour(s) • 18h

Éligible OPCO

8,8/10 avis apprenants

Description

Objectif général de la formation : Apprendre à concevoir, développer et maintenir un pipeline data en utilisant les technologies Big Data modernes telles que Kafka, Cassandra et Spark, tout en maîtrisant les concepts de Data Engineering et l'architecture Big Data.

Créer et maintenir un pipeline de données en utilisant les technologies Spark, Cassandra et Kafka.
Comprendre et maîtriser les concepts fondamentaux de ces outils.
Appliquer un cas d’usage concret pour développer une application orientée Data Engineering.
Décrire et analyser une architecture Big Data moderne.

Ingénieurs Big Data, développeurs, architectes de données, responsables techniques impliqués dans la gestion et le traitement des données volumineuses.

Connaissance de base en programmation (Java, Scala ou Python).
Notions fondamentales sur les systèmes distribués et le traitement des données.

1
Jour 1 : Introduction et concepts fondamentaux (6 heures)
- Introduction au Data Engineering et aux technologies Big Data (2 heures)
2
Présentation du Data Engineering et ses enjeux.
3
Concepts clés des pipelines de données et systèmes distribués.
- Présentation de Kafka, Cassandra et Spark (4 heures)
4
Fonctionnalités et cas d’usage de chaque outil.
5
Travaux pratiques : Mise en place des environnements Kafka, Cassandra et Spark.
6
Jour 2 : Développement de pipelines data (6 heures)
- Création et gestion des pipelines de données avec Kafka (2 heures)
7
Configuration et gestion des topics Kafka.
8
Travaux pratiques : Mise en œuvre d’un flux de données temps réel avec Kafka.
- Modélisation et gestion des données avec Cassandra (2 heures)
9
Modélisation des données et gestion des clusters.
10
Travaux pratiques : Création et gestion de tables Cassandra pour le stockage de données.
- Traitement distribué avec Spark (2 heures)
11
Concepts de RDD, DataFrames et SparkSQL.
12
Travaux pratiques : Manipulation de données volumineuses avec Spark.
13
Jour 3 : Applications avancées et architecture Big Data (6 heures)
- Développement d’une application orientée use case (3 heures)
14
Intégration de Kafka, Cassandra et Spark pour résoudre un cas concret.
15
Travaux pratiques : Implémentation d’un pipeline de bout en bout.
- Architecture Big Data (2 heures)
16
Conception et analyse d’une architecture Big Data moderne.
17
Étude des bonnes pratiques et limitations.
- Synthèse et perspectives (1 heure)
18
Discussion sur les évolutions et tendances.
19
Questions-réponses avec les participants.

Ils nous font Confiance

Nos partenaires de confiance

Questions fréquentes

FAQ : Formation Data Engineering avec Kafka, Cassandre et Spark (4-115)

Oui, mais la prise en charge d'une formation professionnelle par un OPCO dépend de votre opérateur de compétences, de votre branche d'activité et des critères de financement applicables. Ascent Formation vous accompagne dans l'identification des possibilités de financement adaptées à votre entreprise.
Une formation inter-entreprises réunit des participants issus de différentes organisations, tandis qu'une formation intra-entreprise est organisée pour les collaborateurs d'une même entreprise. Le format intra permet notamment d'adapter le contenu et les modalités aux besoins spécifiques de vos équipes.
Selon la formation proposée, il est possible de suivre une formation professionnelle à distance, en présentiel ou selon d'autres modalités disponibles. Consultez les informations de la session concernée ou contactez-nous pour connaître les formats possibles.
Oui, une formation professionnelle peut être adaptée aux objectifs, au niveau des participants et aux besoins opérationnels de votre entreprise. Ascent Formation vous propose des parcours personnalisés pour accompagner le développement des compétences de vos équipes.