Formation en IA & Data: Big Data - Architecture et infrastructure - Ascent Formation
Retour aux formations
IA & Data

Big Data - Architecture et infrastructure

5 jour(s)30h

Description

Objectif général de la formation : Permettre aux participants de maîtriser la conception, l’implémentation et la gestion des architectures et infrastructures Big Data pour répondre aux besoins métier et techniques des projets de grande échelle. Durée : 30.00 heures (5.00 jours) Modalité : Toutes les modalités (présentiel, classe virtuelle et hybride) sont possibles Lieu possible de réalisation : Locaux du bénéficiaire ou locaux d’Ascent Formation, en France métropolitaine et dans les DROM-COM Nombre maximal de participants : 20 Niveau SAME visé : Application (A) Compétences visées : Comprendre les principes et les composants des architectures Big Data. Concevoir et déployer des infrastructures adaptées aux projets Big Data. Configurer et optimiser les socles techniques pour le traitement et l'analyse des données volumineuses. Mettre en œuvre des outils et technologies pour des solutions Big Data performantes.

Objectifs pédagogiques

  • Exploiter les architectures Big Data.
  • Mettre en place des socles techniques complets pour des projets Big Data.

Public concerné

Architectes de données souhaitant approfondir leurs compétences en infrastructures Big Data.
Ingénieurs systèmes et administrateurs responsables de la mise en œuvre de solutions Big Data.
Chefs de projets techniques impliqués dans des projets Big Data.

Prérequis

Connaissances générales en systèmes distribués.
Expérience en gestion de bases de données ou plateformes Big Data (Hadoop, Spark).
Notions de programmation (ex. : Python, Java).

Déroulé du programme

1

Jour 1 : Introduction aux architectures Big Data (6 heures)

6h
  • Concepts fondamentaux du Big Data (1 heure)
2

Définition, enjeux et applications du Big Data.

3

Les 5 V : Volume, Vélocité, Variété, Véracité, Valeur.

4

Cas d’usage des architectures Big Data.

  • Les composants des architectures Big Data (2 heures)
5

Présentation des écosystèmes Hadoop et Spark.

6

Concepts de stockage, traitement et orchestration des données.

7

Travaux pratiques : Analyse d’une architecture existante et identification des composants.

  • Introduction à la conception d’infrastructures (3 heures)
8

Analyse des besoins métiers et techniques.

9

Choix des outils et technologies adaptés.

10

Travaux pratiques : Conception d’un schéma d’architecture pour un cas pratique.

11

Jour 2 : Mise en place des socles techniques (6 heures)

6h
  • Installation et configuration des plateformes Big Data (3 heures)
12

Déploiement de clusters Hadoop et Spark.

13

Configuration des ressources matérielles et logicielles.

14

Travaux pratiques : Installer et configurer un cluster Hadoop.

  • Gestion des données volumineuses (3 heures)
15

Stratégies de stockage (HDFS, S3).

16

Gestion des données non structurées et semi-structurées.

17

Travaux pratiques : Configurer un pipeline de données dans un cluster Big Data.

18

Jour 3 : Optimisation des performances et orchestration (6 heures)

6h
  • Optimisation des infrastructures Big Data (3 heures)
19

Techniques pour améliorer les performances de calcul et de stockage.

20

Gestion des ressources dans un cluster (YARN, Kubernetes).

21

Travaux pratiques : Mettre en œuvre des optimisations pour un cluster Hadoop.

  • Orchestration des flux de données (3 heures)
22

Introduction à Apache NiFi et Airflow.

23

Automatisation des pipelines de données.

24

Travaux pratiques : Configurer un flux de données avec Apache NiFi.

25

Jour 4 : Sécurité et supervision des architectures Big Data (6 heures)

6h
  • Sécurisation des infrastructures (3 heures)
26

Configuration des permissions et gestion des accès.

27

Utilisation de Kerberos et des solutions de chiffrement.

28

Travaux pratiques : Implémenter des stratégies de sécurité sur un cluster.

  • Supervision et maintenance (3 heures)
29

Outils de monitoring (Grafana, Prometheus).

30

Résolution des incidents et gestion des logs.

31

Travaux pratiques : Configurer un tableau de bord de supervision.

32

Jour 5 : Étude de cas et mise en œuvre complète (6 heures)

6h
  • Étude de cas pratique (6 heures)
33

Définition des besoins et choix des composants techniques.

34

Déploiement et configuration d’une architecture Big Data complète.

35

Validation des acquis à travers une présentation du projet réalisé.

Informations

Durée

5 jour(s)

30h

Tarif

Sur demande

Prochaines sessions