Formation en IA & Data: Hadoop Cloudera - Architecture & administration - Ascent Formation
Retour aux formations
IA & Data

Formation Hadoop Cloudera - Architecture & administration

5 jour(s) • 35h
Éligible OPCO
8,8/10 avis apprenants

Description

Objectif de formation : L'apprenant saura au terme de cette formation comprendre l'architecture d'Hadoop Cloudera et l'administrer pour ses projets.

  • Appréhender le framework Hadoop
  • Administrer des clusters Cloudera

  • Administrateurs système et consultants SI…

  • Maîtriser les commandes Shell
  • Avoir des connaissances de base autour des requêtes SQL

  1. 1

    Introduction

    • La Big Data
    • L’écosystème Hadoop
    • L’architecture Hadoop
    • NoSQL
    • Travaux pratiques: présentation des outils Cloudera Distributed Hadoop (CDH), Cloudera Manager
  2. 2

    Les clusters avec Cloudera

    • Tour d’horizon des fonctionnalités des clusters
    • Pourquoi une solution de gestion de cluster ?
    • Cloudera Manager : caractéristiques
    • L’installation d’un cluster : éléments nécessaires
  3. 3

    Gestion des usagers

    • Utilisateurs et groupes
    • Privilèges des utilisateurs locaux et LDAP
  4. 4

    Configuration d'un cluster Cloudera

    • Introduction
    • Réglages de configuration
    • Fichiers de configuration
    • Instances de rôle
    • Nouveaux services
    • Créer ou retirer des hôtes
    • Travaux pratiques: configuration du cluster
  5. 5

    Les fichiers distribués Hadoop: le système HDFS

    • Fonctionnalités HDFS
    • Écriture de fichiers
    • Lecteur de fichiers
    • Mémoire NameNode
    • Sécurité HDFS
    • Stockage HDFS
    • Utilisation de Hadoop File Shell
    • Travaux pratiques: manipuler des fichiers via HDFS
  6. 6

    YARN, MapReduce & Spark

    • L’utilisation des frameworks de calcul
    • La gestion des ressources de cluster : YARN
    • MapReduce
    • Spark
    • L’utilisation des frameworks de calcul sur YARN
    • L’interface Web et Shell : explorer les applications YARN
    • Les logs applicatifs
  7. 7

    Intégration des données HDFS

    • Intégration des données par des sources externes : Flume, Nifi & Kafka
    • Intégration des données par des bases de données relationnelles avec Sqoop
    • Les Best Practices pour l’importation de données
  8. 8

    Planifier le cluster

    • Introduction à la planification
    • Sélection du matériel
    • Virtualisation
    • La gestion des réseaux
    • Paramétrages des nœuds
  9. 9

    Installation et configuration d'outils

    • Hive
    • Impala
    • Pig
  10. 10

    Clients Hadoop avec Hue

    • Paramétrage des clients Hadoop
    • Paramétrage de la teinte
    • Système d’authentification et d’autorisation avec Hue
  11. 11

    Configuration avancée du cluster

    • Configurations avancées
    • Réglages des ports Hadoop
    • Sensibilisation au rack : paramétrage de HDFS
    • Haute disponibilité et HDFS
  12. 12

    La sécurité sous Hadoop

    • Pourquoi la sécurité ?
    • Le système de sécurité d’Hadoop
    • Kerberos: présentation, fonctionnement, sécurisation d’un cluster Hadoop
    • Les autres principes de sécurité
  13. 13

    La gestion des ressources

    • Paramétrage des Cgroups & pools de services statistiques
    • Planification des ressources
    • Paramétrage des pools de ressources dynamiques
    • Mémoire YARN
    • Réglages du CPU
    • Planifier des requêtes Impala
  14. 14

    Entretien du cluster

    • Vérification de l’état HDFS
    • Copier les données vers un autre cluster
    • Ajout et suppression de node de cluster
    • Rééquilibrage du cluster snapshots de répertoires
    • Mise à niveau du cluster
  15. 15

    Suivi & débogage

    • Fonctionnalité de suivi de Cloudera Hadoop
    • Tests de santé
    • Suivi des clusters
    • Dépannage des clusters

Ils nous font Confiance

Nos partenaires de confiance

Ministère des armées
Thalès
Dassault Systèmes
Ariane Group
EDF
SNCF
Orange Cyberdefense
Total
Société Générale
Ministère de l'Intérieur
Boston Consulting Group
Crédit Agricole
Capgemini
Sopra Steria
Ministère de l'économie
Bouygues Télécom
Devoteam
Imprimerie Nationale
Business France
Ordre National des Pharmaciens
Abeille Assurances
Macif
Service Public Fédéral Finances
ANFH
Bruxelles Formation
Atlas OPCO
Uniformation
Adeo
Positive Thinking Company
Sogelink
Septeo
HN Services
Infotel
Ercom
Neosoft
Klaxoon
Asus
Linkvalue
Suneris
Datadocké

Questions fréquentes

FAQ : Formation Hadoop Cloudera - Architecture & administration

  • Oui, mais la prise en charge d'une formation professionnelle par un OPCO dépend de votre opérateur de compétences, de votre branche d'activité et des critères de financement applicables. Ascent Formation vous accompagne dans l'identification des possibilités de financement adaptées à votre entreprise.

  • Une formation inter-entreprises réunit des participants issus de différentes organisations, tandis qu'une formation intra-entreprise est organisée pour les collaborateurs d'une même entreprise. Le format intra permet notamment d'adapter le contenu et les modalités aux besoins spécifiques de vos équipes.

  • Selon la formation proposée, il est possible de suivre une formation professionnelle à distance, en présentiel ou selon d'autres modalités disponibles. Consultez les informations de la session concernée ou contactez-nous pour connaître les formats possibles.

  • Oui, une formation professionnelle peut être adaptée aux objectifs, au niveau des participants et aux besoins opérationnels de votre entreprise. Ascent Formation vous propose des parcours personnalisés pour accompagner le développement des compétences de vos équipes.