Support & Downloads

Quisque actraqum nunc no dolor sit ametaugue dolor. Lorem ipsum dolor sit amet, consyect etur adipiscing elit.

s f

Contact Info
198 West 21th Street, Suite 721
New York, NY 10010
youremail@yourdomain.com
+88 (0) 101 0000 000
Follow Us

Formation Talend - Intégration de données pour le Big Data

       réf : BDT-TA

Formation Talend - Intégration de données pour le Big Data

Objectifs de formation : Talend est un outil d’intégration de données puissant et open source. Il permet de connecter facilement différentes sources de données et de les nettoyer, les transformer et les combiner dans des flux de données cohérents. Cette formation vous apprendra à utiliser Talend pour intégrer vos Big Data avec d’autres sources de données, en les préparant pour l’analyse et le reporting. Vous apprendrez à utiliser Talend Studio pour créer des Jobs qui peuvent être exécutés dans le cloud ou sur site, facilitant ainsi le démarrage de l’analyse des Big Data.

Objectifs pédagogiques

  • Maîtriser Talend dans un environnement Big Data
  • Se servir de Talend comme lien entre les fichiers, applications et bases de données
  • Acquérir la philosophie de l’outil
  • Adopter des bonnes pratiques et concevoir des Systèmes d’informations flexibles et robustes
  • Être capable d’implémenter ses Jobs
  • Lire et écrire des données sur HDFS et dans des bases de données NoSQL avec des Jobs Talend
  • Réaliser des Jobs de transformation à l’aide de Pig et Hive
  • Gérer la qualité de la donnée avec Talend
  • Utiliser Scoop pour faciliter la migration de bases de données relationnelles dans Hadooo
  • Maîtriser l’utilisation de la bibliothèque de composants
  • Effectuer des traitements ETL (Extraction, Transform and Load) simple et complexes de bout en bout

Pré-requis

Avoir des connaissances en Hadoop, Spark et Kafka

Public concerné

Consultants BI, Architectes, Chefs de projets, Gestionnaires de données, Toute personne devant gérer des flux de données

Programme de formation Talend

  • Introduction : présentation, définitions, forces & faiblesses
  • Versions & compatibilité
  • Installation
  • Création d’un projet
  • Monitoring d’un cluster Hadoop
  • Construction d’un cluster de métadonnées
  • Stockage d’un fichier
  • Stockage de plusieurs fichiers
  • Lecture de données
  • Utilisation de HBase pour la sauvegarde des données
  • Présentation de Sqoop
  • Importation de tables avec Sqoop
  • Présentation d’Hive
  • Création de tables dans HDFS avec Hive
  • Utilisation d’Hive pour le traitement des tables avec des jobs
  • Utilisation d’Apache Pig pour le traitement des données
  • Traitement des données par lots
  • Guide de dépannage
  • Mise en oeuvre du dépannage
  • Surveillance du Cluster Hadoop
  • Construction d’un environnement de développement
  • Chargement des données HDFS
  • Enrichissement des logs
  • Calcul & suivi des statistiques
  • Création d’un lot Big Data à partir d’un job standard
  • Jobs MapReduce
  • Configuration des resource requests vers YARN à l’aide du studio
  • Cas pratique : Chargement d’un dictionnaire dans HDFS, incorporation de contenu avec MapReduce & planification de l’exécution du job
  • Surveillance du cluster Hadoop
  • Comprendre les bases de kafka
  • Publication de messages sur un sujet
  • Consommer des messages
  • Compréhension des bases de Spark
  • Analyse des données des clients
  • Production & consommation des messages en temps réel
  • Génération de logs bruts
  • Génération de logs enrichis
  • Surveillance des logs enrichis
  • Création de rapports à partir des fenêtres de données
  • Ingestion de flux de données
  • Analyse de logs à partir d’un batch job

Équipe pédagogique

Professionnel expert technique et pédagogique

Moyens pédagogiques et techniques

  • Espace intranet de formation.
  • Documents supports de formation projetés.
  • Exposés théoriques
  • Étude de cas concrets
  • Mise à disposition en ligne de documents supports à la suite de la formation.

Dispositif de suivi

  • Émargement numérique.
  • Mises en situation.
  • Formulaires d’évaluation de la formation.
  • Certificat de réalisation de l’action de formation Talend.

Vous avez une question ?