IA & Data

Formation NLP avec les Transformers – Initiation : Comprendre et utiliser BERT et GPT

3 jour(s) • 21h

Éligible OPCO

8,8/10 avis apprenants

Description

Comprendre les bases du NLP moderne et des modèles Transformers, et être capable d’utiliser des modèles pré-entraînés pour des cas d’usage simples en entreprise.

Comprendre les fondamentaux du NLP
Identifier le rôle des modèles Transformers
Utiliser des modèles pré-entraînés pour des tâches simples
Prendre en main la librairie Hugging Face
Réaliser une première adaptation de modèle
Interpréter les résultats d’un modèle NLP
Identifier des cas d’usage métier pertinents

Data analysts
développeurs
ingénieurs IT
chefs de projet data souhaitant découvrir le NLP moderne

Bases en Python
Notions générales en data (manipulation de données)
Aucune expérience préalable en NLP avancé requise

1
JOUR 1- Module 1 – Fondamentaux du NLP (3h)
- Définition et enjeux du NLP en entreprise
- Cas d’usage : classification, chatbot, analyse de sentiment
- Notions clés : tokens, corpus, embeddings
- Limites des approches classiques
- Activité pratique : Exploration d’un cas NLP simple
2
Analyse d’un dataset texte (emails ou avis clients)
3
Identification des problématiques métier associées
4
JOUR 1- Module 2 – Introduction aux Transformers (4h)
- Pourquoi les Transformers ont révolutionné le NLP
- Principe simplifié de l’attention
- Différence entre modèles classiques et Transformers
- Vue d’ensemble de BERT et GPT
- Activité pratique : Visualisation du mécanisme d’attention
5
Analyse simplifiée des relations entre mots dans une phrase
6
Utilisation d’outils de visualisation de l’attention
7
JOUR 2- Module 3 – Prise en main de Hugging Face (3h)
- Présentation de Hugging Face et du Hub
- Utilisation des pipelines NLP
- Tokenisation et préparation des textes
- Exécution de modèles prêts à l’emploi
- Activité pratique : Premiers modèles NLP
8
Utilisation d’un pipeline de classification de texte
9
Test sur différents jeux de données
10
JOUR 2- Module 4 – Cas d’usage avec BERT (4h)
- Présentation simplifiée de BERT
- Tâches principales : classification, NER, QA
- Lecture et interprétation des résultats
- Introduction au fine-tuning (conceptuel)
- Activité pratique : Classification de textes avec BERT
11
Utilisation d’un modèle BERT pré-entraîné
12
Analyse des prédictions sur données métier
13
JOUR 3- Module 5 – Introduction aux modèles GPT (3h)
- Fonctionnement simplifié des modèles génératifs
- Différences entre BERT et GPT
- Cas d’usage : génération, résumé, chatbot
- Introduction au prompt engineering
- Activité pratique : Génération de texte simple
14
Création de prompts pour générer du contenu
15
Comparaison de différents outputs
16
JOUR 3- Module 6 – Évaluation et bonnes pratiques (4h)
- Introduction aux métriques : précision, rappel, F1
- Comprendre les limites des modèles
- Biais et qualité des données
- Bonnes pratiques d’intégration en entreprise
- Activité pratique : Analyse des performances d’un modèle
17
Évaluation simple d’un modèle de classification
18
Identification des erreurs et axes d’amélioration

Ils nous font Confiance

Nos partenaires de confiance

Questions fréquentes

FAQ : Formation NLP avec les Transformers – Initiation : Comprendre et utiliser BERT et GPT

Oui, mais la prise en charge d'une formation professionnelle par un OPCO dépend de votre opérateur de compétences, de votre branche d'activité et des critères de financement applicables. Ascent Formation vous accompagne dans l'identification des possibilités de financement adaptées à votre entreprise.
Une formation inter-entreprises réunit des participants issus de différentes organisations, tandis qu'une formation intra-entreprise est organisée pour les collaborateurs d'une même entreprise. Le format intra permet notamment d'adapter le contenu et les modalités aux besoins spécifiques de vos équipes.
Selon la formation proposée, il est possible de suivre une formation professionnelle à distance, en présentiel ou selon d'autres modalités disponibles. Consultez les informations de la session concernée ou contactez-nous pour connaître les formats possibles.
Oui, une formation professionnelle peut être adaptée aux objectifs, au niveau des participants et aux besoins opérationnels de votre entreprise. Ascent Formation vous propose des parcours personnalisés pour accompagner le développement des compétences de vos équipes.