NEOPOLIS · DES COMPÉTENCES POUR VOTRE ENTREPRISE
Fondamentaux des grands modèles de langage
Développez les compétences de votre équipe avec « Fondamentaux des grands modèles de langage ». Exploration des fondamentaux des grands modèles de langage : architecture Transformer, tokenisation, préparation de jeux de données et workflows d’entraînement. Approche technique axée sur la compréhension des composants et des étapes d’entraînement.
Parlons des besoins de votre équipe ↗
DE LA FORMATION À L’APPLICATION
Pourquoi envisager ce parcours pour votre entreprise ?
Reliez le prototype IA aux contraintes de production. Une équipe doit pouvoir évaluer la pertinence des réponses, intégrer les données utiles et suivre le fonctionnement de la solution avant d’élargir son usage.
Cadrer une première application utile
Prenez « Fondamentaux des grands modèles de langage » comme point de départ d’un échange avec l’équipe concernée. Sélectionnez une tâche, décrivez le processus actuel et convenez d’une méthode de vérification avant d’utiliser des données métier réelles.
Un premier sujet à discuter : « Fondamentaux des grands modèles de langage ». Appuyez-vous sur le programme ci-dessous pour vérifier son adéquation avec votre projet.
Pistes de cadrage proposées par Neopolis ; elles n’ajoutent pas de résultats garantis ni de livrables au programme Akademy.
Ce que couvre le programme Akademy
Architecture Transformer : mécanismes d’attention, couches de feed-forward et principes d’optimisation.
Tokenizers et représentation des séquences : méthodes de découpage, encodage et gestion des limites de contexte.
Jeux de données : collecte, nettoyage, échantillonnage et préparation pour entraînement supervisé ou par étapes.
Workflows d’entraînement : pipelines de fine-tuning, évaluation, gestion des hyperparamètres et surveillance d’entraînement.
Formation gratuite pour tous les candidats admis. L’accès au parcours reste soumis aux règles d’admission de Neopolis Akademy.
Formation assistée par Wadaa Rihem.
Temps de contenu : 15 heures
Explorer le programme
01Fondamentaux des grands modèles de langage
Fondamentaux des LLM et écosystème : concepts NLP/Transformers, tokenizers, pipelines, fine‑tuning, datasets, Hub, Gradio/Argilla, méthodes d'entraînement, évaluation et RL appliqué aux LLM. Couvre aussi debug et partage de modèles.
Introduit les bases du NLP et des Transformers, leur fonctionnement et comment ces architectures résolvent des tâches via des pipelines.
Explique tokenizers, gestion de séquences, traitement des données, boucles d'entraînement, fine‑tuning (Trainer API, SFTTrainer, LoRA) et compréhension des courbes d'apprentissage.
Présente l'utilisation du Hub pour modèles et datasets, la création/annotation de jeux de données, débogage des pipelines, Gradio pour démos et notions avancées de RL appliqué aux LLM.
Voir sur Akademy ↗Questions pratiques
Où s’inscrire ?
L’inscription et l’accès à « Fondamentaux des grands modèles de langage » se font sur Neopolis Akademy, une sous-marque de Neopolis Development. Les conditions d’admission sont précisées sur Akademy.
Cette formation est-elle gratuite ?
Akademy indique que cette formation est gratuite pour les candidats admis. L’accès reste soumis à ses règles d’admission. Un accompagnement distinct de votre entreprise est à discuter avec Neopolis.
Programme publié par Neopolis Akademy, une sous-marque de Neopolis Development. Consulter le programme source
