Fondamentaux des grands modèles de langage

Fondamentaux des grands modèles de langage

NEOPOLIS · DES COMPÉTENCES POUR VOTRE ENTREPRISE

Fondamentaux des grands modèles de langage

Développez les compétences de votre équipe avec « Fondamentaux des grands modèles de langage ». Exploration des fondamentaux des grands modèles de langage : architecture Transformer, tokenisation, préparation de jeux de données et workflows d’entraînement. Approche technique axée sur la compréhension des composants et des étapes d’entraînement.

Parlons des besoins de votre équipe ↗
Fondamentaux des grands modèles de langage

DE LA FORMATION À L’APPLICATION

Pourquoi envisager ce parcours pour votre entreprise ?

Reliez le prototype IA aux contraintes de production. Une équipe doit pouvoir évaluer la pertinence des réponses, intégrer les données utiles et suivre le fonctionnement de la solution avant d’élargir son usage.

Cadrer une première application utile

Prenez « Fondamentaux des grands modèles de langage » comme point de départ d’un échange avec l’équipe concernée. Sélectionnez une tâche, décrivez le processus actuel et convenez d’une méthode de vérification avant d’utiliser des données métier réelles.

Un premier sujet à discuter : « Fondamentaux des grands modèles de langage ». Appuyez-vous sur le programme ci-dessous pour vérifier son adéquation avec votre projet.

Pistes de cadrage proposées par Neopolis ; elles n’ajoutent pas de résultats garantis ni de livrables au programme Akademy.

Ce que couvre le programme Akademy

Architecture Transformer : mécanismes d’attention, couches de feed-forward et principes d’optimisation.

Tokenizers et représentation des séquences : méthodes de découpage, encodage et gestion des limites de contexte.

Jeux de données : collecte, nettoyage, échantillonnage et préparation pour entraînement supervisé ou par étapes.

Workflows d’entraînement : pipelines de fine-tuning, évaluation, gestion des hyperparamètres et surveillance d’entraînement.

Formation gratuite pour tous les candidats admis. L’accès au parcours reste soumis aux règles d’admission de Neopolis Akademy.

Formation assistée par Wadaa Rihem.

Temps de contenu : 15 heures

Explorer le programme

01Fondamentaux des grands modèles de langage

Fondamentaux des LLM et écosystème : concepts NLP/Transformers, tokenizers, pipelines, fine‑tuning, datasets, Hub, Gradio/Argilla, méthodes d'entraînement, évaluation et RL appliqué aux LLM. Couvre aussi debug et partage de modèles.

Introduit les bases du NLP et des Transformers, leur fonctionnement et comment ces architectures résolvent des tâches via des pipelines.

Explique tokenizers, gestion de séquences, traitement des données, boucles d'entraînement, fine‑tuning (Trainer API, SFTTrainer, LoRA) et compréhension des courbes d'apprentissage.

Présente l'utilisation du Hub pour modèles et datasets, la création/annotation de jeux de données, débogage des pipelines, Gradio pour démos et notions avancées de RL appliqué aux LLM.

Voir sur Akademy ↗

Questions pratiques

Où s’inscrire ?

L’inscription et l’accès à « Fondamentaux des grands modèles de langage » se font sur Neopolis Akademy, une sous-marque de Neopolis Development. Les conditions d’admission sont précisées sur Akademy.

Cette formation est-elle gratuite ?

Akademy indique que cette formation est gratuite pour les candidats admis. L’accès reste soumis à ses règles d’admission. Un accompagnement distinct de votre entreprise est à discuter avec Neopolis.

Programme publié par Neopolis Akademy, une sous-marque de Neopolis Development. Consulter le programme source