セクション: Ressources | Modélisation des langues

CM 01 - Static Semantic Representation ファイル

Lab: play with short, static and dense word representations URL

CM 02 - Transformer architecture ファイル

Lab - comprendre l'architecture du Transformer ページ

CM 03 - Deeper with Transformers ファイル

Lab: Model size URL

Lab: Generative sampling techniques URL

CM 04 - Pre-training, Prompting or Fine-tuning LLMs ファイル

Lab: Instructed model and prompting (zero and few shots) URL

CM 05 - Reducing learning and inference costs ファイル

Lab: full vs parameter efficient fine-tuning URL

CM 06 - Aligning language models with human preferences ファイル

Lab: Direct Preference Optimization (DPO) Using Hugging Face URL

Lab: Reinforcement Learning from Human Feedback Using PPO URL

セクションアウトライン