BC Skills Academy

Architecture des LLM & Transformers

La plongée en profondeur définitive dans le fonctionnement réel des grands modèles de langage

Key facts

About the Architecture des LLM & Transformers certification

Une certification de niveau professionnel couvrant l'anatomie complète des grands modèles de langage à décodeur uniquement. Vous raisonnerez avec précision sur la tokenisation et l'encodage par paires d'octets (BPE), les embeddings et le partage de poids, les encodages positionnels (sinusoïdaux, appris, RoPE, ALiBi), les mathématiques du produit scalaire mis à l'échelle et de l'attention multi-têtes, le cache KV et les techniques de gestion du long contexte telles que FlashAttention, l'attention à fenêtre glissante et l'attention par requête groupée. L'examen évalue une compréhension approfondie et actuelle du placement de la normalisation, des fonctions d'activation, du mélange d'experts, de la précision numérique, des lois d'échelle et de l'échantillonnage — au niveau attendu d'un ingénieur en IA qui construit et débogue des modèles Transformer en production.

Course outline

The Architecture des LLM et Transformers — Guide d'étude course covers:

  1. Entrées : tokenisation, plongements et encodage positionnel — Comment le texte brut devient les vecteurs sensibles à la position qu'un transformateur consomme. (4 lessons)
  2. Le mécanisme d'attention — Attention produit scalaire mise à l'échelle, masquage causal, multi-têtes et la boîte à outils pour longs contextes. (4 lessons)
  3. Le bloc transformateur et l'empilement — Connexions résiduelles, normalisation, réseau feed-forward et empilement de N blocs en un décodeur. (4 lessons)
  4. Des logits au texte et passage à l'échelle — Logits, softmax, stratégies d'échantillonnage, précision, lois de passage à l'échelle et mélange d'experts. (4 lessons)

Frequently asked questions

Is the Architecture des LLM & Transformers certificate verifiable?
Yes. Every certificate issued by BC Skills Academy carries a unique credential ID that anyone can check on the public verification page.
How is the Architecture des LLM & Transformers exam structured?
It is a timed, randomized multiple-choice exam of 70 questions in 100 minutes, graded instantly; you need 75% to pass.
Can I get a refund?
Full refund within 7 days of purchase if you have not started the exam. Once the exam has been started or completed, the purchase is no longer refundable.

Related certifications