Phase 3 - IA Generative Open Source
Le paper fondateur des Transformers par Vaswani et al. (2017). Lecture essentielle pour comprendre l'architecture.
GratuitExplication visuelle et intuitive de l'architecture Transformer par Jay Alammar.
GratuitGuide officiel pour la génération structurée avec contraintes grammaticales.
GratuitFramework complet pour développer des applications LLM avec chaînage, mémoire, agents.
GratuitGuide complet et maintenu des techniques de prompt engineering par DAIR.AI.
GratuitPlateforme de benchmark crowdsourced avec classement Elo des modèles LLM.
GratuitPar Sebastian Raschka. Construction step-by-step d'un LLM de type GPT en PyTorch.
PayantPar Tunstall, von Werra, Wolf. Guide pratique HuggingFace avec code.
PayantPar Jurafsky & Martin. Référence académique complète du NLP, draft gratuit en ligne.
GratuitPar Chip Huyen. MLOps et engineering des systèmes ML en production.
PayantPar John Berryman & Albert Ziegler. Techniques avancées de prompting.
PayantPar David Foster. Couvre Transformers, Diffusion, GANs avec TensorFlow/Keras.
PayantPar Brian Christian. Philosophie et enjeux de l'alignement de l'IA.
PayantPar Goodfellow, Bengio, Courville. Fondations mathématiques du deep learning.
GratuitPar Andrej Karpathy. Série vidéo construisant un GPT from scratch en PyTorch.
GratuitCours universitaire complet sur le NLP moderne avec Transformers.
GratuitApproche top-down pour le deep learning pratique, inclut NLP et vision.
GratuitCours courts par Andrew Ng sur LangChain, Vector DBs, fine-tuning, prompting.
GratuitCours officiel HuggingFace couvrant Transformers library et fine-tuning.
GratuitPar The Full Stack. Construction d'applications LLM de bout en bout.
GratuitCours MIT avec module sur LLMs et applications génératives.
GratuitModules interactifs sur embeddings, classification, génération par Cohere.
GratuitGénération structurée avec contraintes JSON Schema, regex, grammaires CFG.
Open SourceServeur d'inférence haute performance avec PagedAttention et batching continu.
Open SourceTesting et evaluation de prompts avec assertions, benchmarks, comparaisons.
Open Source57 tâches de connaissances (STEM, humanities, social sciences). 15,908 questions.
GratuitClassement crowdsourced avec Elo ratings basé sur votes humains.
GratuitÉvaluation automatisée sur ARC, HellaSwag, MMLU, TruthfulQA.
GratuitForums officiels pour questions sur transformers, datasets, deployment.
GratuitServeur Discord très actif avec support et discussions sur LangChain.
GratuitCommunauté dédiée au prompt engineering, partage de techniques.
GratuitSuivre chercheurs et praticiens : @karpathy, @ylecun, @AndrewYNg, @soumithchintala.
Gratuit