59:48Andrej Karpathy
Un ingénieur ayant participé à la création d'OpenAI explique en une heure, dans un anglais clair, ce qu'est réellement un LLM. La section sur la « psychologie d'un LLM » correspond précisément au modèle mental que l'article cherche à transmettre : pourquoi ces modèles hallucinent, pourquoi ils saisissent bien les impressions générales mais comptent mal, et pourquoi l'art du prompt se rapproche davantage de l'accompagnement que du codage.
Ce que vous en retirerez: Construire un modèle mental rationnel des LLM en tant que systèmes de prédiction fondés sur des fenêtres de contexte, des données d'entraînement, l'échantillonnage et des modes de défaillance.
À voir ou à connaître au préalable: Aucun ; la conférence est longue mais accessible aux débutants.
Note d’AI Expert: Cette vidéo reste l'une des meilleures explications conceptuelles. Évitez toutefois de reprendre trop littéralement le vocabulaire anthropomorphique : les modèles ne pensent pas et ne savent rien ; ils génèrent, sous contraintes, les suites les plus probables.
