Build a Large Language Model (From Scratch)
Sebastian Raschka baut in Python und PyTorch Schritt für Schritt ein kleines Sprachmodell nach dem Vorbild von GPT-2: Tokenisierung, Embeddings, Aufmerksamkeit, Transformer-Blöcke, Vortraining und Feinabstimmung bis zur Befolgung von Anweisungen – jeder Baustein selbst geschrieben.
