Funktionsweise des (Chat)GPT-Modells und anderer Large Language Models (LLMs)
摘要
DieLarge Language Model (LLM)Funktionsweise beeindruckenden Leistungen, die Large Language Models (LLMs) zeigen, sind im im wesentlichen auf ihre Architektur und das umfassende Training zurückzuführen. In diesem Kapitel befassen wir uns daher mit der heute vorherrschenden Architektur, der Transformer-Technologie, und den verschiedenen Trainingsansätzen. Dabei können Sie die Transformer-Technologie entweder etwas vereinfacht und leicht verständlich kennenlernen („Vorgelperspektive“) oder ein klein wenig tiefer einsteigen, wenn Sie Interesse haben.