LLM Internals
Was ist ein Token? Tokens bei ChatGPT einfach erklärt
Was ist ein Token? Lerne, wie ChatGPT & Co. Text in Tokens zerlegen, warum das für Kosten und Kontext zählt und wie BPE Tokenization funktioniert.
Guide lesen
Guides
Die Tiefe zwischen Kurs und Dokumentation: Jeder Guide erklärt eine Entscheidung, die Sie wirklich treffen müssen — inklusive Zielkonflikten.
LLM Internals
BPE-Tokenisierung einfach erklärt: Beispiel & Kosten
Lerne Schritt für Schritt, wie BPE-Tokenisierung funktioniert: mit durchgerechnetem Korpus-Beispiel, Merge-Runden, Vokabular und warum Subwörter Tokenanzahl und Kosten beeinflussen.
Guide lesen