Grundlagen generativer KI · Frage 6 von 60
Was ist ein Token in einem Sprachmodell?
1 Antwort ist richtig. Einfach Mit KI erstellt
Lösung anzeigen
Lösung
- A Eine kleine Texteinheit, etwa ein Wortteil
Erklärung
Bei der Tokenisierung wird Text in kleinere Einheiten zerlegt. Ein Token kann ein einzelnes Zeichen, ein Wortteil oder ein ganzes Wort sein. Der Zugangsschlüssel einer API heißt zwar umgangssprachlich auch Token, ist hier aber nicht gemeint.