Vielleicht haben Sie bemerkt, dass die Abonnementpläne von Gamma eine bestimmte Anzahl von KI-Token enthalten, und sich gefragt, was genau ein Token ist?
Gamma verwendet OpenAIs Definition eines Tokens:
Token kann man sich als Teile von Wörtern vorstellen. Bevor die API die Anfrage verarbeitet, wird die Eingabe in Token zerlegt. Diese Token werden nicht genau dort zerlegt, wo die Wörter beginnen oder enden - Token können Leerzeichen am Ende und sogar Teilwörter enthalten.
Wie Wörter in Token aufgeteilt werden, ist ebenfalls sprachabhängig. Zum Beispiel enthält "Cómo estás" ("Wie geht es dir" auf Spanisch) 5 Token (für 10 Zeichen). Das höhere Token-zu-Zeichen-Verhältnis kann die Implementierung der API für andere Sprachen als Englisch teurer machen.
Gammas Plus-Abonnementplan erlaubt bis zu 50k KI-Token pro Generation, und Gammas Pro-Abonnementplan erlaubt bis zu 100k KI-Token pro Generation.
OpenAI bietet einen kostenlosen Tokenizer an, den Sie verwenden können, um zu verstehen, wie ein Textstück von einem Sprachmodell in Token umgewandelt werden könnte, und um die Gesamtzahl der Token in diesem Textstück zu ermitteln: https://platform.openai.com/tokenizer