AI · GTM Glossary
Tokenizer
The machine that chops text into tokens. Each AI model has its own tokenizer, which is why the same sentence costs differently at Claude vs. GPT. Like different units of measurement: one uses meters, the other uses feet. Same text, different math.
Auf Deutsch
Die Maschine, die Text in Tokens zerlegt. Jedes KI-Modell hat seinen eigenen Tokenizer, weshalb derselbe Satz bei Claude anders kostet als bei GPT. Wie verschiedene Maßeinheiten: eine verwendet Meter, die andere Fuß. Derselbe Text, unterschiedliche Berechnung.
Ready to break into startup GTM?
Apply once, for free, and get matched with startups hiring junior sales, generalist, commercial and techy talent in Berlin, Munich and across Germany.
Apply free