Skip to main content

AI · GTM Glossary

Attention

Attention (Aufmerksamkeit)

The core mechanism of the Transformer. For each word, the model calculates how important all the other words are for it (mathematically, a weighted dot product) and learns what to 'pay attention to.' That gives LLMs their strong grasp of context.

Auf Deutsch

Der Kernmechanismus des Transformers. Für jedes Wort berechnet das Modell, wie wichtig alle anderen Wörter dafür sind (mathematisch ein gewichtetes Skalarprodukt), und lernt, worauf es 'achten' soll. Dadurch verstehen LLMs Kontext so gut.

Ready to break into startup GTM?

Apply once, for free, and get matched with startups hiring junior sales, generalist, commercial and techy talent in Berlin, Munich and across Germany.

Apply free