Vad är tokenoptimering?

Vad är en token?

Språkmodeller läser text i små bitar som kallas tokens. En token kan vara ett helt ord, en del av ett ord, ett mellanslag eller ett skiljetecken. Varje leverantör delar upp texten med sin egen tokenizer, så samma mening kan bli olika många tokens i ChatGPT, Claude eller Gemini. Som tumregel är en token ungefär fyra tecken engelsk text. Svenska blir ofta lite fler tokens per ord.

Vad förbrukar egentligen tokens?

Din synliga prompt är bara en del. En chatt skickar också tidigare meddelanden, bifogade filer, systeminstruktioner och verktygsresultat, och svaret som AI:n skriver kostar också tokens. Vissa tjänster räknar meddelanden eller credits i stället för tokens. Därför hjälper en kortare prompt mest när du skriver många prompter, och därför är den aldrig ett löfte om lägre kostnad.

Fyra sätt att använda färre tokens

• Trimma formuleringarna. Ta bort hälsningar, artighetsfraser och utfyllnadsord. Det är det Typos token-språk gör.
• Skicka mindre sammanhang. Klistra in avsnittet som spelar roll, inte hela dokumentet. Peka på exakt fil i stället för hela mappen.
• Återanvänd sammanhang. Lägg bakgrund du upprepar i ett Projekt eller i anpassade instruktioner i stället för att klistra in den varje gång.
• Fråga en gång, tydligt. En prompt som säger vad du vill ha, i vilket format och med vilka gränser slipper en andra runda.

Det här gör Typos token-språk

Det är ett andra språk i Typo, autokorrekturappen för Windows och Mac. När du skriver i ett AI-verktyg rättar Typo först stavningen. Sedan tar token-språket bort utfyllnad från den rättade texten på den nivå du valt, från 1 (bara städa mellanslag) till 10 (telegramstil). Nivå 3 är standard. Tryck Backspace direkt efter en ändring för att ångra den.

På svenska blir “kan du snälla skriva” till “skriva”. Det läses lite avklippt, men AI-verktyg förstår det utan problem.

Därför är kortare inte alltid bättre

En kortare prompt som tappar en siffra, en gräns eller ett “inte” kostar mer till slut, eftersom du måste fråga igen. Typo är byggt kring det: skyddad text står kvar tecken för tecken, ord som inte, aldrig, bara och måste läggs aldrig till eller tas bort, och varje regel kontrolleras innan den behålls. Misslyckas en kontroll släpps regeln för just den texten.

Prova själv

Klistra in din egen prompt i plattformslabbet, välj AI-verktyg och nivå och se exakt vad som ändras. Det körs i din webbläsare. Inget du klistrar in skickas någonstans.