Innlegget argumenterer for at det er unødvendig og kostbart å kjøre alle AI-oppgaver gjennom store språkmodeller. Deterministiske alternativer kan gi raskere, billigere og mer pålitelige resultater for mange bruksområder.
Kilde: https://www.vybe.build/blog/learn-what-not-to-tokenize