Et nytt verktøy gjør det mulig å kjøre den store språkmodellen Qwen 3.8 Flash Next med 125 milliarder parametere på et vanlig RTX 4090-grafikkort, med en hastighet på 100 tokens per sekund.

Kilde: https://github.com/Niko1221/Strata