Et nytt prosjekt viser hvordan den store språkmodellen Qwen 3.8 Flash Next på 125 milliarder parametere kan kjøres på en vanlig RTX 4090-GPU med en hastighet på rundt 100 token i sekundet.

Kilde: https://github.com/Niko1221/Strata