top of page

Qwen activeert weinig parameters maar alle gewichten vragen geheugen

45 minuten geleden
6 minuten om te lezen

Jack Ma, oprichter van Alibaba (archieffoto, 5 december 2015). Foto: UNclimatechange / Hajue Staudt / Wikimedia Commons / CC BY 2.0. Bron en beeldverantwoording ·

In het kort

Qwen3-Coder-Next en Qwen3.8 laat zien dat een lage tokenprijs of veel context niet automatisch een goedkope productieoplossing oplevert. Qwen noemt onder meer Qwen3-Coder-480B-A35B, 30B-A3B en Coder-Next op basis van Qwen3-Next-80B-A3B. De A-notatie beschrijft actieve parameters per token, maar een lokale server moet nog steeds alle expertengewichten beschikbaar hebben. De Qwen3-opengewichten staan volgens de officiële repository onder Apache 2.0. De beslissende factor is of de technische eigenschap herhaalpogingen, menselijk herstel en infrastructuur werkelijk verlaagt. De omgekeerde rekensom maakt zichtbaar hoeveel aantoonbare tijdwinst nodig is voordat de investering positief wordt.

De marketingzin is eenvoudig: meer context, een lagere cacheprijs of minder actieve parameters maakt kunstmatige intelligentie goedkoper. Voor een ontwikkelteam dat een codingmodel intern wil draaien op eigen GPU-servers is dat hooguit het begin van de analyse. Een organisatie betaalt uiteindelijk voor een gecontroleerd resultaat, niet voor een indrukwekkende eigenschap op een modelkaart.

Mixture-of-experts verlaagt de hoeveelheid rekenwerk per token doordat slechts een deel van het netwerk actief is. Het modelbestand, de gewichten, de contextcache en de runtime moeten echter gezamenlijk in het geheugen passen. Dat maakt de architectuur of tarieftabel relevant voor de begroting, maar alleen wanneer het werkproces hetzelfde gedrag vertoont. De eigen meting moet daarom exact vastleggen welke invoer terugkomt, hoeveel uitvoer ontstaat en welke correcties mensen nog uitvoeren.

Wat er nu werkelijk beschikbaar is

Volgens de officiële Qwen3-Coder-repository geldt op de peildatum het volgende: Qwen noemt onder meer Qwen3-Coder-480B-A35B, 30B-A3B en Coder-Next op basis van Qwen3-Next-80B-A3B. De A-notatie beschrijft actieve parameters per token, maar een lokale server moet nog steeds alle expertengewichten beschikbaar hebben. De Qwen3-opengewichten staan volgens de officiële repository onder Apache 2.0.

Die feiten zijn nuttig, maar ze vormen nog geen onafhankelijke producttest. Leveranciers meten vaak onder vaste instellingen en publiceren resultaten die niet vanzelf iets zeggen over Nederlandse teksten, eigen systemen of de foutschade van een organisatie. Een model dat op een benchmark wint, kan in een specifieke workflow alsnog duurder zijn door verkeerde bronkeuze, ongeldige velden of extra controle.

Beschikbaarheid moet precies worden benoemd. Open gewichten onder Apache 2.0, plus clouddiensten. Een chatdienst, een publieke preview, een API en downloadbare gewichten geven elk een andere mate van controle. Ook een permissieve licentie neemt de plicht tot beveiliging, logging, gegevensminimalisatie en kwaliteitscontrole niet over.

Wie 3 miljard actieve parameters gelijkstelt aan een model van 3 miljard parameters onderschat de benodigde opslag en GPU- of systeemgeheugen. Quantisatie helpt, maar kan kwaliteit, doorvoer en softwarecompatibiliteit veranderen. Daarom hoort de proef niet te eindigen bij een geslaagd voorbeeld. Neem representatieve moeilijke gevallen, een druk moment, een storing en een wijziging van het model of endpoint mee. Pas dan wordt duidelijk of de gekozen route bestand is tegen normaal bedrijfsgebruik.

Een goede testset bevat tussen twintig en honderd echte taken en een vooraf vastgelegde acceptatiegrens. Een antwoord telt alleen als het inhoudelijk klopt, de afgesproken vorm heeft, controleerbare bronnen gebruikt waar dat nodig is en geen inhoudelijke reparatie vraagt. Zo ontstaat een percentage geslaagde taken bij de eerste poging en een reële kostprijs per geaccepteerd resultaat.

Versiebeheer is daarbij geen administratief detail. Modellen, aliassen, runtimes en quantisaties kunnen veranderen. Bewaar een vaste regressieset en noteer model-ID, datum, promptversie en toolinstellingen. Zonder die gegevens is een kwaliteitsdaling achteraf nauwelijks te herleiden.

Waar de kostprijs ontstaat

De kale modelrekening bestaat uit meer dan input en output. Caching kan invoer verlagen, maar alleen bij een echte treffer. Tools kunnen aparte kosten rekenen. Bij lokale modellen verschuift de rekening naar hardware, energie, beheer en afschrijving. Daarboven komen de tijd voor integratie, beveiliging, evaluatie en menselijke controle.

Voor het rekenvoorbeeld nemen we een eenmalige inrichting van € 32.000 en terugkerende kosten van € 11.500 per jaar. Een aantoonbaar vrijgespeeld arbeidsuur waarderen we op € 75. De investering wordt in drie gelijke delen over 2027, 2028 en 2029 verdeeld. Financieringskosten, belastingen en inflatie laten we buiten beschouwing zodat de beslisregel eenvoudig controleerbaar blijft.

De formule is: netto kasbesparing per jaar is bespaarde uren per maand maal twaalf maal € 75, min € 11.500 en min een derde van € 32.000. De drempel is (€ 11.500 plus € 32.000 gedeeld door drie) gedeeld door twaalf maal € 75. Dat komt uit op 24,6 uur per maand.

Die uren tellen alleen wanneer zij werkelijk uit betaald werk verdwijnen of aantoonbaar extra productie mogelijk maken. Dezelfde verbetering mag niet tegelijk als tijdbesparing, foutreductie en extra omzet worden opgenomen. Ook niet-bestede capaciteit is geen voordeel. Een medewerker die sneller klaar is maar geen ander werk oppakt, creëert geen directe kasbesparing.

De omgekeerde berekening voorkomt koopdruk. Eerst wordt vastgesteld welke netto opbrengst nodig is, daarna pas welk model of welke infrastructuur daarbij past. Zo kan een organisatie besluiten dat een eenvoudigere router, betere documentselectie of strengere outputlimiet meer oplevert dan een duurder model.

De scenario’s voor drie jaren

In het lage scenario stijgt de gemeten tijdwinst van 14 uur per maand in 2027 naar 17 uur in 2028 en 20 uur in 2029. In het middenscenario zijn dat 40, 49 en 58 uur. Het hoge scenario gebruikt 86, 103 en 120 uur per maand. De verschillen verbeelden adoptie en procesverbetering, niet een voorspelde modelprijs.

De lage uitkomst laat zien wat er gebeurt wanneer een pilot technisch werkt maar weinig breed wordt gebruikt. Het middenscenario veronderstelt dat teams terugkerende taken standaardiseren en de foutcontrole beheersen. Het hoge scenario vraagt structureel volume, goede bronselectie en voldoende taken met een hoge uurwaarde. Zonder die voorwaarden is het hoge pad geen basisbegroting.

De bedragen zijn netto na de genoemde inrichting en terugkerende kosten, maar vóór belasting en financiering. API-tarieven kunnen wijzigen en lokaal stroomverbruik kan afwijken. Daarom horen ze ieder kwartaal opnieuw te worden ingevuld met facturen, loggegevens en werkelijk geaccepteerde taken.

Wanneer de keuze rationeel wordt

Voor een ontwikkelteam dat een codingmodel intern wil draaien op eigen GPU-servers begint een verstandige proef met het meten van het huidige proces. Noteer per taak de menselijke doorlooptijd, het aantal fouten, de herstelminuten en de externe kosten. Daarna krijgt het model precies dezelfde taken. Alleen het verschil tussen beide routes kan aan de inzet worden toegeschreven.

Documentselectie is vaak de goedkoopste eerste verbetering. Verwijder duplicaten, oude versies en irrelevante bijlagen voordat het model draait. Leg bij ieder antwoord vast welke bronpassages zijn gebruikt. Daardoor dalen tokens en controlewerk tegelijk, zonder dat een grotere context automatisch als voordeel wordt geboekt.

Een router kan eenvoudige taken naar een klein of goedkoop model sturen en alleen risicovolle uitzonderingen escaleren. Dat is vaak robuuster dan alles door het krachtigste model te laten lopen. De router zelf moet wel worden getest, want verkeerd afgeprijsde taken kunnen fouten juist onzichtbaar maken.

Vier meetwaarden zijn voldoende om de eerste maand bestuurbaar te maken. Noteer de kosten per geaccepteerde taak, het percentage dat bij de eerste poging slaagt, de menselijke herstelminuten en de totale doorlooptijd. Bekijk het gemiddelde én de slechtste tien procent. Juist lange uitlopers veroorzaken gemiste deadlines en onverwachte personeelskosten. Een lager gemiddelde zonder verbetering van die staart kan voor tijdkritisch werk nog steeds een slechte keuze zijn.

Gebruik daarnaast een controlegroep. Laat een deel van de taken gedurende de proef via het bestaande proces lopen, zodat seizoensdrukte, nieuwe medewerkers of veranderde documentkwaliteit niet ten onrechte aan het model worden toegeschreven. Vergelijk dezelfde taaksoort en dezelfde acceptatiegrens. Pas wanneer het verschil enkele weken standhoudt, is opschalen verdedigbaar. Deze aanpak kost discipline, maar voorkomt dat één geslaagde demo wordt verward met een structureel verdienmodel.

Beveiliging en continuïteit verdienen een afzonderlijke begrotingsregel. Bepaal welke gegevens de omgeving mogen verlaten, wie logs kan zien, hoe lang invoer wordt bewaard en wat er gebeurt bij uitval. Een reserve-API of handmatige noodroute kost geld, maar kan bij tijdkritisch werk goedkoper zijn dan stilstand.

De conclusie volgt daarom niet uit één prijs of benchmark. Qwen kan economisch aantrekkelijk zijn wanneer de gemeten tijdwinst boven 24,6 uur per maand komt en de kwaliteit onder normale omstandigheden standhoudt. Onder die grens is optimaliseren van het bestaande proces, betere retrieval of een kleinere proef rationeler.

Wie lid is van De Belegger en vragen heeft over deze analyse kan de code GRAAG mailen aan info@debelegger.nl.

 
 
 

Opmerkingen

Beoordeeld met 0 uit 5 sterren.
Nog geen beoordelingen

Voeg een beoordeling toe
00:00 / 01:04

Net binnen..

Bedankt voor het abonneren!

bottom of page