Term van de dag
Quantization

Quantization is het proces van het omzetten van continue waarden in discrete stappen, meestal voor het comprimeren van machine learning modellen. Het meest gebruikelijk wordt dit toegepast om parameters (gewichten) van een model om te zetten van floating-point getallen naar lagere precisie-waarden.

Quantization vermindert de opslagvereisten en snelheid van computermemoria aanzienlijk, wat het mogelijk maakt modellen efficiënter op hardware uit te voeren. Dit is vooral waardevol voor het inzetten van grote modellen op mobiele apparaten, edge devices of datacenters.

Voorbeeld: Een model kan origineel alle gewichten in 32-bit floating-point waarden opslaan. Door quantization kunnen deze waarden worden geconverteerd naar 8-bit gehele getallen. Dit reduceert de modelgrootte met 75 procent zonder veel verlies in nauwkeurigheid, waardoor het model sneller en efficiënter kan draaien.

📚
Term van de dag archief
Alle AI-termen op één plek. Blader door het volledige archief, gesorteerd op alfabet.