Hyperparameters zijn configuratievariabelen van een machine learning model die niet uit gegevens worden geleerd, maar vooraf door de onderzoeker worden ingesteld. Ze controleren aspecten van het trainingsproces en de modelarchitectuur.
In tegenstelling tot regelmatige parameters (gewichten in het netwerk) worden hyperparameters niet automatisch bijgewerkt tijdens training. Het vinden van de juiste hyperparameters is essentieel voor modelperformance en wordt vaak gedaan door experimenten of geavanceerde technieken als Bayesiaanse optimalisatie.