In-context Learning

In-context Learning is wanneer een taalmodel taken leert van voorbeelden in de prompt zelf, zonder enige fine-tuning. Dit stelt modellen in staat snel aan te passen aan nieuwe taken door eenvoudig voorbeelden toe te voegen.

Dit is een zeer krachtige eigenschap van grote taalmodellen en het is nog steeds niet volledig begrepen hoe dit werkt. Few-shot en zero-shot learning zijn vormen van in-context learning.