Underklasse | Statistisk modell |
---|---|
Aspekt av | Automatisk naturlig språkbehandling |
I automatisk språkbehandling er en språkmodell en statistisk modell som modellerer fordelingen av ordsekvenser, mer generelt av sekvenser av diskrete symboler (bokstaver, fonemer, ord), på et naturlig språk. En språkmodell kan for eksempel forutsi ordet etter en ordsekvens.
BERT og GPT-3 er språkmodeller.
Bender et al. 2021 setter spørsmålstegn ved relevansen av de enorme pre-trente språkmodellene.