Foundation model
En stor, forudtrænet model trænet på bredt data, der kan finjusteres til en bred vifte af opgaver.
Kort fortalt
En kæmpe AI-model, der er trænet på enorme mængder data og kan tilpasses til mange forskellige opgaver uden at skulle trænes fra bunden.
- Kategori
- model
- Niveau
- øvet
Betydninger
1- 1
En maskinlæringsmodel, typisk en stor neurale netværk, der er forudtrænet på en stor mængde data og kan tilpasses til en bred vifte af nedstrømsopgaver gennem finjustering eller prompting.
- Foundation-modeller som GPT-4 kan bruges til alt fra tekstgenerering til oversættelse. — Stanford CRFM, 2021
Hvornår bruges det
Foundation-modeller anvendes som udgangspunkt for videreudvikling af specifikke applikationer. De reducerer behovet for store datasæt og computermæssige ressourcer, da man kun finjusterer den eksisterende model til en specifik opgave.
Oprindelse
Termen blev populær i 2021 med Stanford's forskning om 'Foundation Models', betegnende store modeller som GPT-3 og BERT.
Afledte ord
2Kilder
1- On the Opportunities and Risks of Foundation Models