Perustusmalli
Tunnetaan myös: perusmalli, foundation model
Mikä on Perustusmalli?
Laajalla datalla koulutettu suuri malli, jonka päälle rakennetaan monta erilaista sovellusta sen sijaan, että jokaiseen tehtävään koulutettaisiin oma malli. Nykyiset suuret kielimallit ovat perustusmalleja. Malli sovitetaan omiin tarpeisiin, ei kouluteta alusta asti itse. Kyvykkäimpiä kutsutaan usein huippumalleiksi (frontier model). Termin loivat Stanfordin tutkijat vuonna 2021.
Miksi tällä on väliä
Perustusmalli on laajalla datalla koulutettu suuri malli, jonka päälle rakennetaan monta erilaista sovellusta. Erillistä mallia jokaiseen tehtävään ei tarvita, ja nykyiset suuret kielimallit ovat juuri tällaisia. Tämä muutti sen, kuka voi käyttää edistynyttä tekoälyä. Datan keräämiseen ja mallin kouluttamiseen alusta asti on varaa harvalla organisaatiolla; sen sijaan yritys sovittaa olemassa olevan perustusmallin tarpeisiinsa. Se madalsi kynnystä valtavasti. Vastineeksi tulee riippuvuus: rakennat jonkun toisen kouluttaman mallin varaan, ja sen data, rajat ja vinoumat tulevat mukana valmiiksi leivottuina.
Käytännössä
Startup rakentaa juridisten dokumenttien avustajan sovittamalla yleisen perustusmallin omaan aineistoonsa sen sijaan, että kouluttaisi kielimallin tyhjästä, mikä maksaisi enemmän kuin koko yritys on arvoltaan. Tämä on nykyään normaali kaava. Laaja pohjamalli otetaan ja erikoistetaan joko hienosäätämällä tai syöttämällä sille omat dokumentit kyselyhetkellä. Sama kaava on määritellyt, miten moderni tekoäly rakennetaan.
