Suurten kielimallien mielenteoria: Systemaattinen kirjallisuuskatsaus arviointimenetelmistä, tuloksista ja metodologisista haasteista
Year: 2026
Type: dissertation
Study design: Systematic Review
Abstract: Tässä tutkimuksessa tarkasteltiin sitä, miten suurten kielimallien (Large Language Models, LLM) mielenteoriaa (Theory of Mind, ToM) on tutkittu aiemmassa tutkimuskirjallisuudessa sekä sitä millaisia tuloksia kielimallit ovat saavuttaneet mielenteorian tehtävissä. Tutkimus toteutettiin systemaattisena kirjallisuuskatsauksena PRISMA 2020 -ohjeiston mukaisesti. Tutkimuskysymykseen 1 haettiin vastausta analysoimalla aiemmissa tutkimuksissa käytettyjä ToM:n arviointimenetelmiä, ja tutkimuskysymykseen 2 niistä tutkimuksista, jotka sisällytettiin kirjallisuuskatsauksen aineistoon. Tulosten perusteella nykyinen aineistossa korostuvat erityisesti kognitiivisen ToM-tehtävät ja väärien uskomusten tehtävät. Affektiivista, dynaamista ja multimodaalista mielenteoriaa käsitteleviä tutkimuksia löytyi selvästi vähemmän, minkä lisäksi tutkimuskenttä osoittautui metodologisesti hajanaiseksi. Kirjallisuuskatsauksen perusteella suuret kielimallit voivat saavuttaa hyviä tuloksia klassisissa mielenteorian tehtävissä, mutta tulosten tulkintaa vaikeuttavat esimerkiksi tehtävärakenteiden vaihteleva hyödyntäminen, train-test contamination sekä tutkimusasetelmien suuri vaihtelu. Tutkimuksen perusteella nykyiset ToM-tehtävät eivät välttämättä mittaa kielimalleilla samaa ilmiötä kuin ihmisillä. Voisikin todeta, että tarve kehittää spesifimpiä arviointimenetelmiä suurten kielimallien mielenteorian tutkimukseen, on tullut esiin tämänkin pro gradu -tutkielman myötä
Author: Mustola, Ville
Language: Finnish
Subfield: Developmental and Educational Psychology
Field: Psychology
Domain: Social Sciences
Open Access status: green
OpenAlex ID: W7199288765