Kako algoritmi analiziraju odgovore u online testovima ličnosti

Online test često izgleda jednostavno: označite nekoliko odgovora i za nekoliko sekundi dobijete opis sebe. Ipak, između poslednjeg klika i završnog izveštaja odvija se niz računskih koraka.

Algoritam prevodi odgovore u brojeve, grupiše ih prema osobinama koje test meri, poredi rezultat sa pravilima ili referentnim uzorkom i tek zatim sastavlja objašnjenje.

Razumevanje tog procesa pomaže da rezultat koristimo trezveno, kao povod za razmišljanje, a ne kao konačnu presudu o karakteru.

Prvi korak je pretvaranje odgovora u podatke

Kada su u pitanju psiho testovi ličnosti i emocija, većina online upitnika koristi skalu sa nekoliko ponuđenih odgovora, od potpunog neslaganja do potpunog slaganja. Svakoj opciji dodeljuje se broj, najčešće od 1 do 5, pa rečenica poput „Često odlažem obaveze zbog straha od greške“ postaje numerički podatak.

Na takvim platformama teme mogu obuhvatiti perfekcionizam, emocionalnu zavisnost, nesanicu, inteligenciju ili ADHD. To ne znači da algoritam tih testova meri istu stvar niti da koristi isti model.

Algoritam najpre mora da zna kojoj oblasti pripada svako pitanje, koliko poena nosi odgovor i da li se rezultat računa kao zbir, prosek ili kombinacija više skala.

Bez unapred definisanog ključa, sam broj nema psihološko značenje.

U složenijim sistemima mogu se čuvati i vreme odgovora, preskakanje stavki i naknadne izmene.

Obrnuto bodovanje sprečava automatsko zaokruživanje

Dobra skala obično sadrži pozitivno i negativno formulisane tvrdnje. Ako se savesnost meri izjavama „Završavam posao na vreme“ i „Često ostavljam obaveze nedovršene“, slaganje sa drugom tvrdnjom mora biti bodovano u suprotnom smeru. Zvanična uputstva za IPIP upitnike ličnosti upravo zato razdvajaju pozitivno i negativno ključane stavke.

Algoritam zatim radi sledeće:

Ovaj postupak ne „čita misli“. On samo dosledno primenjuje ključ koji su autori testa unapred napravili. Tako se smanjuje mogućnost da mehaničko slaganje sa svim tvrdnjama veštački podigne skor.

Rezultat je položaj na skali, a ne skriveni tip čoveka

Kod dimenzionalnih modela, kakav je model Velikih pet osobina, algoritam ne mora da vas smesti u jednu nepromenljivu kutiju. On može zasebno da proceni ekstraverziju, savesnost, saradljivost, otvorenost i emocionalnu stabilnost ili neuroticizam.

Svaka dimenzija nastaje iz grupe pitanja koja bi, prema prethodnim istraživanjima, trebalo da mere sličan obrazac. Jednostavniji sistemi koriste zbir ili prosek, dok napredniji primenjuju teoriju odgovora na stavke, poznatu kao IRT.

Kako objašnjava pregled Univerziteta Kolumbija, IRT procenjuje odnos između latentne osobine i verovatnoće određenog odgovora na pojedinačnu stavku.

Zato dva pitanja ne moraju jednako doprinositi rezultatu. Stavka koja bolje razlikuje niži i viši nivo osobine može imati veću informativnu vrednost od opšte tvrdnje sa kojom se gotovo svi slažu. Zato ozbiljan izveštaj uz skor navodi i granice pouzdanosti merenja.

Adaptivni test bira pitanje na osnovu prethodnog odgovora

Klasičan upitnik svima prikazuje isti niz pitanja. Kompjuterski adaptivni test menja redosled i bira sledeću stavku prema dosadašnjoj proceni. Ako su odgovori već jasno ukazali na određeni nivo osobine, sistem traži pitanje koje će najviše smanjiti preostalu neizvesnost.

Cilj nije da korisnika „uhvati“ u kontradikciji, već da sa manjim brojem stavki dobije dovoljno precizan skor. Takav pristup zahteva veliku, dobro kalibrisanu banku pitanja i pravilo za zaustavljanje testa. Korisnik zato može dobiti drugačiji niz pitanja od druge osobe.

Pregled istraživanja kompjuterski adaptivnog procenjivanja ličnosti navodi IRT i takozvani countdown metod kao dva glavna pristupa, uz zaključak da adaptivno testiranje može znatno skratiti upitnik kada je pravilno konstruisan.

Kraći test, međutim, nije automatski i kvalitetniji. Preciznost zavisi od kalibracije pitanja, uzorka i pravila izbora.

Algoritam može da prepozna nemarne i protivrečne obrasce

Online test zavisi od pažnje i iskrenosti osobe koja ga popunjava. Zbog toga neki sistemi ne posmatraju samo ukupan skor, već i kvalitet obrasca odgovora. Mogu da provere:

• da li je gotovo svuda izabrana ista opcija;
• da li se odgovori na slične ili suprotno formulisane tvrdnje međusobno sudaraju;
• da li je ceo test završen brže nego što je realno potrebno za čitanje;
• da li obrazac statistički veoma odstupa od očekivanih kombinacija.

Veštačka inteligencija počinje tamo gde prestaje običan ključ

Mnogi testovi koji se reklamiraju kao „AI analiza“ i dalje prvo računaju standardne skorove. Veštačka inteligencija može da se uključi tek pri sastavljanju personalizovanog objašnjenja, povezivanju više skala ili analizi odgovora napisanih slobodnim tekstom.

Model obrade jezika tada traži obrasce reči, teme i semantičke sličnosti, ali njegov zaključak zavisi od podataka na kojima je razvijen i od uputstva koje dobija. To je srodno načinu na koji jezički modeli kao što je ChatGPT obrađuju tekst.

Važna razlika je u tome što psihometrijski skor treba da bude zasnovan na proverljivoj skali, dok generisani opis može zvučati ubedljivo i kada je previše opšti. Lepo napisan izveštaj nije dokaz da je merenje validno. Zato je važno znati da li AI računa skor ili ga samo prepričava.

Isti odgovori ne moraju uvek dati isti izveštaj

Razlika često nije u odgovorima, već u pravilima iza testa. Jedna platforma može da koristi sirove poene, druga percentile, a treća pragove poput „nisko“, „umereno“ i „visoko“.

Rezultat se menja i kada autori uvedu novu normativnu grupu, promene težinu pojedinih pitanja ili dorade tekst koji objašnjava skor.

Zato treba razlikovati tri nivoa:

1. odgovor koji ste dali,
2. numerički skor koji je izračunat
3. i tumačenje prikazano na ekranu.

Najstabilniji je prvi nivo, dok poslednji najviše zavisi od dizajna platforme. Dodatni problem je društveno poželjno odgovaranje, odnosno predstavljanje sebe u povoljnijem svetlu.

Pregled metoda kontrole takvih pristrasnosti pokazuje da skale samoprocene mogu biti pogođene slaganjem sa tvrdnjama, ekstremnim odgovorima i željom da ostavimo dobar utisak. Bez podataka o normama i verziji testa, poređenje dva izveštaja može biti varljivo.

Pre rezultata proverite šta se dešava sa vašim podacima

Odgovori o emocijama, navikama, odnosima ili teškoćama mogu biti veoma osetljivi čak i kada test ne traži ime.

Anonimnost sama po sebi nije dovoljna. Pre početka proverite da li platforma objašnjava svrhu prikupljanja, rok čuvanja, deljenje sa trećim stranama i mogućnost brisanja.

Poverenik navodi da građani imaju pravo na pristup, ispravku, brisanje, prigovor i zaštitu od odluka zasnovanih isključivo na automatizovanoj obradi kada one proizvode pravne posledice ili značajno utiču na njihov položaj.

• Ne unosite puno ime ako nije neophodno.
• Proverite da li se rezultat čuva na nalogu ili šalje mejlom.
• Ne pristajte da neformalni test bude jedini osnov za zapošljavanje, lečenje ili važnu odluku.

Na sigurnost odgovora utiču i način na koji je platforma hostovana, mesto na kojem se nalaze serveri, izrada rezervnih kopija i pravila za čuvanje podataka.

Zato je korisno proveriti kako su uređeni hosting i čuvanje podataka, naročito kada test prikuplja informacije o emocijama, navikama i mentalnom zdravlju.

Često postavljana pitanja

Za kraj

Algoritam može brzo da sabere podatke i primeti obrasce koje bismo ručno teško pratili. Ne može, međutim, da zna sve okolnosti u kojima ste odgovarali niti da od kratkog upitnika napravi potpunu sliku osobe.

Najkorisnije je pročitati rezultat, proveriti kako je nastao i zapitati se prepoznajete li opis u stvarnom životu.

Kada rezultat izazove zabrinutost ili treba da utiče na važnu odluku, razgovor sa kvalifikovanim stručnjakom ostaje pouzdaniji korak od nove oznake na ekranu.