Selles blogipostituses uurime, kas hindamissüsteemid on parim viis oskuste õiglaseks hindamiseks või näitavad need kvantifitseerimise piiranguid.
Oskus on võime midagi teha. See „miski“ võib olla ükskõik mis alates õppimisest, võistlustest, lauamängudest, võrgumängudest ja muust. Inimesed ütlevad sageli, et nad on milleski „head“, sest nad näevad inimesi, kes on selles neist paremad. Oskust on aga raske objektiivselt mõõta. Objektiivsed oskuste mõõtmised seisnevad selles, et inimestele antakse mõõdik, mis võimaldab neil oma oskusi teie omadega objektiivselt võrrelda. Siin tulebki raskus. Enamikus valdkondades on keeruline erinevate inimeste oskusi lihtsal viisil ritta seada.
Samuti on oskuse mõiste oma olemuselt subjektiivne, seega enda võrdlemine teistega ei ole tingimata täpne. Näiteks muusikalisus ei seisne ainult tehnilises vilumuses; see hõlmab ka emotsionaalset väljendust ja loovust. Samamoodi mõjutavad spordis lisaks füüsilisele jõule ja oskustele sooritust ka vaimne tugevus, mängu juhtimine ja muud tegurid. „Oskuse” keerukuse taandamine ühele numbrile on alati vastuoluline.
Oskuste kvantifitseerimise eelised on aga ilmsed. Keskkonnas, kus konkurents on vältimatu, on vaja pakkuda õiglast standardit. Seda, kas keegi on parem õpilane, parem maletaja või go mängija või parem mängur, ei saa kindlaks teha vaid ühe testi või ühe mänguga. Enne kahe inimese oskuste võrdlemist tuleb koguda kümneid, sadu või isegi tuhandeid andmepunkte ning nii paljude testide või matšide tegemine on keeruline.
Selle probleemi lahendamiseks on püütud oskusi erinevates valdkondades objektiivselt mõõta. Üks selline näide on „hindamissüsteem“, mille eesmärk on muuta mitmetähenduslik „oskuse“ mõõdik „numbriks“ või „hinnanguks“, mida igaüks saab objektiivselt ära tunda. Seda numbrit kohandatakse vastavalt oskuste tasemele, suurenedes teistega võrreldes hästi esinedes ja vähenedes halvasti esinedes. Hinnangute skaleerimise viis on valdkonnast erinev ning seetõttu on palju erinevaid nimetusi ja erinevat tüüpi hindamissüsteeme. Selles blogipostituses vaatleme lähemalt hindamissüsteemide ajalugu, põhimõtteid ja kasutusviise.
Esimene reitingusüsteem võeti kasutusele males. 1900. aastate alguses ja enne seda mängiti malemängu lihtsalt turniiridel üksteise vastu võistlemise teel, seega isegi kui sa olid väga hea mängija, siis kui sa turniiri alguses välja langesid, hinnati sind nõrgemaks mängijaks või pidid hindamiseks osalema suurematel turniiridel. Nende probleemide lahendamiseks võeti reitingusüsteem esmakordselt kasutusele 1950. aastal. Idee oli mängijate võimete objektiivseks võrdlemiseks, kaasates oskuste reitinguskaalasse „iga“ matši kahe sama reitinguga mängija vahel.
Esimestel hindamissüsteemidel oli aga palju probleeme oma valemite ja kriteeriumidega, sageli ei suutnud need pakkuda objektiivset oskuste võrdlust ja paljud inimesed jäid endiselt klassikalise meetodi juurde. Selle probleemi lahendas ja tagas, et hinnangud kajastaksid täpselt iga mängija oskusi, dr Arpad Elo. Tema töö auks nimetatakse praegust male hindamissüsteemi Elo reitinguks ja seda kasutatakse sarnaselt ka teiste võistluslike lauamängude ja võrgumängude puhul.
Reitingusüsteemi aluseks on kaks peamist põhimõtet. Esiteks, kõik mängijad alustavad sama reitinguga ning nende reiting tõuseb või langeb vastavalt matšide võitmisele või kaotamisele. See on loogiline, kuna reitingud on oskuse mõõdupuu. Teiseks, teie reitingu tõusu/languse hulka mõjutab teie ja vastase reitingu erinevus ehk oskuste erinevus. Kui võidate mängija vastu, kellel on teist madalam reiting, tõuseb teie reiting vähem ja kui kaotate, langeb see rohkem. Vastupidi, kui võidate kõrgema reitinguga mängija vastu, tõuseb teie reiting ja kui kaotate, langeb see rohkem. Selle põhjuseks on oskuse täpsem hindamine.
Maailmatasemel maletaja võit keskpärase õpilase üle ei muuda mängija reitingut varasemaga võrreldes paremaks; seda peetakse lihtsalt enesestmõistetavaks. Ülaltoodud meetod peegeldab seda. Kui maletaja võidab keskmise õpilase, ei muutu ei maletaja ega õpilase reiting kuigi palju. Kui aga õpilane alistab maletaja, tõuseb õpilase reiting dramaatiliselt ja maletaja reiting langeb järsult. Seda seetõttu, et asjaolu, et õpilane on maletaja alistanud, suurendab õpilase hinnangut tema oskusele, samas kui maletaja reiting langeb. Need kaks põhiprintsiipi on reitingusüsteemi aluseks.
Lisaks neile kahele põhiprintsiibile tutvustab Elo reitingusüsteem veel ühte printsiipi. See uus printsiip väidab, et „suhtelised koefitsiendid on alati konstantsed võrdsete reitingu erinevuste korral“. Näiteks on võidumäär mängus mängijate vahel, kelle Elo reiting on 1200, ja mängijate vahel, kelle Elo reiting on 1300, sama kui võidumäär mängus mängijate vahel, kelle Elo reiting on 1900, ja mängijate vahel, kelle Elo reiting on 2000. Seda seetõttu, et mõlemal juhul on reitingute erinevus sama, 100. Selle erinevuse põhjal arvutatud võidumäära muutus on antud logaritmilise funktsioonina, mis teoreetiliselt viitab sellele, et iga 400 reitingu erinevuse korral väheneb võidumäär 1/10 võrra. Mängijate reitingud muutuvad mängust mängu selle valemi järgi.
Vaatame uuesti male näidet. Kõigile mängijatele antakse esimeseks mänguks Elo-reiting 1200. Mängu edenedes mängijate reitingud muutuvad ja lõpuks esindavad need nende oskuste mõistlikku esindatust. Statistika näitab, et kui Elo-reitingu erinevus on 100, on kõrgema reitinguga mängijal keskmiselt 64% võiduvõimalus. 200 erinevuse korral on võidumäär 76%, 366 erinevuse korral 90% ja 677 erinevuse korral 99%, mis on üsna kooskõlas reitingute erinevusel põhineva teoreetilise võidumääraga. See oli edukas tulemus oskuste kvantifitseerimisel ja seda saaks laialdaselt kasutada nii teoorias kui ka praktikas.
Lisaks konkurentsitingimuste ühtlustamisele antud valdkonnas on reitingusüsteemide eeliseks osalejate pideva motiveerimise pakkumine. Reitingute tõustes tunnevad osalejad, et nad paranevad, ja vastupidi, reitingute langedes mõistavad nad, et peavad oma puudustega tegelema. Selles mõttes võib reitingusüsteem olla enamat kui lihtsalt oskuste hindamise tööriist; see võib olla pideva õppimise ja kasvu katalüsaatoriks.
Selliseid organiseeritud hindamissüsteeme kasutatakse tänapäeval mitmesugustes valdkondades. Võistluste poolel kasutatakse mitteametlikke hindamissüsteeme tavaliselt programmeerimisvõistlustel, mis käsitlevad olümpiaadide sarnaseid probleeme. Sellisel juhul mõõdetakse kasutajate hinnanguid erinevate saitide korraldatud veebipõhiste proovivõistluste tulemuste põhjal. Nende hinnangute põhjal esitavad võistluse korraldajad võistlejate hinnangute tasemel küsimusi ja võistlejad saavad neid oma tasemel lahendada. Lisaks harjutavad paljud õpilased võistlusvälistel veebisaitidel oma hinnangute parandamiseks. Need näited näitavad, et hindamissüsteemid ei piirdu ainult ühe valdkonnaga, vaid neil on lai valik rakendusi paljudes erinevates valdkondades.
Reitingusüsteemid mängivad väga olulist rolli ka võrgumängudes. Elo reitingu variatsiooni kasutatakse edetabelisüsteemina mängudes nagu League of Legends, Dota 2 ja StarCraft 2. Seda kasutatakse mitmel viisil, et maksimeerida mängu lõbu, sobitades mängijaid sarnase oskustasemega vastastega ja vähendades ebaõiglust, mis võib esineda suurte oskuslünkadega mängudes. See võimaldab mängijatel mängida sarnaste oskustasemetega vastastega, mis aitab oluliselt parandada mängu kasutajakogemust.
Lõpuks, hindamissüsteemid ei piirdu ainult võistlusareeniga; neid saab kasutada ka hariduses. Näiteks saab hindamissüsteemi kasutada õpilaste soorituse hindamiseks ja neile vastavalt õppematerjalide pakkumiseks. Nii saate õpetust iga õpilase tasemele kohandada, mis aitab õppimist maksimeerida.
Nagu näete, on hindamissüsteemid kasulikud paljudes valdkondades ja nende rakendused tõenäoliselt tulevikus laienevad. Kui vaadata, kuidas see süsteem males alguse sai ja kuidas seda on tänapäeval paljudes erinevates valdkondades kohandatud ja kasutatud, näete hindamissüsteemide olulisust oskuste õiglasel hindamisel ja õige väljakutse pakkumisel.
