This is version . It is not the current version, and thus it cannot be edited.
[Back to current version]   [Restore this version]

No keskustellaan vaikkapa siitä, minkä luokitusjärjestelmän antamat luokitukset antavat ajankohtaisinta ja paikkansapitävintä tietoa suomalaisten pelaajien pelitaidosta. Sanoisit, että nykyisessä tilanteessa IGS-luokitukset osuvat oikeimpaan. Suomen luokitusjärjestelmän kannalta ongelma on, että pelaajamäärä on kasvanut nopeasti viimeisen viiden vuoden aikana, mistä syystä nopeasti kehittyviä pelaajia on paljon. Luokitusjärjestelmä ei oikein tahdo pysyä pelitaidon kehittymisen perässä.

-- Markku Jantunen, 7.11. 2002


IGS:n luokitussysteemi on monella tavoin paljon heikommissa kantimissa kuin Suomen, ihan tosi. Ei niin että se olisi käyttökelvoton, vaan pikemminkin että sen (tunnetut) heikkoudet ovat juuri sellaisia jotka on jo ratkaistu Suomen zysteekissä.

Jos Suomen luokitusjärjestelmä ei pysy ajan tasalla, on syytä etsiä vikaa luokittajista tai taskuuntumisesta. On tietty ymmärrettävää että taskuuntumista tapahtuu, mutta luokitusvaltuuksia ainakin on annettu riittävästi. Taskuuntumiseen taas ei ole mitään oikeaa lääkettä.

Ideologisesti voisi ajatella että luokitus on ratkeava ongelma, mutta tosiasiassa näin ei ole.

Mainittakoon että IGS:n koodaaja, Tim Casey, on tietoinen heikkouksista, mutta on suoraan sanonut että asialle ei tulla tekemään mitään pelkkien arvailujen takia. Toisin sanoen, nykysysteemi saa välttää niin kauan kunnes joku kertoo mikä on parempi, ja tällaisen väitteen on syytä perustua oikeisiin faktoihin eikä mutuun tai arvailuun. Valitettavasti vaan liki kaikki tähänastiset näkemykset ovat olleet arvailua, eikä kukaan ole vuosikymmeniin edes yrittänyt nähdä sitä vaivaa että olisi tutkinut asiaa kunnolla -- ja tämä pitää paikkansa myös Euroopan luokitusjärjestelmän kanssa. EGF:n luokitussysteemi on oppikirjaesimerkki siitä kuinka otetaan tunnettu malli ja viritetään sitä hieman, sen sijaan että tutkittaisi asia perin pohjin.

Viimeiset varsinaiset yritykset selvittää luokitussysteemin toimivuutta ja parantaa niitä ovat tietääkseni Paul Matthewsin käsialaa ajalta miekka ja kypärä, ja ovat johtaneet AGA:n luokitusjärjestelmään. Tuon lisäksi on lähinnä tukeuduttu Elo-järjestelmään (joka on viime vuosisadan alkupuolelta, muistaakseni,) ja suunnilleen kaikki näiden ulkopuolelta on ollut mutua.

Toisin sanoen, onhan se helppoa aprikoida ja arvailla, mutta jos muutosta haluaa niin moisesta ei juuri ole iloa, vaan pitäisi tehdä ihka oikeaa työtä. Tämä taas on jostain syystä (heh!) ollut se puoli jota kukaan ei ole osannut tai halunnut tehdä. Helpompi jauhaa asiaa hypoteesitasolla kuin selvittää ihan oikeasti että mistä on kyse, hmm?

-- Olli, 7.11.


Shakkipuolella tutkimusta onkin jonkin verran:

Käsittääkseni kyseessä ei ole kuitenkaan triviaali ongelma millään muotoa, ja vaatisi oikeasti kovan luokan tilastollista ymmärtämystä rakentaa fiksu automaattinen luokitussysteemi. Etenkin kun go:n tasoitusjärjestelmä kuitenkin poikkeaa shakista.

Luokitetaanko Suomessa ihmisiä muuten muutenkin kuin mutu-periaatteella? Kuinka tuo "mutu" käännetään sellaiseksi että se toimii automaattisesti ja tasapuolisesti ihmisille, joista toiset juoksevat daniarvoon vuodessa ja toiset kymmenessä? Toiset pelaavat 20 peliä päivässä; toiset taasen pelin on-line kerran kuussa ja muuten kerhossa? Argh!

(Ja sanoisin että tässä nimenomaisessa tapauksessa ei ole helppoa edes arvailla tai aprikoida :-/.)

--JanneJalkanen, 7-11-02.


(Siivosin sivun alkupäästä vanhaa roinaa poies.)

Tutustumatta tarkemmin Glickmanin papereihin (ps ja pdf eivät juuri nyt onnistu) voisin todeta että nuokin ovat elo-systeemin virittämistä. Tämän ei ole tarkoitus olla vähättelyä, vaan toteamus siitä kuinka vähän oikeaa uutta asiaa alalla on.

Elohan perustuu normaalijakaumaan ja siitä laskettaviin voittotodennäköisyyksiin. Toisin sanoen ajatellaan että pelaajat noudattavat normaalijakaumaa, ja tästä saadaan numeerinen luokitus. Venäjällä on tietääkseni käytetty elo-systeemiä gossakin jo pidempään, sillä oletuksella että pykälän luokitusero vastaa 100 elopistettä. Tällä ei kuitenkaan ole minkäänlaista teoreettista pohjaa, vaan kyseessä on lähinnä arvaus siitä, että mikä voisi toimia. Ja totta toisaalta, kunhan saadaan deterministinen malli joka vaimentaa häiriöitä, niin toimivathan ne lopulta.

Paul Matthewsin malli perustuu Bayesilaisiin todennäköisyyksiin, jossa tuloksista yritetään saada takaisinlaskennalla ihmisten luokitukset. AGA-pisteitä kuitenkin muokataan askeleittain, ja niistä saadaan mielivaltaisella muunnoksella kyu/dan-luokitukset. Turnauksissa paritukseen käytetään nopeutettua AGA-laskentamallia, siis samaa mallia eri parametreilla, ja tästä saadut pelitulokset taas viedään luokitusjärjestelmään. Toisin sanoen, systeemissä on vahva tilastopohja, mutta myös paljon mielivaltaisia parametreja.

IGS:n systeemi on juuri se mikä AGA:lla oli käytössä joskus viime vuosikymmenen puolivälissä. AGA on muistaakseni virittänyt systeemiä sen jälkeen, kun taas Tim on lopettanut asian rukkaamisen ihan vain kyllästyttyään ihmisten mussutukseen ja vinguntaan.

Näkemykset asian triviaaliudesta voi arvioida siitä että kuinka paljon luokitussysteemien toimivuudesta mussutetaan, sen sijaan että ehdotettaisi parannuksia. On huomattavan helppoa sanoa että jotain tarttis tehdä, vaan erittäin vaikea sanoa että mitä. Ja niin sitä itketään kun homma ei toimi tyydyttävästi. Yök.

Voittotodennäköisyyksistä ja niiden eroista gossa ja shakissa taas on huomattavasti tietoa, esmes on tunnettua että gossa noin 5% peleistä on tasapelejä (tasakomi.) Tanskalaiset ainakin aikoinaan perustivat luokitusjärjestelmänsä noin 85% voittotodennäköisyydelle (yhden pykälän tasoero,) joka sekään ei ole kaukaa haettu, muistaakseni perustuu ihan käytännön tuloksiin. Erittäin vähäisissä määrin perusteltu on elo-systeemiin sisäänrakennettu 67% todennäköisyys. Jos jo näin perustavanlaatuisesta parametrista on epäselvyyttä, niin mistä ihmeestä saadaan järkevä malli, hm?

Suomessakin on ollut käytössä deterministisiä numeerisia malleja, mutta ne on poikkeuksetta hylätty sen takia, etteivät ne mukaudu tasomuutoksiin riittävän nopeasti. Näistä ehkä pisimmälle viety oli yligossa viime vuosikymmenellä käytetty, ja se sisälsi useita systeemin adaptaatiota nopeuttavia oikoteitä. Sekään ei lopulta riittänyt.

Kuten niin monesti sanottua, yleensä ne tietävät vähiten jotka ensimmäisinä kyseenalaistavat erilaiset luokitusjärjestelmät. Realistinen näkemys lienee että gon luokitusjärjestelmissä on vain huonoja ja sitäkin huonompia, ja että Suomen järjestelmä loistaa toimivuudellaan useimpien muiden rinnalla.

-- Olli, 7.11.


Olen samaa mieltä Ollin kanssa siitä, että Suomen nykyisistä luokitusongelmista voi syyttää taskuuntumista ja luokittajia. Systeemi itsessäänhän on toiminut aiemmin erittäin hyvin. Nimenomaan nykyisessä tilanteessa Suomen luokitussys- teemin ongelmat korostuvat: luokittajilla ei ole aina ajankohtaista tietoa eri kaupunkien kerhojen pelaajien pelitasosta. Kuten Laatikaisen Vesa sanoi, perifeeristen kerhojen kannattaisi pitää kansallinen luokituskomitea ajanta- salla huippupelaajiensa viimeaikaisesta kehityksestä. Nykyisessä tilanteessa vain turnausmenestykseen katsominen ei riitä alkuunkaan, koska nopeasti kehit- tyviä pelaajia on liian suuri osuus aktiivisisista turnauksissakävijöistä ja koska turnauksia on liian harvoin.

Sattumalta tai ei, suomalaisten alemman tason dan-pelaajien ja ylemmän tason kyu-pelaajien IGS-luokituksilla on korkea korrelaatio SM-karsinnoissa ja -ki- soissa menestymiseen (luokitukset ovat SM-kisoja edeltäneitä). Mukaan on otet- tu kaikki SM-kisoihin osallistuneet, joilla on tunnus *-tunnus IGS:ssä ja joiden luokitus Suomessa on 3 kyu tai parempi.

Nimi Luokitus Sijoitus SM-karsinnoissa IGS-luokitus

Timo Puha 2 dan 1. 3d* Olli Lounela 4 dan 2. 4d* Kari Visala 2 kyu 3. 2d* Paavo Pietarila 2 kyu 4. 2k* Einari Niskanen 1 kyu 5. 3d* Teemu Hirsimäki 1 kyu 9. 2d* Seppo Suorsa 3 kyu 10. 1d* Teemu Rovio 1 dan 11. 2d* Markku Jantunen 2 dan 13. 1d*

Näyttää Paavo olevan ainoa anomalia tuossa listassa. Liekö vanhentunut tunnus? Entä Ollin tunnus? Kuinka tuoreita sillä pelatut pelit keskimäärin ovat?

Nimi Luokitus Sijoitus SM-sarjoissa IGS-luokitus

Timo Puha 2 dan 4. (A-sarja) 3d* Olli Lounela 4 dan 4. (A-sarja) 4d* Einari Niskanen 1 kyu 2. (B-sarja) 3d* Kari Visala 2 kyu 3. (B-sarja) 2d* Paavo Pietarila 2 kyu 4. (B-sarja) 2k*

Add new attachment

In order to upload a new attachment to this page, please use the following box to find the file, then click on “Upload”.
« This particular version was published on 08-Nov-2002 19:43 by MarkkuJantunen.