Computer Chess Rating List ( CCRL ) on joukko vahvimpien tietokoneshakkiohjelmien luokituksia ( luokitusluetteloita ) . Tekniikkana käytetään Elo Bayesian arvosanaa [1] , joka ottaa huomioon värin, pistemäärän, tasapelit mukaan lukien, sekä erot shakkiohjelmien arvioinnissa keskenään pelattaessa.
Nykyään se on yksi arvovaltaisimmista ja tunnetuimmista menetelmistä arvioida sekä kaupallisia (omistusoikeudellisia) että ilmaisia shakkiohjelmia.
CCRL-luokituslistaa on ylläpitänyt vuodesta 2006 lähtien joukko shakinharrastajia, joiden alkuperäinen kokoonpano on seuraava: Graham Banks, Ray Banks, Sarah Bird, Kirill Kryukov ja Charles Smith. Nämä ihmiset toi yhteen ajatus siitä, että heidän harrastuksensa shakkiohjelmien testaamisesta olisi hyödyllisempää ja kysytympää, jos he yhdistäisivät voimansa ja julkaisevat tuloksia säännöllisesti. Jatkossa ryhmää täydennettiin vapaaehtoisilla. Tähän mennessä ryhmän selkäranka koostuu kahdestatoista ihmisestä ja tehdyn työn määrä on kasvanut huomattavasti harrastuksen käsitteen ulkopuolelle.
Testaajaksi voi tarjota itseään kuka tahansa, mutta vain shakkiohjelmistoyhteisössä hyvin tunnetut tai tässä piirissä tunnettuja takaajia hyväksytään.
Ryhmä on olemassaolonsa aikana kehittänyt joukon muodollisia sääntöjä ja toleransseja, joiden perusteella se nyt testaa. Tämä lähestymistapa on avoimempi ja antaa enemmän luottamusta saatuihin tuloksiin.
Tällä hetkellä ylläpidetään kolmea pääasiallista riippumatonta luokituslistaa, jotka eroavat ajanhallinnan ja joidenkin muiden parametrien osalta:
Kaikissa pääluokituslistoissa kaikki shakkiohjelmat on esitetty niiden parhaiden versioiden mukaan arviointihetkellä. Pääluokitusten arvio on tehty Athlon 64 X2 4600+ (2,4 GHz) -arkkitehtuurilla.
Testauksessa käytetään yleiskäyttöisiä avauskirjoja , joiden arviointisyvyys on 12 liikettä, ohjelmiin liitettyjen omien avauskirjojen sijaan. Testauksen aikana vastustaja ei voi käyttää aikaa omien liikkeidensä laskemiseen. Nämä säännöt antavat mahdollisuuden arvioida objektiivisemmin itse ohjelma-algoritmin työn laatua yhtäläisin ehdoin.
Objektiivisuuden lisäämiseksi jokaisessa shakkiohjelmassa pelataan suuri määrä pelejä.
Pääluokitusten lisäksi ylläpidetään monia muita, esimerkiksi yhden prosessorin järjestelmiin, 64-bittisiin ja 32-bittisiin järjestelmiin, vain ilmaisiin ohjelmiin jne. Näin ei vain asiantuntijat, vaan myös tavallinen käyttäjä voi vertailla shakkiohjelmia katsomalla sen kokoonpanon tuloksia.
1.12.2018 alkaen CCRL 40/40 -luokituslistalla Stockfish 9 64-bittinen 4CPU shakkiohjelma on ensimmäisellä sijalla , Komodo 11.3.1 64-bittinen on toisella ja Houdini 6 64-bittinen [2] on. kolmannessa ja CCRL 40/4 ja CCRL 404FRC (24.7.2018 alkaen) Komodo ja Houdini vaihtoivat paikkaa.