TCEC 16 - Чемпионат Мира среди шахматных движков

[sovaz1997]

TCEC 16 начнется 14 Июля 2019 года в 17:00 (по МСК) с участием сильнейших шахматных движков в мире. Впервые в истории движок с нейронной сетью, Leela Chess Zero (Lc0), будет защищать как титул лиги, так и Кубок.



TCEC 16 будет представлен в новом формате. Он сохранит известный Премьер-дивизион и Суперфинал, как и в предыдущих сезонах, но даст больше шансов движкам, чтобы подняться в рейтинге. По этой причине будут созданы три лиги из 16 движков. Мероприятие начнется с Квалификационной лиги, где будут представлены все новички, включая новые движки AB и движки, использующие нейронные сети. Лучшие 6 из Квалификационной лиги перейдут в Лигу 2 (также 6 перейдут в низшую лигу), а лучшие 4 из Лиги 2 перейдут в Лигу 1 (также 4 перейдут в низшую лигу). Наконец, лучшие 2 движка из Лиги 1 будут квалифицированы в Премьер-дивизион (также 2 будут переведены в низшую лигу).

Изменение структуры для TCEC необходимо из-за быстрого развития компьютерных шахмат. С новым форматом больше движков получат шанс подняться и получить шанс войти в элиту.

Вот список участников для Премьер-дивизиона и вновь образованных лиг. Посев двигателей полностью основан на TCEC 15.

Суперфинал (100 игр с контролем 120′+10″ – используется новая дебютная книга от Jeroen Noomen)

Развернуть для просмотра

1. 1-е место Премьер-дивизиона
2. 2-е место Премьер-дивизиона

[свернуть]

Премьер-дивизион (3x DRR с контролем 90′+5″ – используется новая 8-ходовая книга от Cato (Nelson Hernandez))

Развернуть для просмотра

1. Lc0 – текущий чемпион TCEC
2. Stockfish
3. Komodo
4. AllieStein
5. Houdini
6. Komodo MCTS
7. 1-е место из Лиги 1
8. 2-е место из Лиги 1

[свернуть]

Лига 1 (1x DRR с контролем 45+5 - используется 6-ходовая дебютная книга, рандомизированная)

Развернуть для просмотра

1. Ethereal
2. Fire
3. Xiphos
4. Laser
5. Andscacs
6. Fizbo
7. Jonny
8. Chiron
9. Ginkgo
10. ChessBrainVB
11. Booot
12. Rofchade
13. из Лиги 2
14. из Лиги 2
15. из Лиги 2
16. из Лиги 2

[свернуть]

Лига2 (1x DRR with time control 30+5 – using a 4 move book, рандомизированная)

Развернуть для просмотра

1. Fritz
2. Nirvana
3. Arasan
4. Texel
5. Vajolet
6. Gull
7. Pedone
8. Nemorino
9. Rubichess
10. Pirarucu
11. из квалификационного раунда
12. из квалификационного раунда
13. из квалификационного раунда
14. из квалификационного раунда
15. из квалификационного раунда
16. из квалификационного раунда

[свернуть]

Квалификация (1x DRR с контролем 30+5 – используется 2-ходовая дебютная книга, рандомизированная)

18 движков бьются за 6 квалификационных позиций. Это смесь движков из 4-го дивизиона и новых.

Развернуть для просмотра

1. Bagatur 1.7b
2. The Baron 3.44.1
3. Cheese 2.1
4. chess22k 1.12
5. ChessFighterNN v2.1-n8x128c_7411
6. Igel 1.8.0
7. Jumbo 0.6.117
8. Marvin 3.4.0
9. Minic 0.76
10. ScorpioNN v2.9.0-n_maddex_INT8
11. Stoofvlees II a10
12. Topple 0.7.2_dev
13. Tucano 7.07
14. Wasp 3.68
15. Winter 0.6
16. Asymptote 0.6.2
17. Rodent III
18. Lc0 CPU

[свернуть]

Промо-движок в полевых условиях
Многие движки в настоящее время используют NN, полностью используя графические процессоры. Тем не менее, чемпион Lc0 выпустил сильную версию, играющую только на CPU! Это не уникальный движок по критериям TCEC, но, безусловно, приятно видеть, как он играет против реальных конкурентов с силой, превышающей 3000 пунктов Эло. Таким образом, Lc0 CPU входит в TCEC в качестве промо-движка. Он будет играть в дивизионе, но в конце турнира все результаты движка будут аннулированы.

[alchemist888]

Цитата: Сообщение от Vizvezdenec

Скорость - вообще понятие такое, как и глубина, не всегда имеющее много смысла.
Именно по этой причине лучше сравнивать железяки. Скорость движок считает сам, и что он там себе насчитал - чёрт его знает.

Конечно, но показатель nps SF- это и есть самый лучший benchmark железа. Как раз этим показателем мы можем сравнивать насколько один проц быстрее другого в шахматных задачах. В принципе для nps LCZero справедливо тоже самое, с условием, что количество GPU не будет больше 2-х.
Маратка, говорит, что оболочки что-то там сами выводят, но я не замечал разницы в nps между Arena GUI, Fritz GUI и Cutechess. Здесь проблема скорее всего надуманна.

[Maratka]

Цитата: Сообщение от alchemist888

Маратка, говорит, что оболочки что-то там сами выводят

Я не утверждаю, но предполагаю, что разные оболочки и/или их разные настройки на разных серверах могут выводить разное значение nps, даже если оно реально равное. Это первое.

Второе: как я уже выше и писал, значение nps растет по мере увеличения количества потоков по разному, в зависимости от того, что мы хотим увидеть: количество рассчитанных оценок позиций, или количество возможных позиций из некой корневой, которые движок нашел. Разница в чем: движок может найти оценку существующей позиции в хеше, и сразу перейти к новой позиции, повторно не оценивая старую (что очевидно нет смысла делать), и это тем вероятнее, чем больше потоков, и чем больше размер хеша. На то собственно хеш и нужен.

Т.е. условный полный узел: это найти позицию (search.cpp), и оценить ее (evaluate.cpp) просто без вариантов будет выполняться дольше усеченного, вида найти позицию, и проверить, есть ли ее оценка в хеше.

[Vizvezdenec]

Цитата: Сообщение от alchemist888

Конечно, но показатель nps SF- это и есть самый лучший benchmark железа. Как раз этим показателем мы можем сравнивать насколько один проц быстрее другого в шахматных задачах. В принципе для nps LCZero справедливо тоже самое, с условием, что количество GPU не будет больше 2-х.
Маратка, говорит, что оболочки что-то там сами выводят, но я не замечал разницы в nps между Arena GUI, Fritz GUI и Cutechess. Здесь проблема скорее всего надуманна.

Ну я просто могу сказать, что равные nps даже для одной и той же версии SF != равная сила игры. А уж когда движки разные - вообще чёрт его знает, как оно там.

[Maratka]

От себя добавлю, что нужно знать (именно знать, а не предполагать), что есть такое nps в коде движка, согласно моему прошлому сообщению. Понять тем, кто знает C++ реально. Я знаю лишь как она считается на последней стадии, но рыться по коду всего движка в поисках точного алгоритма - это выше моих умений.

[alchemist888]

Цитата: Сообщение от Maratka

От себя добавлю, что нужно знать (именно знать, а не предполагать), что есть такое nps в коде движка, согласно моему прошлому сообщению. Понять тем, кто знает C++ реально. Я знаю лишь как она считается на последней стадии, но рыться по коду всего движка в поисках точного алгоритма - это выше моих умений.

Тема начиналась с того, что СССС железо в сравнении с TCEC на 25-30% выгоднее для AB движков, которые хорошо работают с HT. Соответственно, в данном случае не важно как считаются нодсы отдельным движком, ибо движки сравниваются одни и те же.

[Maratka]

Цитата: Сообщение от alchemist888

Тема начиналась с того, что СССС железо в сравнении с TCEC на 25-30% выгоднее для AB движков, которые хорошо работают с HT.

Совершенно верно. А потом вдруг тема перешла на обсуждение, что оно там не на 25-30%, а в два раза, чего понятное дело не может быть.

[alchemist888]

Цитата: Сообщение от Maratka

Совершенно верно. А потом вдруг тема перешла на обсуждение, что оно там не на 25-30%, а в два раза, чего понятное дело не может быть.

Вы опять не поняли. SF в CCCC получает 2x прирост скорости по сравнению с TCEC, Leela 1.5x => 2/1,5 = 1,33 => в СССС на 33% баланс мощностей смещен в пользу AB движков.

[svoitsl]

[svoitsl]

Лила-Комодо

1. e4 e5 2. Nf3 Nc6 3. Nc3 Nf6 4. Nxe5 Nxe5 5. d4 Ng6 6. e5 Ng8 7. Bc4 d5 8. Bxd5 N8e7 9. Bg5 c6 10. Bb3 h6 11. Be3 Nf5 12. O-O Bb4 13. Ne4 O-O 14. c3 Be7 15. Qh5 Kh7 16. Bc2 Be6 17. Rae1 Kh8 18. Bc1 Qc8 19. h3 Rd8 20. Kh2 c5 21. g4 Nf4 22. Bxf4 g6 23. gxf5 gxh5 24. fxe6 Qxe6 25. Nxc5 Bxc5 26. dxc5 Rac8 27. h4 Qg4 28. Bg3 Rd2 29. Be4 Rg8 30. Rg1 Rxb2 31. Rg2 Qe6 32. a4 Qe7 33. Bd5 Rg4 34. e6 fxe6 35. Bf3 Rxh4+ 36. Kg1 Qf6 37. Bxh4 Qxh4 38. Be4 a5 39. Rg3 Qf4 40. Rf3 Qg5+ 41. Kh1 Qxc5 42. Kg2 Qg5+ 43. Kh1 b5 44. Rf8+ Kg7 45. Rf3 Qh4+ 46. Kg2 bxa4 47. Bd3 a3 48. Re5 Qd8 49. Rxe6 Rb6 50. Re1 a2 51. Rg3+ Kh8 52. Bc4 Rb1 53. Re6 Qa8+ 54. f3 Rb2+ 55. Kh3 Qf8 56. Rg8+ Qxg8 57. Rxh6+ Kg7 58. Rg6+ Kxg6 59. Bxg8 a1=Q 60. Kg3 0-1

[Омегазеро]

Цитата: Сообщение от svoitsl

Лила-Комодо

Чем вы объясняете такую плохую игру Лилы?

[Vizvezdenec]

Проиграть белыми Гамбит Хэллоуин? Ну да, ужасно

[Maratka]

Занятный бонус играется сейчас: LZ vs Allie.

Что интересно: Allie похоже имеет лучшую оценку, чем LZ, но зевает чаще.

Выглядит так:

Allie выиграл белыми:



и проиграл черными:

[alchemist888]

Цитата: Сообщение от Maratka

Занятный бонус играется сейчас: LZ vs Allie.
Что интересно: Allie похоже имеет лучшую оценку, чем LZ, но зевает чаще.

Allie имеет туже самую оценку, что и Leela до того, как ее изменили. Другими словами Allie просто скопировала старую winpct формулу, придуманную командой LCZero, и в дальнейшем автор Allie эту формулу не трогал. А вот ребята из LCZero изменили эту формулу, потому как движок часто попадал в ситуации, где показывал +/- 3 и выше в абсолютно ничейных положениях.
Так что лучше старая формула, или нет - это вопрос. В сравнении с AB движками, в ситуациях, где перевес не решающий оценки LCZero лучше, в противном случае старая формула точнее коррелирует с положением на доске.

[Alex_Lk]

Цитата: Сообщение от Омегазеро

Чем вы объясняете такую плохую игру Лилы?

Да все на поверхности.
Дебют редкий.
Ее просто в нем не натаскали.

И ее сетка-книга в нем не разбирается. А сама думать она не умеет.

[Maratka]

Цитата: Сообщение от alchemist888

Другими словами Allie просто скопировала старую winpct формулу, придуманную командой LCZero, и в дальнейшем автор Allie эту формулу не трогал.

Но тогда еще меньше поводов считать его клоном?
Т.е. т.к. автор Allie развивает (хорошо или плохо - другой вопрос) старый движок LZ, и не тянет код с новых версий, то эти две ветки очень быстро разойдутся, и станут по своей сути разными движками.

Пример: в США, Австралии, Канаде говорят на диалекте английского, но не на американском, австралийском и канадском соответственно языках, ибо с момента их разделения прошло всего-то 200-300 лет, после чего 20-й век своими пароходами, позднее - самолетами, а особенно - телеграфом и чуть позже - телефоном внес свои коррективы, и языки в какой-то части наоборот даже сблизились.

Но вот украинский и белорусский - это не диалекты русского, хотя и очень близкие к нему, ибо тут уже разница лет пятьсот.

А если рыть за тысячу лет, то и вовсе найдется только несколько сотен однокоренных слов, а языки совершенно не понятны (скажем французский и немецкий), хотя оба они растут от языка германских племен, которые в своей время захватили Рим.

[Maratka]

Цитата: Сообщение от Alex_Lk

И ее сетка-книга в нем не разбирается. А сама думать она не умеет.

Уточнил бы: сама "думать" она умеет, на то и сеть, а не a-b движок.

Но для того чтобы думать, нужно иметь сырье для "обдумывания", а его там вероятнее всего очень мало, буквально первые несколько сотен тысяч партий после запуска обучения этой сети, после чего сеть "сообразила", что это ущербный вариант, и играть его (а значит и обучаться на нем) перестала.

Пусть crem меня поправит, если неправ.

[Vizvezdenec]

Ну вообще этот дебют форсированно выигран за чёрных, так что проиграть в нём белыми... Ну бывает как бы. С чего кто взял, что Лила там играла плохо? Возможно, Комодо просто играл достаточно неплохо, чтобы не упустить победу.
Ну и в такой корявизне лила и правда не слишком сильна, cccc же делал бонус в хэллоуин гамбите, там стокфиш очень уверенно 1 место занял, 1 раз даже обыграв Комодо белыми.

[Maratka]

Цитата: Сообщение от Vizvezdenec

С чего кто взял, что Лила там играла плохо? Возможно, Комодо просто играл достаточно неплохо, чтобы не упустить победу.

Ну разница в 50-80 Elo как бы все же имеет место быть.

Ну вот Вы с вашим 1-м разрядом сумели бы проиграть его второразряднику? Имею в виду статистически, скажем по результату 20 партий, ибо в одной партии и я при определенном везении могу поставить мат Крамнику. ;)

[Maratka]

Кстати, отдельный вопрос: раз у дебюта есть название, то он как бы все же "играемый"?

А раз в него играют, то... а зачем белые в него играют?

Отсюда: насколько он корректный?

[Maratka]

Цитата: Сообщение от Maratka

Ну разница в 50-80 Elo как бы все же имеет место быть.
Ну вот Вы с вашим 1-м разрядом сумели бы проиграть его второразряднику? Имею в виду статистически, скажем по результату 20 партий, ибо в одной партии и я при определенном везении могу поставить мат Крамнику. ;)

Отсюда: уровень игры LZ (и в целом сетей) на ближайшие несколько лет является сильно плавающей величиной, в зависимости от дебюта.

a-b в этом плане куда как менее привередливый, разброс результатов у лучшего a-b (читай - SF) меньше, чем у LZ, т.е. SF не хватает звезд с неба при удачном дебюте, но и не просаживается в плинтус при неудачном.

[Maratka]

Ну и вполне очевидное следствие: в адвансе третий разряд плюс SF плюс хорошая книга - это лучше, чем LZ, ибо у шахматиста этой квалификации нет понимания дебютов на уровне "позиционный/острый/форсированный выигрыш".

Но скажем на уровне КМС (вероятно и 1-й разряд) - уже лучше использовать пару SF/LZ, т.к. тут уже шахматист может выбрать лучший движок под дебют.

[Vizvezdenec]

Цитата: Сообщение от Maratka

Ну разница в 50-80 Elo как бы все же имеет место быть.

Ну вот Вы с вашим 1-м разрядом сумели бы проиграть его второразряднику? Имею в виду статистически, скажем по результату 20 партий, ибо в одной партии и я при определенном везении могу поставить мат Крамнику. ;)

Хм, ну против игрока на 50-80 эло слабее я бы играть это не стал. На 200-300 - легко

[Maratka]

Цитата: Сообщение от Vizvezdenec

Хм, ну против игрока на 50-80 эло слабее я бы играть это не стал.

Но таки? ;)

[Vizvezdenec]

Таки я думаю, что набрал бы меньше 50%.

[Maratka]

Проверим при встрече?
У мну как раз 200-300 Elo разницы с Вами ;)

[Hendry]

Цитата: Сообщение от Maratka

А если рыть за тысячу лет, то и вовсе найдется только несколько сотен однокоренных слов, а языки совершенно не понятны (скажем французский и немецкий), хотя оба они растут от языка германских племен, которые в своей время захватили Рим.

Французкий и немецкий языки не имеют общих корней и относятся к разным языковым группам. Французкий произошел из латинского, немецкий произошел от прагерманского языка.
В вашем примере скорее больше бы подошло сравнение английского и немецкого языков. так-как они оба произошли от древнегерманского, но в последствии пошли своими путями.

[svoitsl]

[svoitsl]

[Alex_Lk]

Когда там 17 начнется.
Эксперименты можно в частном порядке делать.

[Maratka]

Когда 6x сеть прокачают.
Иначе победитель известен и без турнира: за три месяца, к финалу SF наберет еще 10-20 Elo, и при условии, что турнир начнется сегодня, у LZ не будет шансов.