TCEC 16 - Чемпионат Мира среди шахматных движков

[sovaz1997]

TCEC 16 начнется 14 Июля 2019 года в 17:00 (по МСК) с участием сильнейших шахматных движков в мире. Впервые в истории движок с нейронной сетью, Leela Chess Zero (Lc0), будет защищать как титул лиги, так и Кубок.



TCEC 16 будет представлен в новом формате. Он сохранит известный Премьер-дивизион и Суперфинал, как и в предыдущих сезонах, но даст больше шансов движкам, чтобы подняться в рейтинге. По этой причине будут созданы три лиги из 16 движков. Мероприятие начнется с Квалификационной лиги, где будут представлены все новички, включая новые движки AB и движки, использующие нейронные сети. Лучшие 6 из Квалификационной лиги перейдут в Лигу 2 (также 6 перейдут в низшую лигу), а лучшие 4 из Лиги 2 перейдут в Лигу 1 (также 4 перейдут в низшую лигу). Наконец, лучшие 2 движка из Лиги 1 будут квалифицированы в Премьер-дивизион (также 2 будут переведены в низшую лигу).

Изменение структуры для TCEC необходимо из-за быстрого развития компьютерных шахмат. С новым форматом больше движков получат шанс подняться и получить шанс войти в элиту.

Вот список участников для Премьер-дивизиона и вновь образованных лиг. Посев двигателей полностью основан на TCEC 15.

Суперфинал (100 игр с контролем 120′+10″ – используется новая дебютная книга от Jeroen Noomen)

Развернуть для просмотра

1. 1-е место Премьер-дивизиона
2. 2-е место Премьер-дивизиона

[свернуть]

Премьер-дивизион (3x DRR с контролем 90′+5″ – используется новая 8-ходовая книга от Cato (Nelson Hernandez))

Развернуть для просмотра

1. Lc0 – текущий чемпион TCEC
2. Stockfish
3. Komodo
4. AllieStein
5. Houdini
6. Komodo MCTS
7. 1-е место из Лиги 1
8. 2-е место из Лиги 1

[свернуть]

Лига 1 (1x DRR с контролем 45+5 - используется 6-ходовая дебютная книга, рандомизированная)

Развернуть для просмотра

1. Ethereal
2. Fire
3. Xiphos
4. Laser
5. Andscacs
6. Fizbo
7. Jonny
8. Chiron
9. Ginkgo
10. ChessBrainVB
11. Booot
12. Rofchade
13. из Лиги 2
14. из Лиги 2
15. из Лиги 2
16. из Лиги 2

[свернуть]

Лига2 (1x DRR with time control 30+5 – using a 4 move book, рандомизированная)

Развернуть для просмотра

1. Fritz
2. Nirvana
3. Arasan
4. Texel
5. Vajolet
6. Gull
7. Pedone
8. Nemorino
9. Rubichess
10. Pirarucu
11. из квалификационного раунда
12. из квалификационного раунда
13. из квалификационного раунда
14. из квалификационного раунда
15. из квалификационного раунда
16. из квалификационного раунда

[свернуть]

Квалификация (1x DRR с контролем 30+5 – используется 2-ходовая дебютная книга, рандомизированная)

18 движков бьются за 6 квалификационных позиций. Это смесь движков из 4-го дивизиона и новых.

Развернуть для просмотра

1. Bagatur 1.7b
2. The Baron 3.44.1
3. Cheese 2.1
4. chess22k 1.12
5. ChessFighterNN v2.1-n8x128c_7411
6. Igel 1.8.0
7. Jumbo 0.6.117
8. Marvin 3.4.0
9. Minic 0.76
10. ScorpioNN v2.9.0-n_maddex_INT8
11. Stoofvlees II a10
12. Topple 0.7.2_dev
13. Tucano 7.07
14. Wasp 3.68
15. Winter 0.6
16. Asymptote 0.6.2
17. Rodent III
18. Lc0 CPU

[свернуть]

Промо-движок в полевых условиях
Многие движки в настоящее время используют NN, полностью используя графические процессоры. Тем не менее, чемпион Lc0 выпустил сильную версию, играющую только на CPU! Это не уникальный движок по критериям TCEC, но, безусловно, приятно видеть, как он играет против реальных конкурентов с силой, превышающей 3000 пунктов Эло. Таким образом, Lc0 CPU входит в TCEC в качестве промо-движка. Он будет играть в дивизионе, но в конце турнира все результаты движка будут аннулированы.

[Alex_Zet]

LCZero v0.22.0-nT40B.4-160 - Komodo 2381.00

уже 1.02 Evaluation 0.40

Счас Лила нахлобучит комодо и выйдет в лидеры

Stockfish 256 потоков даёт 0.73

[Maratka]

Цитата: Сообщение от sovaz1997

Нет, я это не утверждаю, это вы так думаете.
Я допускаю, что есть сходимость у движков, даже если их писали разные команды, даже, если обучать сеть по другим принципам.

Именно так. Принципы в общем-то одинаковы, ибо сложно придумать что-то основополагающе другое для САМОобучаещегося алгоритма.

[Alex_Zet]

Цитата: Сообщение от Maratka

Именно так.

Как вы правы. Сложно что то уже придумать в том числе и в АВ. Там все до такой степени исхожено что любой движок уровня примерно скажем 2428 эло, это наверняка заимствованные патчи. Угадайте у кого?

[sovaz1997]

Цитата: Сообщение от Alex_Zet

Как вы правы. Сложно что то уже придумать в том числе и в АВ. Там все до такой степени исхожено что любой движок уровня примерно скажем 2428 эло, это наверняка заимствованные патчи. Угадайте у кого?

Что-то новое придумать действительно сложно. Но видоизменить идею и найти улучшение всегда можно

[alchemist888]

Я как-то не верю в то, что автор ScorpioNN обучал свою сеть генерируя игры самостоятельно, слишком дорогостоящий процесс. Думаю еще одна сеть а-ля, скачать базу игр и быстренько натренировать ее. Получилась сеть типа DarkQueen, или DeusX, с немалой вероятностью там также есть игры LCZero. В общем скучный движок скорее всего.
Из того, что мы видели, только у Jhorthos получилось улучить существующие сети, причем очень неплохо, вот кто реально помогает развитию NNs, а остальные в основном занимаются клонированием, получая на выходе худшую версию изначального продукта.

[Maratka]

Цитата: Сообщение от alchemist888

Думаю еще одна сеть а-ля, скачать базу игр и быстренько натренировать ее. Получилась сеть типа DarkQueen, или DeusX, с немалой вероятностью там также есть игры LCZero. В общем скучный движок скорее всего.

Скачать ее, натренировать сеть (это сразу и тупо ~3200 Elo, если принять, что у SF 3500), после чего при наличии даже младшего RTX дообучить ее на собственных играх.

А вот алгоритм можно и подобрать, в т.ч. и более удачный, чем у LZ (ведь и у авторов LZ побить SF вышло лишь с третьей попытки).
Причем побить так себе... недостоверно - ну нет много тысяч партий с контролем более часа, где бы SF играл на 20+ ядрах. Ну т.е. более-менее похоже, что LZ превзошел SF, но дать более 80% вероятности на это (и штрафом в квартиру в случае моей ошибки) я пожалуй все же поостерегусь.

[Alex_Zet]

Элли поймала ферзя у Лилы.
Впервые вижу такой ляп у неё. Искуситься пешкой которая при этом оказалась не по зубам и замуровать своего ферзя.
Ладно бы туповатый АВ, это ещё можно как то объяснить. Но как объяснить это.....

[IMG][/IMG]

[sovaz1997]

Alex_Zet, ляпа не вижу.

[Alex_Zet]

Почитайте учебную литературу по шахматам что такое позиционное преимущество, потеря темпов, изолированные фигуры и прочее.

Цитата: Сообщение от Alex_Zet

[sovaz1997]

Alex_Zet, а это совсем другая позиция, как бы))

[Alex_Zet]

Учите матчасть

[sovaz1997]

Цитата: Сообщение от Alex_Zet

Учите матчасть

Учитывайте, сколько фигур задействовано при задержании ферзя там и там, и сколько требуется ходов на его освобождение. Повторюсь - позиции абсолютно разные.

[Alex_Zet]

После 33. Rc1 Qa3 Элли сделала для меня загадочный ход 34. h4
Ведь в самом деле не враг же она сама себе. Ослабляется поле g3 и весь комплекс черных полей в лагере белых.

1. e4 e5 2. Nf3 Nf6 3. Nc3 Bb4 4. Nxe5 O-O 5. Nd3 Bxc3 6. dxc3 Nxe4 7. Be2 d5 8. O-O c6 9. f3 Nf6 10. Be3 Bf5 11. a4 Re8 12. Bf2 a5 13. Re1 Nbd7 14. Qd2 h6 15. Bf1 Qc7 16. Rxe8+ Rxe8 17. Re1 Re6 18. Rd1 Re8 19. Re1 Re6 20. b3 Nf8 21. Bg3 Qd8 22. Rd1 Re7 23. Nf4 Qb6+ 24. Bf2 Qc7 25. Bg3 Qb6+ 26. Bf2 Qc7 27. Rc1 Re8 28. Be1 Ng6 29. Nxg6 Bxg6 30. Bg3 Qe7 31. Bf2 Qa3 32. Rd1 Qb2 33. Rc1 Qa3 34. h4

[Alex_Zet]

Цитата: Сообщение от sovaz1997

Учитывайте, сколько фигур задействовано при задержании ферзя там и там, и сколько требуется ходов на его освобождение. Повторюсь - позиции абсолютно разные.

Вот именно - и сколько требуется ходов на его освобождение.
Да, позиция равна. Но зачем спрашивается было запихивать ферзя что бы потом его освобождать?

[Alex_Zet]

У меня все те же вопросы по Элли.

Если Элли это NN, то почему такая большая скорость, пятикратное преимущество, по сравнению с Лилой?
Чем это обусловлено? Размером сети, ещё чем то или может быть причина в том что уже реализовано, как было заявлено автором - смогу ли я реализовать альтернативный поиск, используя Minimax / AlphaBeta, а не MCTS?

[Alex_Zet]

ScorpioNN v3.0.1-n_maddex_INT8 - Komodo 2381.00

После 23. Bf1 Nfd7

Evaluation:
ScorpioNN 1.38
Komodo 0.78
LCZero 1.28
Stockfish 1.36

[svoitsl]

LCZero v0.22.0-nT40B.4-160 и Komodo 2381.00
сохраняют полный паритет по всем параметрам

[Maratka]

Только вот LZ выступает слишком низко, как для чемпиона и обладателя кубка, а Komodo наоборот, на сегодня - самый недооцененный движок с его +21 Elo.

Собственно про это я писал где-то прошлой зимой наверное: K/H неплохо рубят хвосты, и все что им не хватает для того, чтобы убрать LZ со второго места, и тем самым из финала - 20-30, от силы 50 реальных Elo роста. Этого достаточно, чтобы не проиграть в одну калитку LZ в личных встречах, и набрать прилично на аутсайдерах. И похоже, Komodo таки набрал свои два-три десятка с версии 12.x

[Viktor]

[QUOTE=Alex_Zet;105604]После 33. Rc1 Qa3 Элли сделала для меня загадочный ход 34. h4
Ведь в самом деле не враг же она сама себе. Ослабляется поле g3 и весь комплекс черных полей в лагере белых.

1. e4 e5 2. Nf3 Nf6 3. Nc3 Bb4 4. Nxe5 O-O 5. Nd3 Bxc3 6. dxc3 Nxe4 7. Be2 d5 8. O-O c6 9. f3 Nf6 10. Be3 Bf5 11. a4 Re8 12. Bf2 a5 13. Re1 Nbd7 14. Qd2 h6 15. Bf1 Qc7 16. Rxe8+ Rxe8 17. Re1 Re6 18. Rd1 Re8 19. Re1 Re6 20. b3 Nf8 21. Bg3 Qd8 22. Rd1 Re7 23. Nf4 Qb6+ 24. Bf2 Qc7 25. Bg3 Qb6+ 26. Bf2 Qc7 27. Rc1 Re8 28. Be1 Ng6 29. Nxg6 Bxg6 30. Bg3 Qe7 31. Bf2 Qa3 32. Rd1 Qb2 33. Rc1 Qa3 34. h4

[alchemist888]

Цитата: Сообщение от Maratka

Только вот LZ выступает слишком низко, как для чемпиона и обладателя кубка, а Komodo наоборот, на сегодня - самый недооцененный движок с его +21 Elo.

Собственно про это я писал где-то прошлой зимой наверное: K/H неплохо рубят хвосты, и все что им не хватает для того, чтобы убрать LZ со второго места, и тем самым из финала - 20-30, от силы 50 реальных Elo роста. Этого достаточно, чтобы не проиграть в одну калитку LZ в личных встречах, и набрать прилично на аутсайдерах. И похоже, Komodo таки набрал свои два-три десятка с версии 12.x

Собственно, только 11 игр сыграно, а Вы уже делаете выводы. Очень последовательно c теми заявлениями о маленькой выборке, которые Вы делали после победы LCZero в TCEC 15.
Одно дуновение ветра и SF проигрывает LCZero в ответной партии и идет сейчас +3 -1, а LCZero +3 -0. Или вот в текущей игре Scorpio был близок к тому, чтобы обыграть Komodo AB, и тогда +2-1 у K и он оценен как следует.
Также не понятно, откуда мысли о том, что K AB прибавил 20-30 пунктов от версии 12.х. Между 12.3 и 13.1 максимум 10 Elo разницы, а она вышла меньше месяца назад. Думаете 10-20 Elo за 3 недели K прибавил?
Да и хвост, насколько показывают турниры, Лила куда лучше выносит, чем те же Komodo и Houdini

[Maratka]

Цитата: Сообщение от alchemist888

Собственно, только 11 игр сыграно, а Вы уже делаете выводы.

Я не делаю выводы на 11 партиях.
Я к этим 11 еще игранные на моей машине добавляю: +1 в матче из 10 партий в пользу Komodo слабо вписывается в +100 Elo у SF. А вот если 50-80, то уже вероятность совсем другая.

[Maratka]

Цитата: Сообщение от alchemist888

Да и хвост, насколько показывают турниры, Лила куда лучше выносит, чем те же Komodo и Houdini

С поправкой что у LZ на 100 Elo больше, "вынос" как-то не впечатляет: дайте LZ сеть от прошлого августа, т.е. +/- равную K/H, и посмотрите, кто лучше выносит.

[sovaz1997]

Цитата: Сообщение от Maratka

Я не делаю выводы на 11 партиях.
Я к этим 11 еще игранные на моей машине добавляю: +1 в матче из 10 партий в пользу Komodo слабо вписывается в +100 Elo у SF. А вот если 50-80, то уже вероятность совсем другая.

Добавьте еще турнир CCC, где Лила на половине мощностей идет на 1-м месте.
А теперь можно и посмеяться

[sovaz1997]

Цитата: Сообщение от Maratka

Только вот LZ выступает слишком низко, как для чемпиона и обладателя кубка, а Komodo наоборот, на сегодня - самый недооцененный движок с его +21 Elo.

Собственно про это я писал где-то прошлой зимой наверное: K/H неплохо рубят хвосты, и все что им не хватает для того, чтобы убрать LZ со второго места, и тем самым из финала - 20-30, от силы 50 реальных Elo роста. Этого достаточно, чтобы не проиграть в одну калитку LZ в личных встречах, и набрать прилично на аутсайдерах. И похоже, Komodo таки набрал свои два-три десятка с версии 12.x

Мне даже интересно, чем отличаются 3-х победы Стока от 2-х побед Лилы? Ах, вывод уже сделан. Ну, ладно

[Maratka]

Цитата: Сообщение от sovaz1997

Добавьте еще турнир CCC, где Лила на половине мощностей идет на 1-м месте.

Не на половине, а на 80-95%: это проблемы не конкурентов, что LZ на 3+ платах дает пшик против двух. Мое мнение, что это даже не движковая проблема, а тупо не хватает пропускной способности шины PCI-e для более чем двух плат: они явно обязаны как-то синхронизировать свою работу, т.е. по шине качается не просто себе очередной ход, а далее плата в сама считает, как в случае одиночной платы.

Но это уже проблема опять же не конкурентов. ;)

[Maratka]

Цитата: Сообщение от sovaz1997

Мне даже интересно, чем отличаются 3-х победы Стока от 2-х побед Лилы? Ах, вывод уже сделан. Ну, ладно

А по мне, так оно действительно без разницы, Вы правы: удивляет не эта парочка, которая просто обязана поделить 1/2 место, а Komodo, который явно выше, чем ему положено быть, и мне лично все же хочется надеяться, что не просто так оно, а таки да, движок получил хороший прирост. Иначе совсем скучно будет, а тут таки интрига. ;)

[sovaz1997]

Цитата: Сообщение от Maratka

А по мне, так оно действительно без разницы, Вы правы: удивляет не эта парочка, которая просто обязана поделить 1/2 место, а Komodo, который явно выше, чем ему положено быть, и мне лично все же хочется надеяться, что не просто так оно, а таки да, движок получил хороший прирост. Иначе совсем скучно будет, а тут таки интрига. ;)

11 партий. Мог бы даже Houdini оказаться на 1-м месте, это бы все равно ни о чем не говорило.

[Alex_Zet]

Цитата: Сообщение от Maratka

Собственно про это я писал где-то прошлой зимой наверное: K/H неплохо рубят хвосты, и все что им не хватает для того, чтобы убрать LZ со второго места, и тем самым из финала - 20-30, от силы 50 реальных Elo роста. Этого достаточно, чтобы не проиграть в одну калитку LZ в личных встречах, и набрать прилично на аутсайдерах. И похоже, Komodo таки набрал свои два-три десятка с версии 12.x

Всегда поражался математическим способностям Маратки. Общепризнано и самим Мараткой в том числе что Комодо отстает от Стока примерно на 100 эло. Также Маратка не однократно заявлял что только Сток может на равных бороться с Лилой а значит их рейтинги равны. И вдруг как разорвавшаяся бомба, оказывается что бы сместить Лилу нужно всего 50 эло. То есть если сейчас Комодо не может убрать Лилу потому что не хватает 100 эло, то если прибавить 50 эло то этого будет вполне достаточно. Видимо Маратка подразумевает что эти 50 будут не совсем обычные а с дополнительным эффектом, тайный аромат который усыпит Лилу.

[dew]

Цитата: Сообщение от Maratka

не хватает пропускной способности шины PCI-e для более чем двух плат

У меня пока нет этой радости, поэтому, просто пока, спрашиваю - а как же хваленое дополнение к шине pcie ввиде nvlink(как и sli вплоть до quad), поддержка которого, на миточку(!), присутсвует в SDK NVIDIA Nsight Compute?

[Maratka]

Цитата: Сообщение от sovaz1997

11 партий. Мог бы даже Houdini оказаться на 1-м месте, это бы все равно ни о чем не говорило.

Нужно плясать не от голого "увижу слона или не увижу", а таки от имеющихся рейтингов: даже 11 кругов достаточно, чтобы движок, имеющий ~100 Elo минусом супротив явных лидеров не занял 1-го место с очень приличной вероятностью. Ну вот сами прикиньте вероятность 1-го места Houdini!

Конечно, некоторый шум вносят еще три сети, ибо не очень понятно их реальное место в таблице, а не то, что выйдет по итогам короткого отбора, но таки против них и Komodo, и SF, и LZ сыграют равное количество партий, т.е. если эти сети сильно хуже, чем Houdini - результат будет в любом случае показывать их реальный уровень, ибо не верю, что SF/LZ могу взять лишь половину очков в 4-6 партиях против движков с уровнем на 150-200 Elo ниже, чем у них, если конечно не совершенно ничейные дебюты с разменом ферзей на 6-м ходе.