TCEC 16 - Чемпионат Мира среди шахматных движков

[sovaz1997]

TCEC 16 начнется 14 Июля 2019 года в 17:00 (по МСК) с участием сильнейших шахматных движков в мире. Впервые в истории движок с нейронной сетью, Leela Chess Zero (Lc0), будет защищать как титул лиги, так и Кубок.



TCEC 16 будет представлен в новом формате. Он сохранит известный Премьер-дивизион и Суперфинал, как и в предыдущих сезонах, но даст больше шансов движкам, чтобы подняться в рейтинге. По этой причине будут созданы три лиги из 16 движков. Мероприятие начнется с Квалификационной лиги, где будут представлены все новички, включая новые движки AB и движки, использующие нейронные сети. Лучшие 6 из Квалификационной лиги перейдут в Лигу 2 (также 6 перейдут в низшую лигу), а лучшие 4 из Лиги 2 перейдут в Лигу 1 (также 4 перейдут в низшую лигу). Наконец, лучшие 2 движка из Лиги 1 будут квалифицированы в Премьер-дивизион (также 2 будут переведены в низшую лигу).

Изменение структуры для TCEC необходимо из-за быстрого развития компьютерных шахмат. С новым форматом больше движков получат шанс подняться и получить шанс войти в элиту.

Вот список участников для Премьер-дивизиона и вновь образованных лиг. Посев двигателей полностью основан на TCEC 15.

Суперфинал (100 игр с контролем 120′+10″ – используется новая дебютная книга от Jeroen Noomen)

Развернуть для просмотра

1. 1-е место Премьер-дивизиона
2. 2-е место Премьер-дивизиона

[свернуть]

Премьер-дивизион (3x DRR с контролем 90′+5″ – используется новая 8-ходовая книга от Cato (Nelson Hernandez))

Развернуть для просмотра

1. Lc0 – текущий чемпион TCEC
2. Stockfish
3. Komodo
4. AllieStein
5. Houdini
6. Komodo MCTS
7. 1-е место из Лиги 1
8. 2-е место из Лиги 1

[свернуть]

Лига 1 (1x DRR с контролем 45+5 - используется 6-ходовая дебютная книга, рандомизированная)

Развернуть для просмотра

1. Ethereal
2. Fire
3. Xiphos
4. Laser
5. Andscacs
6. Fizbo
7. Jonny
8. Chiron
9. Ginkgo
10. ChessBrainVB
11. Booot
12. Rofchade
13. из Лиги 2
14. из Лиги 2
15. из Лиги 2
16. из Лиги 2

[свернуть]

Лига2 (1x DRR with time control 30+5 – using a 4 move book, рандомизированная)

Развернуть для просмотра

1. Fritz
2. Nirvana
3. Arasan
4. Texel
5. Vajolet
6. Gull
7. Pedone
8. Nemorino
9. Rubichess
10. Pirarucu
11. из квалификационного раунда
12. из квалификационного раунда
13. из квалификационного раунда
14. из квалификационного раунда
15. из квалификационного раунда
16. из квалификационного раунда

[свернуть]

Квалификация (1x DRR с контролем 30+5 – используется 2-ходовая дебютная книга, рандомизированная)

18 движков бьются за 6 квалификационных позиций. Это смесь движков из 4-го дивизиона и новых.

Развернуть для просмотра

1. Bagatur 1.7b
2. The Baron 3.44.1
3. Cheese 2.1
4. chess22k 1.12
5. ChessFighterNN v2.1-n8x128c_7411
6. Igel 1.8.0
7. Jumbo 0.6.117
8. Marvin 3.4.0
9. Minic 0.76
10. ScorpioNN v2.9.0-n_maddex_INT8
11. Stoofvlees II a10
12. Topple 0.7.2_dev
13. Tucano 7.07
14. Wasp 3.68
15. Winter 0.6
16. Asymptote 0.6.2
17. Rodent III
18. Lc0 CPU

[свернуть]

Промо-движок в полевых условиях
Многие движки в настоящее время используют NN, полностью используя графические процессоры. Тем не менее, чемпион Lc0 выпустил сильную версию, играющую только на CPU! Это не уникальный движок по критериям TCEC, но, безусловно, приятно видеть, как он играет против реальных конкурентов с силой, превышающей 3000 пунктов Эло. Таким образом, Lc0 CPU входит в TCEC в качестве промо-движка. Он будет играть в дивизионе, но в конце турнира все результаты движка будут аннулированы.

[sovaz1997]

Интересная партия для анализа: https://www.tcec-chess.com/archive.h...und=sf&game=14.

С одной стороны, Сток не понимал позицию. С другой стороны, Allie не дожала. А Сток бы наверняка дожал, играй он против себя с 73-го хода

[Alex_Zet]

Цитата: Сообщение от sovaz1997

Интересная партия
А Сток бы наверняка дожал, играй он против себя с 73-го хода

Вы видимо намекаете что Стокфиш снова не заслуженно в финале.

Вообще по справедливости, в финале должна была бы играть Лила против себя самой, две версии с двумя сильнейшими сетями, как сильнейшие движки на сегодняшний момент.

[sovaz1997]

Цитата: Сообщение от Alex_Zet

Вы видимо намекаете что Стокфиш снова не заслуженно в финале.

Вообще по справедливости, в финале должна была бы играть Лила против себя самой, две версии с двумя сильнейшими сетями, как сильнейшие движки на сегодняшний момент.

Нет, я намекаю на то, что Сток бы наверняка дожал, играй он против себя с 73-го хода. Свои бредовые домыслы лучше оставьте при себе.
А Stockfish как раз заслуженно в финале. Нечего там клонам делать.

[Vizvezdenec]

Красный стокфиш вроде бы не видел, как пробить. По первой линии получался какой-то эндшпиль с ладьёй + кучей пешек против слона и кучи пешек, но оценка была строго горизонтальная, хоть и +5.
Возможно, там просто была сложная крепость. Судить не берусь - тут надо всерьёз браться уже за анализ

[sovaz1997]

Цитата: Сообщение от Vizvezdenec

Красный стокфиш вроде бы не видел, как пробить. По первой линии получался какой-то эндшпиль с ладьёй + кучей пешек против слона и кучи пешек, но оценка была строго горизонтальная, хоть и +5.
Возможно, там просто была сложная крепость. Судить не берусь - тут надо всерьёз браться уже за анализ

Вот тут согласен, здесь нужен очень серьезный анализ. На моём ПК даже если Стоку показать, он все равно не сразу видит перевес. И эту конкретику, как именно достигаются +3, важно понять. В любом случае, это какой-то цугцванг.

[Alex_Zet]

Цитата: Сообщение от Alex_Zet

Выскажу предположение что счёт 10.5 - 9.5 между Элли и Гудини объясняется ничем иным, нежели как только передвинуть время проведение финала что бы охватить наибольшее количество просмотров. Так называемый прайм тайм.
Уже для всех ясно что можно легко регулировать весь процесс любого из турниров, включая и распределение итоговых мест.
Единственное что возможно не учли, такой подход плачевен для них же самих. Это тот случай когда система пожирает сама себя .

Пик активности пользователей "ВКонтакте" размазан от 13 до 22-23. Причем с 22.00 до 0.00 наблюдается дополнительный скачок активности. Наибольшего охвата аудитории реклама "ВКонтакте" достигнет с 14 до 23.00. Это главный практический вывод из небольшого исследования, проведенного владельцем блога altblog.ru.




В 7 утра "ВКонтакте" бывает чуть более одного миллиона пользователей. Большая часть аудитории – еще спит. Возможно, в этом миллионе "жаворонков" значительную долю составляют люди из других часовых поясов.

До 13-14 часов аудитория прибавляет примерно по миллиону в час, после чего стабилизируется на аудитории 5-5,5 млн человек до 22-23 часов. В 22-23 наблюдается дополнительный всплеск активности: очевидно, юзеры выходят пообщаться с друзьями или посмотреть фильм перед сном. После 0.00 начинается отток аудитории, чуть более миллиона человек в час. К пяти утра в соцсети остается порядка 700 тыс человек.

Основной вопрос, который волнует интернет-бизнес: в какое время лучше показывать свою рекламу "ВКонтакте"? Уточнить оптимальное время помогают данные по 4 пабликам и возрастным группам посетителей.



Полуфинал Сток - Элли закончился примернов полдень по мск. В США это раннее утро.
Фмнал начался приерно в 20 - 00 по Москве
Сейчас 0ч 40 мин по мск, в Нью Йорке 17 - 40, две третьих пятой партии позади, следовательно финал целиком закончится примерно когда в Нью Йорке будет 21 - 00.

Уверен что вам удастся связать факты между собой.

[Vizvezdenec]

Всё, Лила просчитывается в 8 игре и проигрывает, Стокфиш берёт и кубок заодно

[Vizvezdenec]

Кстати, к вопросу о крепостях.
Вот такая позиция.

5k2/5p1p/7P/4R1P1/5P2/6K1/8/r7 w - -

Оценка SF +68, оценка Лилы +2 (и статическая на протяжении типа 5 ходов).
А ведь, если я правильно понимаю, сдвинуть фигуры на ряд ниже - и это крепость.
Вот и опиши это всё эвристиками.

[alchemist888]

Поздравляю команду Stockfish, а также всех болельщиков и тех кто поддерживает проект с двойной победой в TCEC 16!
За последние полгода Stockfish значительно усилился. Порядка +25 Elo на одном ядре!
Жаль лишь, что финал главного ивента получился не тем, которого все ждали.
Однако, сегодня нельзя с уверенностью сказать, кто является фаворитом в матче SF или LCZero. Известно то, что до финала TCEC 17 T60 не успеет полноценно обучиться. А значит, если Leela и выйдет в финал, то сетка будет одним из форков T40, который уже практически не усиливается. Поэтому фаворитом в следующем TCEC 17 будет безусловно Стокфиш.
Что ж, ждем TCEC 18 с новым витком соперничества на главной арене соревнований по компьютерным шахматам

[Vizvezdenec]

Ну посмотрим, пока что у нас очередной период затишья, у меня вот патчей уже 1,5 месяца не было Впрочем, это дело такое - месяц на месяц не приходится.

[Maratka]

Цитата: Сообщение от alchemist888

Известно то, что до финала TCEC 17 T60 не успеет полноценно обучиться. А значит, если Leela и выйдет в финал, то сетка будет одним из форков T40, который уже практически не усиливается. Поэтому фаворитом в следующем TCEC 17 будет безусловно Стокфиш.
Что ж, ждем TCEC 18 с новым витком соперничества на главной арене соревнований по компьютерным шахматам

В том и дело, что сеть 6xx потенциально может дать и 50, и 150 Elo к лучшим сетям 4x. 50 Elo - это год или чуть меньше для SF, 150 - это два-три.

Но при этом и сама сеть 6x учится не быстро - раз, и вообще говоря не гарантировано должна превзойти 4x - два. Так что да, на ближайший сезон SF скорее всего будет фаворитом, да и через сезон возможно. А вот дальше все сложно: через год сеть может выдать свои 50, и восстановить паритет, а может и 150, уйдя далеко в открыв. А может ничего не дать, и тогда в общем-то все сводится к уже многим привычному "вечный №1, вечный №2 и остальные", ибо тогда придется учить 7xx, а это не ранее, чем через года два, за которые SF наберет к текущему себе еще +100.

[Maratka]

Посмотрел еще настройки.
LZ играл при значении CPuct=3.0

Помнится раньше было 3.4, а crem рассказывал, что увеличение этого параметра снижает количество зевков LZ.

[alchemist888]

Цитата: Сообщение от Maratka

Но при этом и сама сеть 6x учится не быстро - раз, и вообще говоря не гарантировано должна превзойти 4x - два. Так что да, на ближайший сезон SF скорее всего будет фаворитом, да и через сезон возможно.

На самом деле, при некоторых раскладах T60 успевает к финалу TCEC 17, если обучение будет проходить текущими темпами (300k+ игр в день). На каждый турнир TCEC приходится 4-5 месяцев + небольшой перерыв между турнирами. Соответственно, если финал TCEC 17 стартанет через 4 месяца, то ожидается порядка 55-и млн. тренировочных игр для T60, а это уже очень приличный уровень.
Конечно тут все зависит от того, как много ресурсов будет донатиться в тренировочный процесс.
Но при любых раскладах T60 будет готова к TCEC 18.

[Rom77]

Насколько я помню, Сеть 40 тоже не успевала к финалу TCEC 15, но JHorthos её по быстрому допилил - снизил LR и дотренировал. Таким образом в финале играла сеть nT40.T8.610, и как в последствии оказалось вполне себе ничего сеть была.

[Maratka]

Цитата: Сообщение от alchemist888

Но при любых раскладах T60 будет готова к TCEC 18.

Не забывайте, что лучшая сеть - это не то же самое, что лучший движок с этой сетью: 6xx заметно медленнее, а сколько это в Elo, думаю можно прикинуть, заменив 2080_Ti на 2070 при лучших текущих 4x на обоих сторонах, и сравнив их в турнире.

[alchemist888]

Цитата: Сообщение от Rom77

Насколько я помню, Сеть 40 тоже не успевала к финалу TCEC 15, но JHorthos её по быстрому допилил - снизил LR и дотренировал. Таким образом в финале играла сеть nT40.T8.610, как в последствии оказалось вполне себе ничего.

Нет, T40 в финал TCEC 15 с запасом успевала. Единственное, что третьего снижения LR не было, что Jhorthos и сделал. Но его сеть базировалась на 42100, если не ошибаюсь (~65M тренировочных игр), и как известно 41800 некоторое время назад выиграла CCC7, это уже говорило о том, что сеть готова к сражению с SF.

[Maratka]

Цитата: Сообщение от Rom77

но JHorthos её по быстрому допилил - снизил LR и дотренировал.

6xx по быстрому дотренировать не выйдет.

Цитата: Сообщение от Rom77

Таким образом в финале играла сеть nT40.T8.610, как в последствии оказалось вполне себе ничего.

При неоптимальных настройках SF'ша, как на днях оказалось.

[alchemist888]

Цитата: Сообщение от Maratka

Не забывайте, что лучшая сеть - это не то же самое, что лучший движок с этой сетью: 6xx заметно медленнее, а сколько это в Elo, думаю можно прикинуть, заменив 2080_Ti на 2070 при лучших текущих 4x на обоих сторонах, и сравнив их в турнире.

На железе TCEC и их же контролях времени всё в порядке, сеть успевает набирать необходимую глубину, чтобы минимизировать зевки, основанные на счете вариантов. Точнее говоря, количество зевков будет не многим больше, чем делала бы 20b сеть. При значениях более 3M nodes на ход нейронные сети пока скейлятся не очень хорошо, поэтому большая сетка будет разве что хуже в цейтнотах.

[Rom77]

Цитата: Сообщение от alchemist888

Нет, T40 в финал TCEC 15 с запасом успевала. Единственное, что третьего снижения LR не было, что Jhorthos и сделал. Но его сеть базировалась на 42100, если не ошибаюсь (~65M тренировочных игр), и как известно 41800 некоторое время назад выиграла CCC7, это уже говорило о том, что сеть готова к сражению с SF.

Ну второе-то снижение LR, я надеюсь, Т60 успеет пройти до финала, при нынешних 10-14 сетках в сутки. Вполне возможно, что и после второго снижения успеет наиграть прилично игр, если TCEC не будет слишком поспешать. Тогда ситуация повторится.

[alchemist888]

Цитата: Сообщение от Maratka

6xx по быстрому дотренировать не выйдет.

Процесс дотренировки большой сетки практически не отличается от того же процесса на сетках 20b. Напоминаю, что при дотренировывании практически не генерируются игры, а обучение в основном проходит на готовой базе партий.

[Maratka]

Цитата: Сообщение от alchemist888

На железе TCEC и их же контролях времени всё в порядке, сеть успевает набирать необходимую глубину, чтобы минимизировать зевки, основанные на счете вариантов.

Многое от настроек движка зависит, чуть выше я писал.
Но в любом случае это нужно проверять, а не гадать. Однако такого матча я пока что не видел, и скорее всего еще не скоро увижу, хотя организовать его в качестве бонуса на том же TCEC проще паренной репы: одной копии движка даем 2080 Ti, второй - 2080 (можно чуть опустить частоты, тогда будет фактически 2070), остальное все равное. 15+5 контроля IMHO достаточно, ибо сеть относительно компактная, т.е. наиграть сотен пять партий за месяц вполне реально.

[svoitsl]

Цитата: Сообщение от alchemist888

а обучение в основном проходит на готовой базе партий.

обучение до 3500 Эло конечно по последним 9-10 млн готовых игр, но вот дотренировка наверное все же по новым играм должна проходить?

[alchemist888]

Цитата: Сообщение от svoitsl

обучение до 3500 Эло конечно по последним 9-10 млн готовых игр, но вот дотренировка наверное все же по новым играм должна проходить?

Суть процесса заключается в том, что за основу берется какая-то сеть и база сыгранный партий. Затем повышается LR и сеть прогоняют по этой базе, при этом те же самые партии можно использовать по нескольку раз.
Плюс используются различные улучшения типа WDL, 7-men rescoring и различные методы тренировки.
Самих тренировочных игр или нет, или очень мало. Чтобы генерировать тренировочные игры требуется огромное количество ресурсов. Лично я почти месяц использовал Google Сloud и в сумме натренировал от силы сетей 10-ть для T40.

[svoitsl]

Цитата: Сообщение от alchemist888

Суть процесса заключается в том,

таким образом была создана 610 сеть, но возможно, что это не единственно возможный алгоритм, Jhorthos пробовал по-всякому, но самому много сетей не на тренировать, это верно.

[Vizvezdenec]

Ну, я думаю, что если бы noobpwnftw захотел, он бы смог.
Но для нужд датацентров, видимо, не нужно много топовых видеокарт.

[alchemist888]

Цитата: Сообщение от svoitsl

таким образом была создана 610 сеть, но возможно, что это не единственно возможный алгоритм, Jhorthos пробовал по-всякому, но самому много сетей не на тренировать, это верно.

Таким образом все его форки натренированы. Знаю, что он генерировал игры для продолжения T40, таким образом появились сети с 42851 по 42872. И там они получались примерно по 1-й штуке в сутки.

[svoitsl]

Цитата: Сообщение от alchemist888

таким образом появились сети с 42851 по 42872

Странно,что эксперимент не удался, ведь вроде логично предположить, что если генерировтать игры на большую глубину (3200 вместо 800 узлов),то сети должны быть"умнее", но к сожалению они об этом не знали.

[alchemist888]

Цитата: Сообщение от svoitsl

Странно,что эксперимент не удался, ведь вроде логично предположить, что если генерировтать игры на большую глубину (3200 вместо 800 узлов),то сети должны быть"умнее", но к сожалению они об этом не знали.

Там проблема в том, что они пробовали обучить уже полностью обученную сеть. При этом даже не повышался LR. Логично, что много выжать Elo такой тренировкой не получится.

[svoitsl]

[svoitsl]