TCEC 16 - Чемпионат Мира среди шахматных движков

[sovaz1997]

TCEC 16 начнется 14 Июля 2019 года в 17:00 (по МСК) с участием сильнейших шахматных движков в мире. Впервые в истории движок с нейронной сетью, Leela Chess Zero (Lc0), будет защищать как титул лиги, так и Кубок.



TCEC 16 будет представлен в новом формате. Он сохранит известный Премьер-дивизион и Суперфинал, как и в предыдущих сезонах, но даст больше шансов движкам, чтобы подняться в рейтинге. По этой причине будут созданы три лиги из 16 движков. Мероприятие начнется с Квалификационной лиги, где будут представлены все новички, включая новые движки AB и движки, использующие нейронные сети. Лучшие 6 из Квалификационной лиги перейдут в Лигу 2 (также 6 перейдут в низшую лигу), а лучшие 4 из Лиги 2 перейдут в Лигу 1 (также 4 перейдут в низшую лигу). Наконец, лучшие 2 движка из Лиги 1 будут квалифицированы в Премьер-дивизион (также 2 будут переведены в низшую лигу).

Изменение структуры для TCEC необходимо из-за быстрого развития компьютерных шахмат. С новым форматом больше движков получат шанс подняться и получить шанс войти в элиту.

Вот список участников для Премьер-дивизиона и вновь образованных лиг. Посев двигателей полностью основан на TCEC 15.

Суперфинал (100 игр с контролем 120′+10″ – используется новая дебютная книга от Jeroen Noomen)

Развернуть для просмотра

1. 1-е место Премьер-дивизиона
2. 2-е место Премьер-дивизиона

[свернуть]

Премьер-дивизион (3x DRR с контролем 90′+5″ – используется новая 8-ходовая книга от Cato (Nelson Hernandez))

Развернуть для просмотра

1. Lc0 – текущий чемпион TCEC
2. Stockfish
3. Komodo
4. AllieStein
5. Houdini
6. Komodo MCTS
7. 1-е место из Лиги 1
8. 2-е место из Лиги 1

[свернуть]

Лига 1 (1x DRR с контролем 45+5 - используется 6-ходовая дебютная книга, рандомизированная)

Развернуть для просмотра

1. Ethereal
2. Fire
3. Xiphos
4. Laser
5. Andscacs
6. Fizbo
7. Jonny
8. Chiron
9. Ginkgo
10. ChessBrainVB
11. Booot
12. Rofchade
13. из Лиги 2
14. из Лиги 2
15. из Лиги 2
16. из Лиги 2

[свернуть]

Лига2 (1x DRR with time control 30+5 – using a 4 move book, рандомизированная)

Развернуть для просмотра

1. Fritz
2. Nirvana
3. Arasan
4. Texel
5. Vajolet
6. Gull
7. Pedone
8. Nemorino
9. Rubichess
10. Pirarucu
11. из квалификационного раунда
12. из квалификационного раунда
13. из квалификационного раунда
14. из квалификационного раунда
15. из квалификационного раунда
16. из квалификационного раунда

[свернуть]

Квалификация (1x DRR с контролем 30+5 – используется 2-ходовая дебютная книга, рандомизированная)

18 движков бьются за 6 квалификационных позиций. Это смесь движков из 4-го дивизиона и новых.

Развернуть для просмотра

1. Bagatur 1.7b
2. The Baron 3.44.1
3. Cheese 2.1
4. chess22k 1.12
5. ChessFighterNN v2.1-n8x128c_7411
6. Igel 1.8.0
7. Jumbo 0.6.117
8. Marvin 3.4.0
9. Minic 0.76
10. ScorpioNN v2.9.0-n_maddex_INT8
11. Stoofvlees II a10
12. Topple 0.7.2_dev
13. Tucano 7.07
14. Wasp 3.68
15. Winter 0.6
16. Asymptote 0.6.2
17. Rodent III
18. Lc0 CPU

[свернуть]

Промо-движок в полевых условиях
Многие движки в настоящее время используют NN, полностью используя графические процессоры. Тем не менее, чемпион Lc0 выпустил сильную версию, играющую только на CPU! Это не уникальный движок по критериям TCEC, но, безусловно, приятно видеть, как он играет против реальных конкурентов с силой, превышающей 3000 пунктов Эло. Таким образом, Lc0 CPU входит в TCEC в качестве промо-движка. Он будет играть в дивизионе, но в конце турнира все результаты движка будут аннулированы.

[Омегазеро]

Цитата: Сообщение от sovaz1997

я вижу только неверное оперирование понятиями

Чтобы прояснить понятия, надо задать единственный вопрос

Рейтинг, рассчитанный по итогам матча N-партий, является средним по всем N-партиям или нет?

[sovaz1997]

Новый сервер: https://tcec-chess.com/

[Maratka]

Цитата: Сообщение от sovaz1997

Кстати, по поводу рубки хвоста: в этом сезоне Сток может плохо его рубить относительно Лилы, т. к. под видом хвоста у нас выступают нейронные сети. Но это пока всего лишь теория)

Ну уж не знаю, как на тех движках, а в 3С SF опять рубит всех.

[Neofelis]

Ну так контемп 70. Чего бы и не рубить хвост.

[Maratka]

Contempt=70 - это как минимум весьма спорно против LZ и клонов, а с ними SF играет ровно, с одним -1, с другим +1.

[sovaz1997]

Цитата: Сообщение от Maratka

Ну уж не знаю, как на тех движках, а в 3С SF опять рубит всех.

Мы в теме про TCEC, и я имею ввиду именно TCEC
А уж судить по Лиле на CCC, работающей на 2 из 4 видеокартах - такое себе))
Пусть Сток кого угодно рубит. Важно, что у него железка в 2 раза дороже выходит.

[dew]

Кстати, натренированный на скорую руку SugarNN-1.1 (это далеко не последний сток) из 71 игр пока выигрывает со счетом 12:8 против сети T40B.4-160 на одном из компов для продолжительных тестов.
TC: 3 min + 1.8 sec
sugar: 7 threads, 7GB Hash
lz0: 7 threads(просто так), GPU - разогнанная GTX 1070

[Maratka]

Цитата: Сообщение от sovaz1997

Пусть Сток кого угодно рубит. Важно, что у него железка в 2 раза дороже выходит.

Не дороже у него железка, если правильно ее собирать. А если неправильно, то и Ryzen TR на 64 потока против пары Тесел окажется во много-много раз дешевле.

[sovaz1997]

Цитата: Сообщение от Maratka

Не дороже у него железка, если правильно ее собирать. А если неправильно, то и Ryzen TR на 64 потока против пары Тесел окажется во много-много раз дешевле.

Ну, или так

https://www.ixbt.com/news/2019/09/01...80m-52000.html

[Neofelis]

Цитата: Сообщение от Maratka

Не дороже у него железка, если правильно ее собирать. А если неправильно, то и Ryzen TR на 64 потока против пары Тесел окажется во много-много раз дешевле.

Что вы так к теслам прицепились? Они же только для тренировки огромных сетей. Для инференса их никто никогда не использует. Они очень медленные. Да и для тренировки, если сети маленькие (а у Лилы маленькие сети), то нет смысла.

[Maratka]

Цитата: Сообщение от Neofelis

Что вы так к теслам прицепились? Они же только для тренировки огромных сетей.

Они для выполнения математических расчетов. Вот для чего они. В отличии от игровых GeForce, которые нацелены на совершенно иную нишу.

Цитата: Сообщение от Neofelis

Они очень медленные.

С какого перепугу? Они действительно будут чуть медленнее, ибо проф-карты никто не гонит до упора, и частоты у них подбираются исходя из бОльшей стабильности, а не лишних 5-10% производительности, но на этом и вся разница.

Зато с точки зрения именно что стабильности, Теслы выше на три головы, т.к. в них ECC-память.

[Maratka]

Цитата: Сообщение от sovaz1997

Ну, или так
https://www.ixbt.com/news/2019/09/01...80m-52000.html

Можно и так, когда nVidia выпустит решение, раза в два более быстрое, чем имеющееся. Ждать явно не более года: на 7 нм. количество ядер вырастет раза в полтора минимум, плюс наверняка поднимутся и частоты.

[sovaz1997]

Ну, возможно, если цель сделать стабильный сервер, а Теслы на 5-10% медленнее, то это хороший вариант. Кстати, я так и не понял, что там на CCC случилось с видеокартами.

[dew]

ECC-память не даст процессу/системе зависнуть, но она медленная, и будет еще медленнее, когда начнут коррекции ошибок идти (а никто и не заметит - все же работает)
Гнать до упора - вполне себе вариант, когда у тебя температура на GPU до 80 и в зоне VRM около 90 (это например для GTX 1070)

[Maratka]

Цитата: Сообщение от dew

ECC-память не даст процессу/системе зависнуть, но она медленная, и будет еще медленнее, когда начнут коррекции ошибок идти (а никто и не заметит - все же работает)

Ну как медленная? На десяток процентов при прочих равных. А коррекцию ошибки вообще никто не заметит, она не для того, чтобы убитый чип памяти работал, а для того, чтобы словить одиночный сбой из-за залетевшего скажем из космоса гамма-кванта.

Т.е. никакого принципиального падения производительности нет и не будет, зато отменная стабильность.

Цитата: Сообщение от dew

Гнать до упора - вполне себе вариант, когда у тебя температура на GPU до 80 и в зоне VRM около 90 (это например для GTX 1070)

Для дома - пожалуйста. А когда сервер с десятками плат моделирует скажем профиль лопастей винта для подлодки, чтобы достичь максимальной бесшумности, и делает это месяц, того, кто решил сократить месяц до 29 дней за счет разгона, но потерял в результате данные за две недели боюсь как минимум уволят. ;)

[Alex_Zet]

Становится все более и более очевидным что за две путевки в суперфинал поборятся три движка. И если Лила и Сток ожидаемо претендуют на престол, то Элли может как метеор ворваться в элиту и стать кое для кого головной болью.

2 LCZero v0.22.0-nT40B.4-160	        10	6.0	0	2 [1/1]	0 [0/0]	258.00	3910	9 [3919]
3 AllieStein v0.5-dev_1359f44-n10	10	5.5	0	1 [1/0]	0 [0/0]	236.50	3810	27 [3837]
4 Stockfish 190826	                10	5.0	0	0 [0/0]	0 [0/0]	215.00	3898	-8 [3890]

[Alex_Zet]

Лила первая из движков преодолела рубеж 3900 эло. Космос!
А Гудини уже идет на последнем месте. Это сенсация!

Хотя какая это сенсация, это закономерность.

[dew]

да рано еще a-b бояться сетей
вот комп стоимость равный торчащей в нем видеокарты..

[Maratka]

Ко стоимости нужно подходить осторожно.
Скажем RTX 2060 гораздо быстрее для LZ, чем примерно равная по цене Vega56 (а сейчас возможно уже и 64), или GTX 1070.

С другой стороны, не все гладко и с производительностью, скажем шестиядерный i5 явно быстрее восьмиядерного AMD-FX, включая топовые модели под 5 Ghz, но далеко не факт, что SF на i5 при прочем равном сможет выиграть матч на длинном контроле против того же SF на FX, ибо потоков не хватит, т.е. FX считает конечно же медленнее, и набирает глубину поменьше, но зато считает "шире", а потому с меньшей вероятностью пропустит т.н. "тихий" ход. Ну а учитывая цену (да, опять вернемся к стоимости!) FX'ов ~100 долларов, а за младшие модели и того меньше (https://indicator.com.ru/processor-a...ent=7778456420), причем это новые процессоры, а не б/у от китайцев, оно и вовсе становится весьма запутанно: FX'у за разницу в цене с i5 можно дать +16 гигабайт памяти, т.е. SF на FX будет играть с 16-24 гигами хеша, а i5 довольствоваться 8-12, а для длинных контролей это очень важно.

А потому я лично вообще не очень представляю, как сравнивать это все. Единственное, что приходит в голову, это список типичных конфигов, и результаты на них. А дальше пусть шахматисты выбирают близкую к их конфигурацию, и смотрят на результат, что на этом железе предпочтительнее.

[dew]

Ну, как собрал, так собрал, это для экспериментов
а для себя просто отмечаю факт, из 100 игр пока SugaR ведет со счетом 22:9 против этой как-бы сильной сети.. хотя против сети 42850 он со скрипом играл (наверное "обучился" ) Хотя NN в сахаре, это вовсе не сеть, а положительный опыт TT в определенных ситуациях

[Maratka]

Цитата: Сообщение от dew

Ну, как собрал, так собрал, это для экспериментов
а для себя просто отмечаю факт, из 100 игр пока SugaR ведет со счетом 22:9 против этой как-бы сильной сети.. хотя против сети 42850 он со скрипом играл (наверное "обучился" ) Хотя NN в сахаре, это вовсе не сеть, а положительный опыт TT в определенных ситуациях

Т.е. "NN в сахаре" - это по сути статистика игры в дебютах, ибо после 10-12 ходов статистику собирать уже бесполезно практически в любой позиции, т.к. она встречается крайне редко?
Ну и соответственно "самообучение" сводится к выбору предпочтительного дебюта против того же самого соперника?

[dew]

Цитата: Сообщение от Maratka

Т.е. "NN в сахаре" - это по сути статистика игры в дебютах, ибо после 10-12 ходов статистику собирать уже бесполезно практически в любой позиции, т.к. она встречается крайне редко?
Ну и соответственно "самообучение" сводится к выбору предпочтительного дебюта против того же самого соперника?

Не хочу вводить в заблуждение, вот тут лучше написано:

https://github.com/Zerbinati/SugaR-NN

там где про pawns.bin и experience.bin

[dew]

pawngame.bin *

[Maratka]

Ну в общем-то понятно, не более чем статистика.
Т.е. ничего принципиально нового, но интересен подход с точки зрения заточенности под материал.

[dew]

ну, я люблю, просто, сам все проверять
факт в том, что голый сахар будет проигрывать стоку с теми же патчами
а потом все происходит наоборот, и сахар потом уже достойно держится против книг brainfish (но брейнфиш обеспечивает себе доп. время за счет дебютных ходов - поэтому итоговый счет пока не впечатляет, но посмотрим, что будет через месяц после "тренировки" с разными "сильнейшими" движками)

[sovaz1997]

DivP стартовал!

[Alex_Zet]

Завтра вечером, ближе к ночи состоится игра Лила - Сток. Вот там и посмотрим хваленные патчи, так ли они хороши. Лила очень сильна, нечеловечески. Сейчас вон дожевывает Скорпина. Чую завтра Стоком закусит.

[svoitsl]

Цитата: Сообщение от Alex_Zet

Вот там и посмотрим хваленные патчи, так ли они хороши.

Но по любому лучше с ними,чем без них.
А если учитывать,что рост силы игры Лилы временно приостановлен, то у Стока есть все шансы догнать её
Вполне возможно, что повторить рост в 100 Эло за год на сети 256х20 вряд ли получится в будущем,а для сети 320х24 нужны быстрые процы (ну хотя бы хорошее масштабирование на 4 RTX), то перспективы не очень....

[dew]

Хорошо, что этот форум не читают многие разработчики стока.. А то с пылу с жару, смержили бы Stockfish-cluster с основным бранчем (PR давно там время от времени возникает) и с невинными глазами продолжили вакханалию разных технологий

[Alex_Zet]

К декабрю думаю выйдет Стокфиш 11, это примерно + 50 эло к 10 версии. Но проблема для Стока в том что к тому времени Лила будет играть в силу Стокфиш 12. То есть опережать на год работы. А когда выйдет Стокфиш 12 то разрыв между ними будет в 2 версии.