TCEC 16 - Чемпионат Мира среди шахматных движков

[sovaz1997]

TCEC 16 начнется 14 Июля 2019 года в 17:00 (по МСК) с участием сильнейших шахматных движков в мире. Впервые в истории движок с нейронной сетью, Leela Chess Zero (Lc0), будет защищать как титул лиги, так и Кубок.



TCEC 16 будет представлен в новом формате. Он сохранит известный Премьер-дивизион и Суперфинал, как и в предыдущих сезонах, но даст больше шансов движкам, чтобы подняться в рейтинге. По этой причине будут созданы три лиги из 16 движков. Мероприятие начнется с Квалификационной лиги, где будут представлены все новички, включая новые движки AB и движки, использующие нейронные сети. Лучшие 6 из Квалификационной лиги перейдут в Лигу 2 (также 6 перейдут в низшую лигу), а лучшие 4 из Лиги 2 перейдут в Лигу 1 (также 4 перейдут в низшую лигу). Наконец, лучшие 2 движка из Лиги 1 будут квалифицированы в Премьер-дивизион (также 2 будут переведены в низшую лигу).

Изменение структуры для TCEC необходимо из-за быстрого развития компьютерных шахмат. С новым форматом больше движков получат шанс подняться и получить шанс войти в элиту.

Вот список участников для Премьер-дивизиона и вновь образованных лиг. Посев двигателей полностью основан на TCEC 15.

Суперфинал (100 игр с контролем 120′+10″ – используется новая дебютная книга от Jeroen Noomen)

Развернуть для просмотра

1. 1-е место Премьер-дивизиона
2. 2-е место Премьер-дивизиона

[свернуть]

Премьер-дивизион (3x DRR с контролем 90′+5″ – используется новая 8-ходовая книга от Cato (Nelson Hernandez))

Развернуть для просмотра

1. Lc0 – текущий чемпион TCEC
2. Stockfish
3. Komodo
4. AllieStein
5. Houdini
6. Komodo MCTS
7. 1-е место из Лиги 1
8. 2-е место из Лиги 1

[свернуть]

Лига 1 (1x DRR с контролем 45+5 - используется 6-ходовая дебютная книга, рандомизированная)

Развернуть для просмотра

1. Ethereal
2. Fire
3. Xiphos
4. Laser
5. Andscacs
6. Fizbo
7. Jonny
8. Chiron
9. Ginkgo
10. ChessBrainVB
11. Booot
12. Rofchade
13. из Лиги 2
14. из Лиги 2
15. из Лиги 2
16. из Лиги 2

[свернуть]

Лига2 (1x DRR with time control 30+5 – using a 4 move book, рандомизированная)

Развернуть для просмотра

1. Fritz
2. Nirvana
3. Arasan
4. Texel
5. Vajolet
6. Gull
7. Pedone
8. Nemorino
9. Rubichess
10. Pirarucu
11. из квалификационного раунда
12. из квалификационного раунда
13. из квалификационного раунда
14. из квалификационного раунда
15. из квалификационного раунда
16. из квалификационного раунда

[свернуть]

Квалификация (1x DRR с контролем 30+5 – используется 2-ходовая дебютная книга, рандомизированная)

18 движков бьются за 6 квалификационных позиций. Это смесь движков из 4-го дивизиона и новых.

Развернуть для просмотра

1. Bagatur 1.7b
2. The Baron 3.44.1
3. Cheese 2.1
4. chess22k 1.12
5. ChessFighterNN v2.1-n8x128c_7411
6. Igel 1.8.0
7. Jumbo 0.6.117
8. Marvin 3.4.0
9. Minic 0.76
10. ScorpioNN v2.9.0-n_maddex_INT8
11. Stoofvlees II a10
12. Topple 0.7.2_dev
13. Tucano 7.07
14. Wasp 3.68
15. Winter 0.6
16. Asymptote 0.6.2
17. Rodent III
18. Lc0 CPU

[свернуть]

Промо-движок в полевых условиях
Многие движки в настоящее время используют NN, полностью используя графические процессоры. Тем не менее, чемпион Lc0 выпустил сильную версию, играющую только на CPU! Это не уникальный движок по критериям TCEC, но, безусловно, приятно видеть, как он играет против реальных конкурентов с силой, превышающей 3000 пунктов Эло. Таким образом, Lc0 CPU входит в TCEC в качестве промо-движка. Он будет играть в дивизионе, но в конце турнира все результаты движка будут аннулированы.

[Maratka]

Ну к чему это?
Второсортные движки, один - и вовсе на 95% клон. Т.е. его уровень конечно не "второсортный", но и звезд он явно не хватает - и это против явного аутсайдера в рамках ТОП-10.

[svoitsl]

Цитата: Сообщение от Maratka

- и вовсе на 95% клон

Если имеется в виду Элли, то в связи с тем,что новые исходники (как впрочем и бинарники) Лилы уже публично не доступны, то процент "клоновости" постепенно снижается

[sovaz1997]

Цитата: Сообщение от svoitsl

Если имеется в виду Элли, то в связи с тем,что новые исходники (как впрочем и бинарники) Лилы уже публично не доступны, то процент "клоновости" постепенно снижается

Всякие мелкие оптимизации и изменения не влияют на "кллновость" Allie

[svoitsl]

Цитата: Сообщение от sovaz1997

Всякие мелкие оптимизации и изменения не влияют на "кллновость" Allie

Пока нет исходника об этом трудно судить, но если учесть мнение crem'а, то переписать весь код (при желании) можно за месяц (не сильно при этом утруждаясь).
За тот же месяц можно и многое другое успеть сделать
(обучить сеть другого формата например)

[sovaz1997]

Цитата: Сообщение от svoitsl

Пока нет исходника об этом трудно судить, но если учесть мнение crem'а, то переписать весь код (при желании) можно за месяц (не сильно при этом утруждаясь).
За тот же месяц можно и многое другое успеть сделать
(обучить сеть другого формата например)

Лично я вижу, что 3 дня назад работали над Allie: https://github.com/manyoso/allie. Так что "нет исходника" - отпадает.

[svoitsl]

[sovaz1997]

Судя по скоростям CCC, железо для сетей там даже хуже, чем на TCEC.

[Vizvezdenec]

GPU: 3x RTX 2080ti (44 GB GPU memory)
CPU: 2x Intel Xeon Gold 6154
Cores: 36 physical
RAM: 96 GB
что-то не похоже на "железо даже хуже".

[alchemist888]

По скоростям СССС не хуже, по крайней мере для LCZero. Leelenstein только по какой-то причине там медленноват. Однако, соотношение скоростей с большим запасом в пользу SF. На СССС SF получает двукратное ускорение по сравнению с TCEC, в то время как сетки ускоряются приблизительно в 1.5 раза.

[Maratka]

Цитата: Сообщение от Vizvezdenec

GPU: 3x RTX 2080ti (44 GB GPU memory)

Постоянно путают...
Вот сколько памяти на одной плате?

[Maratka]

Цитата: Сообщение от alchemist888

На СССС SF получает двукратное ускорение по сравнению с TCEC

Т.е. ему дали 90 ядер?
Или все же 90 потоков, которые дают прибавку ~30%?

[Maratka]

Цитата: Сообщение от sovaz1997

Судя по скоростям CCC, железо для сетей там даже хуже, чем на TCEC.

я вас не виню: https://ru.wikipedia.org/wiki/%D0%A1...BD%D0%B8%D1%8F

[alchemist888]

Цитата: Сообщение от Maratka

Т.е. ему дали 90 ядер?
Или все же 90 потоков, которые дают прибавку ~30%?

Там 90 потоков. Но я смотрю на разницу в скоростях. В дебюте в турнирах СССС у SF 100+ Mn/s, в TCEC 50-55 Mn/s. У LCZero T2 ~ 45 Kn/s в СССС ~ 30 Kn/s. Или Вы будете утверждать, что 100 Mn/s полученных без HT > чем те же 100 Mn/s c HT?

[Maratka]

Цитата: Сообщение от alchemist888

Но я смотрю на разницу в скоростях.

Разница в скоростях - это всего лишь то, что рисует оболочка. Неоткуда там быть двукратной разнице, исходя из спецификаций процессоров.

[alchemist888]

Цитата: Сообщение от Maratka

Разница в скоростях - это всего лишь то, что рисует оболочка. Неоткуда там быть двукратной разнице, исходя из спецификация процессоров.

Да? Не слышал, чтобы из-за оболочки скорость росла Да и почему она что-то сама должна рисовать, если эти данные передаются самим движком. Задача оболочки лишь выводить данные.
Во всяком случае здесь Ваше мнение против показателей на известных сайтах. Вторым я доверяю больше.

[Maratka]

Цитата: Сообщение от alchemist888

Да? Не слышал, чтобы из-за оболочки скорость росла

А я не слышал, чтобы добавление пяти ядер к имеющимся 43-м давало 100% скорости.
Объяснить это можно только разгоном, но очень сомневаюсь, что в серверах доступна эта опция.

Цитата: Сообщение от Vizvezdenec

GPU: 3x RTX 2080ti (44 GB GPU memory)

alchemist888, как такое возможно?
Объяснение одно: несколько месяцев назад у них трудилось 4 платы, в каждой из которых как известно 11 гигабайт памяти, а теперь три, но спецификацию сервера изменили коряво.
Так что вполне возможно, что разница в скорости объясняется и тем, что там уже не два Xeon по 24 ядра, а четыре, а может и вовсе - другой сервер на базе Epic. И это опять же "забыли" отразить в спецификации.

[alchemist888]

Цитата: Сообщение от Maratka

А я не слышал, чтобы добавление пяти ядер к имеющимся 43-м давало 100% скорости.
Объяснить это можно только разгоном, но очень сомневаюсь, что в серверах доступна эта опция.

Все элементарно. В TCEC каждое ядро запускается в однопоточном режиме, в CCC в двухпоточном. Итого получаем 43 потока против 90 в режиме HT.

Цитата: Сообщение от Maratka

alchemist888, как такое возможно?
Объяснение одно: несколько месяцев назад у них трудилось 4 платы, в каждой из которых как известно 11 гигабайт памяти, а теперь три, но спецификацию сервера изменили коряво.
Так что вполне возможно, что разница в скорости объясняется и тем, что там уже не два Xeon по 24 ядра, а четыре, а может и вовсе - другой сервер на базе Epic. И это опять же "забыли" отразить в спецификации.

Было 4 платы, одна сгорела, в итоге запускают на 3-х, но в описании заменили только количество используемых GPU, забыв изменить количество используемой памяти.
Ваш КЭП, не благодарите

[Maratka]

Цитата: Сообщение от alchemist888

Было 4 платы, одна сгорела, в итоге запускают на 3-х, но в описании заменили только количество используемых GPU, забыв изменить количество используемой памяти.

Ну? Было два Xeon, еще два добавили, забыв изменить количество процессоров в спецификации.
Т.е. теперь 90 потоков = 90 ядер, а раньше было 90 потоков на 48 ядрах, вот и недостающие 50-70% производительности. Но конечно это маловероятно.

[Maratka]

Цитата: Сообщение от alchemist888

В TCEC каждое ядро запускается в однопоточном режиме, в CCC в двухпоточном. Итого получаем 43 потока против 90 в режиме HT.

HT дает ~30%, а не удвоение, ибо суть HT - это задействование простаивающих ресурсов ядра. Понятно, что простаивают они далеко не все, и не всегда.
А при определенных алгоритмах от HT польза будет вообще околонулевая.

[sovaz1997]

Цитата: Сообщение от alchemist888

По скоростям СССС не хуже, по крайней мере для LCZero. Leelenstein только по какой-то причине там медленноват. Однако, соотношение скоростей с большим запасом в пользу SF. На СССС SF получает двукратное ускорение по сравнению с TCEC, в то время как сетки ускоряются приблизительно в 1.5 раза.

Верно, я забыл, что там 320x24 и скорости совсем другие

[svoitsl]

Цитата: Сообщение от sovaz1997

что там 320x24 и скорости совсем другие

не знаю как там, а у меня тут скорость упала в два раза (по сравнению с 610 сетью) с 20 knps до 10 knps на rtx2060

[Vizvezdenec]

Давайте подождём следующее поколение процессоров.
Те бенчмарки от новых интелов, ризенов, эпиков и т.д., которые я видел, показывают, что прироста у них в большинстве задач не особо... А вот бенч стокфиш 9 вырастает чуть ли не в 2 раза по сравнению с прошлыми процессорами такого же класса (типа 29->55 для 16-ядерных интелов и т.д.).
Так что баланс по железу несколько должен поменяться.
А по поводу турнира - могу сказать, что движки так себе играют FRC. Есть у них проблемы в схватывании позиций.

[Maratka]

Цитата: Сообщение от Vizvezdenec

Давайте подождём следующее поколение процессоров.
Те бенчмарки от новых интелов, ризенов, эпиков и т.д., которые я видел, показывают, что прироста у них в большинстве задач не особо...

Смысла нет ждать: основной прирост как раз в этом поколении, когда на условно дешевом десктопе AMD дает до 16 ядер вместо до 8, при лучшей удельной производительности ядра ~10-15%. Ровно все то же самое в серверах, ибо это те же самые кристаллы. Intel тоже накидывает ядра, но не так быстро, ибо не имеет модульной архитектуры.

Так что на данный момент самая разумная система для проведения турниров движков, по разумным же деньгам - это 2xEpic (т.е. 128 ядер при использовании старших процессоров). Ну и 32-64 ядерный Ryzen TR, которые должны выйти в ближайший месяц-два - хороший вариант для проф. использования SF'ша дома при анализе.

[alchemist888]

Цитата: Сообщение от Maratka

HT дает ~30%, а не удвоение, ибо суть HT - это задействование простаивающих ресурсов ядра. Понятно, что простаивают они далеко не все, и не всегда.
А при определенных алгоритмах от HT польза будет вообще околонулевая.

Все равно сходится. В ССС более быстрые потоки, плюс 90 против 43, что больше, чем в 2 раза. Для меня главное показатель nps. А то, как они получены уже не имеет значения. По факту SF в СССС вдвое быстрее, чем в TCEC, а сетки лишь в 1.5. Вот и все, что я хотел сказать.

[Maratka]

Цитата: Сообщение от alchemist888

В ССС более быстрые потоки

Разумеется. Где-то на 5%, ибо в 3С работает Xeon на архитектуре Skylake, а в TCEC - Broadwell. Все остальное увы неизвестно, а очень многое зависит от частот.

[Maratka]

Цитата: Сообщение от alchemist888

А то, как они получены уже не имеет значения.

Т.е. если одна оболочка пишет количество узлов из хеша (т.е. с учетом уже подсчитанных), а вторая - только "чистую математику", то это без разницы?

[alchemist888]

Цитата: Сообщение от Maratka

Т.е. если одна оболочка пишет количество узлов из хеша (т.е. с учетом уже подсчитанных), а вторая - только "чистую математику", то это без разницы?

Узлы в секунду оболочка считает, или движок?

[Maratka]

Считает движок, выводит оболочка. Как она выводит - мало кто знает, в отличии от того, что дает оболочке движок, и что легко можно посмотреть в коде SF'ша.

Плюс, еще раз подчеркиваю, что выводимая скорость с учетом хеша, и сырая скорость собственно расчета - это разные вещи. Более того, чем больше потоков - тем с бОльшей вероятностью в хеше появятся данные, которые уже рассчитал другой поток, и потому выводимый nps растет быстрее реального.

[Vizvezdenec]

Мне в своё время ещё Гударт говорил, что Гудини не "быстрее на 20%, чем SF", а просто считает какие-то узлы, которые SF не считает.
Скорость - вообще понятие такое, как и глубина, не всегда имеющее много смысла.
Именно по этой причине лучше сравнивать железяки. Скорость движок считает сам, и что он там себе насчитал - чёрт его знает.
Рыбка вон всегда выдавала заниженную скорость, чтобы выпендриваться якобы тем, что она "умная и поэтому настолько сильная, хоть и медленная".

[Vizvezdenec]

Ну, похоже, просто взять сеть Лилы и дописать что-то, чтобы уметь играть FRC, помогает так себе