Stockfish и его производные

[Харлампий]

Stockfish 14
Stockfish 14 для Android
https://ufile.io/f/8ardx
https://pixeldrain.com/l/ndVpnHXc#item=1

Архив предыдущих версий: https://www.dropbox.com/sh/75gzfgu7q...UfHbBr4r_RwhGa

Официальный сайт стокфиш

Обновления тестовых версий стокфиша: http://abrok.eu/stockfish/

Сборки Stockfish и CorChess от I. Ivec

Развитие движка http://tests.stockfishchess.org/tests

Stockfish_NNUE https://github.com/nodchip/Stockfish

Сети: https://www.comp.nus.edu.sg/~sergio-v/nnue/

AsmFish

Сборки от Maratka

Компиляции движков от ChessMan

Сборка Stockfish от Otodranik

Sugar от Marco Zerbinati

Shark и Orka

О Stockfish

Цитата:

Авторы движка
Двигатель Stockfish был разработан Tord Romstad, Marco Costalba и Joona Kiiski. В настоящее время он развивается и поддерживается сообществом Stockfish.

Авторы приложений
Stockfish для Mac был собран Daylen Yang. Stockfish для iOS был собран Tord Romstad.

История
Проект Stockfish начался с движка Glaurung с открытым исходным кодом, созданного Tord Romstad. В ноябре 2008 года Марко Косталба разветвил код Glaurung 2.1 и представил Stockfish 1.0. Торд и Джоона Кииски присоединились к проекту «Стилфиш», и проект «Гларунг» постепенно исчез. Тем временем, Stockfish быстро поднялся, чтобы стать самым сильным шахматным движком с открытым исходным кодом, с частыми обновлениями каждые несколько месяцев. Сегодня он остается одним из самых сильных двигателей в мире.

О GPL
Stockfish является бесплатным и распространяется в соответствии с GNU General Public License Version 3 (GPLv3). По сути, это означает, что вы можете делать практически все, что хотите, с программой, включая ее распространение среди своих друзей, делая ее доступной для загрузки с вашего веб-сайта, продавая ее (либо самостоятельно, либо как часть некоторого более крупного программного пакета ) или использовать его в качестве отправной точки для собственного программного проекта.

Единственное реальное ограничение заключается в том, что всякий раз, когда вы каким-либо образом распространяете Stockfish, вы всегда должны включать полный исходный код или ссылку на исходный код. Если вы внесете какие-либо изменения в исходный код, эти изменения также должны быть доступны в GPL.

Для получения полной информации прочитайте GPL.

[свернуть]

[Vizvezdenec]

создание и обучение таких сетей дело нехитрое.
Поменял 3 параметра - обучайся хоть до потери пульса.
К сожалению, прирост "мозгов" в данном случае не компенсирует ужасную скорость.

[svoitsl]

Цитата: Сообщение от Vizvezdenec

Поменял 3 параметра - обучайся хоть до потери пульса.

ну может просто надо немного терпения и прирост "мозгов" превысит убыль производительности?

[ChessMan]

Цитата: Сообщение от Vizvezdenec

Поменял 3 параметра

Теперь Вы рофлите?))

Увеличивая размерность сети приходится менять далеко не три параметра. Приходится перелопачивать почти весь код поддержки сети.

[svoitsl]

Цитата: Сообщение от ChessMan

Приходится перелопачивать почти весь код поддержки сети.

Странно этот код написан, если архитектура сети не меняется,а меняется только размерность, то все это вносится в json, а код не меняется вообще.
(но я могу и ошибаться)

[Vizvezdenec]

Цитата: Сообщение от ChessMan

Теперь Вы рофлите?))

Увеличивая размерность сети приходится менять далеко не три параметра. Приходится перелопачивать почти весь код поддержки сети.

Ну это не совсем так.
Ломаются affine transform (не всегда), но если архитектура не меняется, а меняется только размер - там менять почти ничего не надо.
Ну точнее как, менять-то надо (куда больше, чем в Fat fritz), но там механические изменения с 32 на 64, примерно так
https://github.com/Sopel97/FatTitz/c...f85091bee7707f

[Vizvezdenec]

https://github.com/Sopel97/FatTitz/c...fb36acfd42f150
Или вот так, в общем я не особо спец, конечно, но для грамотного человека тут работы на 25 минут.

[ChessMan]

Цитата: Сообщение от Vizvezdenec

Она в 4 раза медленнее
nps, которые выдаёт эта фигня, "немножко" неправильные, использованы идеи мистера Гударта в умножении их на 8/7.

Не в 4



Без "чита" на скорость, бенч естественно другой

[Vizvezdenec]

А сколько у последней сети? В любом случае разница в скорости там весьма велика и "умностью" она не покрывается на измеримых контролях.
Впрочем, в адвансе можете и попробовать, чем чёрт не шутит.

[Maratka]

https://tests.stockfishchess.org/htm...d20cf82b5ad196
Новая сеть.

[ChessMan]

Цитата: Сообщение от Vizvezdenec

А сколько у последней сети?

Stockfish AVX2 ~2 100 000

[kruzh]

Author: SFisGOD
Date: Fri Aug 27 07:51:26 2021 +0200
Timestamp: 1630043486

Update default net to nn-33495fe25081.nnue



Author: ppigazzini
Date: Fri Aug 27 07:49:26 2021 +0200
Timestamp: 1630043366

Author: Joost VandeVondele
Date: Fri Aug 27 07:48:18 2021 +0200
Timestamp: 1630043298

https://abrok.eu/stockfish/

[Maratka]

Цитата: Сообщение от Vizvezdenec

А сколько у последней сети? В любом случае разница в скорости там весьма велика и "умностью" она не покрывается на измеримых контролях.
Впрочем, в адвансе можете и попробовать, чем чёрт не шутит.

Есть вполне себе измеренный интервал +/- где-то 50 Elo, где практически линейно скорость +1% равна +1 Elo на минуте. Так что если сеть на 20% медленнее, но в целом не проигрывает на этой минуте, то вполне вероятно, что она таки на 20 Elo умнее..

Нужно проверять на бОльшем контроле (скажем на 5 минутах) - если там ~20 Elo таки есть, да даже и 10, партий много не потребуется, буквально 3-7 тысяч где-то...

[Maratka]

прошел патч на поиск:
https://tests.stockfishchess.org/htm...d20cf82b5ad191

[Vizvezdenec]

Цитата: Сообщение от Maratka

Есть вполне себе измеренный интервал +/- где-то 50 Elo, где практически линейно скорость +1% равна +1 Elo на минуте. Так что если сеть на 20% медленнее, но в целом не проигрывает на этой минуте, то вполне вероятно, что она таки на 20 Elo умнее..

Нужно проверять на бОльшем контроле (скажем на 5 минутах) - если там ~20 Elo таки есть, да даже и 10, партий много не потребуется, буквально 3-7 тысяч где-то...

Проблема ещё и в том, что все почему-то считают, что, мол, "умность" сети с увеличением контроля продолжает давать столько же эло.
Это кто и почему так решил и кто и как доказал?
Что-то никаких доказательств я лично не видел никогда, многие вещи в оценке ещё классической были вполне себе нелинейны, например, замена квадратичного скейлинга kingDanger на линейный всегда была хороша на коротких контролях и плоха на длинных, идея с "перегрузкой" ферзя прошла короткие контроли 8 раз, но на длинных всегда были дрова, и т.д.
Поэтому что более медленная сеть будет скейлиться лучше, чем более быстрая - вообще-то это вилами по воде писано, да и, например, помните позапрошлое уже изменение архитектуры? Там более медленная сеть выдавала на 10+0.1 +25 эло, а на 8 потоках 60+0.6 кое-как наскребала парочку, хотя вроде бы больше и умнее и т.д.
Я уж молчу про то, что сейчас мы имеем уникальную ситуацию - у нас вроде бы большая, умная нейросеть, вся фигня...
При этом она достаточно тупая, чтобы вот это вот https://github.com/official-stockfis...uate.cpp#L1095 давало почти 10 эло, хотя по факту это тупейший подсчёт материала и умножение оценки сети на него.
Т.е. умная-то она умная, но глупая.
Поэтому что она будет сильно лучше на длинных временных контролях - чёрт его, собственно, знает, протестировать это никак нельзя.
Тут ещё надо учесть, что есть в принципе автоматическая компрессия эло на больших контролях, если мы дадим фору по времени 2:1 при одинаковых движках, то на 10+0.1 разницы будет на порядок больше, чем на 1000+10, вообще более слабые движки всегда скейлятся "лучше", так как шахматы - ничья.
Поэтому я не исключаю, что точка пересечения эло более крупной сети и более мелкой может быть просто в области бесконечного времени на ход, там, где она есть у всех движков (если выкинуть TT и MAX_PLY).
Хотя я, конечно, пытаюсь подбить Sopel на тест 240+2.4 на 8 или 16 потоках, но дело такое.
Ему интереснее исследовать, возможно, есть варианты сделать ещё большие сети без таких побочных эффектов, как ужасная игра в гипербуллет, на котором мы обычно всё и тестируем.

[svoitsl]

Цитата: Сообщение от Vizvezdenec

чтобы вот это вот https://github.com/official-stockfis...uate.cpp#L1095 давало почти 10 эло

Просто хотел спросить. а операции умножения и деления на степень двух автоматически приводятся компилятором к сдвигу?

Цитата: Сообщение от Vizvezdenec

но дело такое.

дорогое?

[Asunta]

К тому же "более крупная" сеть сейчас 46MB,
а "более мелкая" из предыдущей архитектуры была 47MB : )

В новую архитектуру нужно добавить 15-20 патчей на поиск,
т.к. сейчас поиск всё ещё обвязан патчами под предыдущий размер сетки...

[svoitsl]

Цитата: Сообщение от Asunta

В новую архитектуру нужно добавить 15-20 патчей на поиск,

Интересно, а нельзя ли и для поиска сделать какую нибудь маленькую сеть?
Занятная была бы тема....

[Владимир001]

Author: VoyagerOne
Date: Fri Aug 27 21:41:32 2021 +0200
Timestamp: 1630093292

CMH Pruning Tweak

Tweak pruning formula by adding up CMH values.

STC:
LLR: 2.94 (-2.94,2.94) <-0.50,2.50>
Total: 14608 W: 3837 L: 3641 D: 7130 Elo +4.66
Ptnml(0-2): 27, 1681, 3723, 1815, 58
https://tests.stockfishchess.org/tes...d20cf82b5ad156

LTC:
LLR: 2.94 (-2.94,2.94) <0.50,3.50>
Total: 53520 W: 13580 L: 13276 D: 26664 Elo +1.97
Ptnml(0-2): 28, 5610, 15183, 5908, 31
https://tests.stockfishchess.org/tes...d20cf82b5ad191

closes https://github.com/official-stockfis...fish/pull/3682

Bench: 5186641

https://abrok.eu/stockfish/

[kruzh]

Stockfish and CorChess development builds compiled by I. Ivec
August 27, 2021

http://chess.ultimaiq.net/stockfish.html

[Maratka]

Цитата: Сообщение от Vizvezdenec

Проблема ещё и в том, что все почему-то считают, что, мол, "умность" сети с увеличением контроля продолжает давать столько же эло.
Это кто и почему так решил и кто и как доказал?

Ну в целом то известно, откуда оно пошло.

Дело не в контроле, а в средней глубине, достижимой на данном контроле, при минуте будет что-то в районе 15 и 16 у медленной и быстрой сети, при 5 минутах - условно 20 и... опять 20. В первом случае сеть умнее, позиционно играет лучше, но движок из-за недостатка глубины может зевнуть, во втором случае - зевки по сути равновероятны, но большая "умная" сеть позиционно переигрывает малую, и не столь умную.

Т.е. в условиях строго равного поиска (а не когда сравниваются изначально разные движки) крупной и умной сети нужно таки время, чтобы успеть скажем так "развернуться".

Кстати, я думаю, что это проверить можно: взять партии не- ничьи с того патча, и глянуть на граф оценки: я предполагаю, что в случае побед крупной сети оценка будет достаточно ровно расти, а в случае побед малой - часто будет обвал с 1 до 3, или может даже 5. Написать скрипт по отбору "качества побед" я думаю тоже проблемы не составит. Им кстати и в последствии можно будет пользоваться, на подобных патчах, если конечно будет доказано, что победа малой сети в заметной степени (скажем минимум 15% побед) - это зевки крупной: оно всяко проще будет, чем крутить еще один проход на бОльшем контроле и/или ядрах.

[Maratka]

Цитата: Сообщение от ChessMan

Не в 4



Без "чита" на скорость, бенч естественно другой

Хорошая работа!
Теперь кстати понятно, почему FF2 на момент выхода имел сеть в два раза крупнее, но скорость вполне себе сравнимую со SF13. Так уж устроены эти сети, и сам движок, в отличии от Лилы, где переход на заметно более крупную сеть производительность садит капитально!

Попутно более-менее понятно, и почему сеть была вдвое больше: натренировать такую же, как у SF в ту же силу Альбертушка не потянул, потому сделал ход лошадью.

[svoitsl]

Цитата: Сообщение от kruzh

Stockfish and CorChess development builds compiled by I. Ivec
August 27, 2021

Почему то эти сборки для Ryzen на R5 3600 оказываются заметно тормознутее аброковских (аж на почти 2 % в многопотоке), жаль...
Хотя и на почти 5% быстрее в монопотоке

[sergey1963]

кому-то нужны эти 2-5%??? это сброс частоты при длительной работе всех ядер или потоков... считать разницу стоит хотя бы с 10%...
20 и 22мпс- уже заметно (но не сильно), 20 и 20,5мпс- это погрешность (овчинка выделки не стоит)...

[Владимир001]

7000 игр AB-тестовый запуск и регрессия 30000 игр-тестовый запуск Stockfish 210822 завершен: https://www.sp-cc.de/

[Владимир001]

1   Stockfish 14 avx512 nn-3475    +3  +65/=879/-56 50.45%  504.5/1000
2   Fat Titz 1.0 avx512            -3  +56/=879/-65 49.55%  495.5/1000

[ChessMan]

Цитата: Сообщение от Владимир001

1   Stockfish 14 avx512 nn-3475    +3  +65/=879/-56 50.45%  504.5/1000
2   Fat Titz 1.0 avx512            -3  +56/=879/-65 49.55%  495.5/1000

Какой контроль?
Сколько ядер?

[Владимир001]

Цитата: Сообщение от ChessMan

Какой контроль?
Сколько ядер?

Может быть у Ипмана на сайте есть инфа, тут он не указал...

[ChessMan]

Цитата: Сообщение от Владимир001

Может быть у Ипмана на сайте есть инфа, тут он не указал...

Можно ссылку на оригинальный пост?

[Владимир001]

Цитата: Сообщение от ChessMan

Можно ссылку на оригинальный пост?

http://ipmanchess.yolasite.com/

[Владимир001]

Цитата: Сообщение от ChessMan

Какой контроль?
Сколько ядер?

TC: 10s+1s using 1core ,18games concurrency