Stockfish и его производные

[Харлампий]

Stockfish 14
Stockfish 14 для Android
https://ufile.io/f/8ardx
https://pixeldrain.com/l/ndVpnHXc#item=1

Архив предыдущих версий: https://www.dropbox.com/sh/75gzfgu7q...UfHbBr4r_RwhGa

Официальный сайт стокфиш

Обновления тестовых версий стокфиша: http://abrok.eu/stockfish/

Сборки Stockfish и CorChess от I. Ivec

Развитие движка http://tests.stockfishchess.org/tests

Stockfish_NNUE https://github.com/nodchip/Stockfish

Сети: https://www.comp.nus.edu.sg/~sergio-v/nnue/

AsmFish

Сборки от Maratka

Компиляции движков от ChessMan

Сборка Stockfish от Otodranik

Sugar от Marco Zerbinati

Shark и Orka

О Stockfish

Цитата:

Авторы движка
Двигатель Stockfish был разработан Tord Romstad, Marco Costalba и Joona Kiiski. В настоящее время он развивается и поддерживается сообществом Stockfish.

Авторы приложений
Stockfish для Mac был собран Daylen Yang. Stockfish для iOS был собран Tord Romstad.

История
Проект Stockfish начался с движка Glaurung с открытым исходным кодом, созданного Tord Romstad. В ноябре 2008 года Марко Косталба разветвил код Glaurung 2.1 и представил Stockfish 1.0. Торд и Джоона Кииски присоединились к проекту «Стилфиш», и проект «Гларунг» постепенно исчез. Тем временем, Stockfish быстро поднялся, чтобы стать самым сильным шахматным движком с открытым исходным кодом, с частыми обновлениями каждые несколько месяцев. Сегодня он остается одним из самых сильных двигателей в мире.

О GPL
Stockfish является бесплатным и распространяется в соответствии с GNU General Public License Version 3 (GPLv3). По сути, это означает, что вы можете делать практически все, что хотите, с программой, включая ее распространение среди своих друзей, делая ее доступной для загрузки с вашего веб-сайта, продавая ее (либо самостоятельно, либо как часть некоторого более крупного программного пакета ) или использовать его в качестве отправной точки для собственного программного проекта.

Единственное реальное ограничение заключается в том, что всякий раз, когда вы каким-либо образом распространяете Stockfish, вы всегда должны включать полный исходный код или ссылку на исходный код. Если вы внесете какие-либо изменения в исходный код, эти изменения также должны быть доступны в GPL.

Для получения полной информации прочитайте GPL.

[свернуть]

[Кевин]

http://tests.stockfishchess.org/test...bc5939d09f436c

http://tests.stockfishchess.org/test...bc5939d09f4382

Регресс-тесты запущены.

[Alex_Zet]

Цитата: Сообщение от svoitsl

Чувствуется, что на TCEC 16 будет уже совершенно другой Стокфиш, по сравнению с TCEC 15

Человек не в состоянии оцифровать гармонию и совершенство.

[Alex_Zet]

Цитата: Сообщение от Кевин

http://tests.stockfishchess.org/test...bc5939d09f436c

http://tests.stockfishchess.org/test...bc5939d09f4382

Регресс-тесты запущены.

Развернуть для просмотра

Цитата: Сообщение от Кевин

Author: protonspring
Date: Wed Aug 21 09:34:46 2019 +0200
Timestamp: 1566372886

Tuned Futility Equation

@Vizvezdenec array suggested that alternate values may be better than current
master (see pull request #2270 ). I tuned some linear equations to more closely
represent his values and it passed. These futility values seem quite sensitive,
so perhaps additional Elo improvements can be found here.

STC
LLR: 2.95 (-2.94,2.94) [0.50,4.50]
Total: 12257 W: 2820 L: 2595 D: 6842 Elo +6.38
http://tests.stockfishchess.org/test...bc5925cf1111ac

LTC
LLR: 2.96 (-2.94,2.94) [0.00,3.50]
Total: 20273 W: 3497 L: 3264 D: 13512 Elo +3.99
http://tests.stockfishchess.org/test...bc5925cf111ac3

Closes https://github.com/official-stockfis...fish/pull/2272

------------------------------------------
How to continue from there ?

a) we can try a simpler version for the futility margin, this would
be a simplification :
margin = 188 * (depth - improving)

b) on the other direction, we can try a complexification by trying
again to gain Elo with an complete array of futility values.

------------------------------------------

Bench: 4330402

http://abrok.eu/stockfish/

Цитата: Сообщение от Кевин

Author: Vizvezdenec
Date: Wed Aug 21 10:47:40 2019 +0200
Timestamp: 1566377260

Late move reduction, captures and CUT nodes

Expand of Stefan Geschwentner's original idea: we always do LMR for captures at cutnodes.

Passed STC
http://tests.stockfishchess.org/test...bc5925cf1111b8
LLR: 2.96 (-2.94,2.94) [0.50,4.50]
Total: 36026 W: 8122 L: 7779 D: 20125 Elo +3.31

Passed LTC
http://tests.stockfishchess.org/test...bc5925cf111353
LLR: 3.22 (-2.94,2.94) [0.00,3.50]
Total: 133502 W: 22508 L: 21943 D: 89051 Elo +1.47

Closes https://github.com/official-stockfis...fish/pull/2273

Bench: 3494372

http://abrok.eu/stockfish/

Цитата: Сообщение от Кевин

Author: Stefan Geschwentner
Date: Mon Aug 26 08:49:55 2019 +0200
Timestamp: 1566802195

Tweak Late Move Reduction at root

Maintain best move counter at the root and allow there only moves which has a counter
of zero for Late Move Reduction. For compensation only the first three moves are excluded
from Late Move Reduction per default instead the first four moves.

What we can further do:

- here we use a simple counting scheme but perhaps some aging to fade out early iterations
could be helpful
- use the best move counter also at inner nodes for LMR and/or pruning

STC:
LLR: 2.95 (-2.94,2.94) [0.50,4.50]
Total: 17414 W: 3984 L: 3733 D: 9697 Elo +5.01
http://tests.stockfishchess.org/test...bc5939d09f2aa2

LTC:
LLR: 2.96 (-2.94,2.94) [0.00,3.50]
Total: 38058 W: 6448 L: 6166 D: 25444 Elo +2.57
http://tests.stockfishchess.org/test...bc5939d09f2f27

Closes https://github.com/official-stockfis...fish/pull/2282

Bench: 3568210


http://abrok.eu/stockfish/

[свернуть]

.

Есть ли в мастере регресс теста три этих патча?

[Омегазеро]

Цитата: Сообщение от Maratka

А вот как проверять патчи на 10 секундах против LZ (да даже и минуте) - я лично вообще не представляю

Было бы разумно на 10 секундах тестировать Стокфиш против Стокфиша, а по минуте - Стокфиш против Лилы
Тем более что при включенном пондере минута превращается в две
А против Лилы как раз можно включать пондер, так как она практически не занимает ресурсы мощного процессора

[Омегазеро]

Цитата: Сообщение от Vizvezdenec

"Проводить тесты против нейродвижков" на машинах, на которых нет граф карты - блестяще!

У всех тестировщиков Стокфиша нет хорошей графкарты?
Может, пора завести хотя бы 1650? Она стремительно дешевеет

Цитата: Сообщение от Vizvezdenec

Сравнивать движки через нейросети, тратя в 4 раза больше игр на тот же статистически значимый результат - дважды блестяще

Непонятно, откуда взялась цифра 4
Если проводить тесты не против старого Стокфиша, а против фиксированной версии Лилы (уровень которой известен) - будет такое же количество партий

Цитата: Сообщение от Vizvezdenec

множество "экспертов", которые говорили, что надо патчи тестировать не против самих себя, а против Комодо и Гудини, а то против них ничего не прибавляется. С тех пор прошло 4 года - результат таков, каков он есть.

Я только что писала, что для аб-движков такое тестирование может работать. С чем вы не согласны?

[Омегазеро]

Цитата: Сообщение от Vizvezdenec

Не давайте никому никогда советов, как разрабатывать шахматные движки, если вы этим никогда не занимались. Рискую умереть от тяжёлых травм, полученных при ударе своей рукой по своему лицу во время чтения этих пассажей

Безусловно, вы гуру и все должны преклонить перед вами колени
Но вы так и не объяснили, почему вы используете линейную матрицу тестирования (20000 x 2) вместо прямоугольной (например, 1000x400, 2000x200)
Хотя тесты ваших коллег показали, что замена одной линейной матрицы на другую на 40 тысячах партий приводит к колебаниям в 9 Эло, что создаёт большую неопределенность в прохождении патчей

[Maratka]

Цитата: Сообщение от Омегазеро

А против Лилы как раз можно включать пондер, так как она практически не занимает ресурсы мощного процессора

А на чем же она может работать в FishTest'е?

Цитата: Сообщение от Омегазеро

Может, пора завести хотя бы 1650? Она стремительно дешевеет

В сервере с Xeon'ом? Ну-ну...

Цитата: Сообщение от Омегазеро

Я только что писала, что для аб-движков такое тестирование может работать. С чем вы не согласны?

Ну уж хотя бы с тем, что это платные версии.

Цитата: Сообщение от Омегазеро

Если проводить тесты не против старого Стокфиша, а против фиксированной версии Лилы (уровень которой известен) - будет такое же количество партий

Которые займут гораздо больше времени, т.к. на CPU LZ придется давать минут пять как минимум.

[Омегазеро]

Цитата: Сообщение от Maratka

А на чем же она может работать в FishTest'е?

The fishtest worker:
automatically connects to the server to download a chess opening book, the cutechess-cli chess game manager and the chess engine sources (both for the current Stockfish and for the patch with the new idea). The sources will be compiled according to the type of the worker platform.
starts a batch of games using cutechess-cli.
uploads the games results on the server.

Наверняка у workerов уже есть видеокарточки типа 1650

Цитата: Сообщение от Maratka

Которые займут гораздо больше времени, т.к. на CPU LZ придется давать минут пять как минимум

На 1650, 1660 или 2060 - минуты хватит

[Maratka]

Цитата: Сообщение от Омегазеро

На 1650, 1660 или 2060 - минуты хватит

Твою дивизию!
Еще раз: большинство ядер на FishTest - это Xeon'ы, которые выдают частью ну наверное фанаты - админы, а частью частные пользователи, купившие их где-нить на распродаже старой техники.

Типичный процессор - что-то в районе 8-20 ядер.

Итого, играя Fish vs Fish, на 16 ядрах играется одновременно 8 партий, каждая занимает в среднем около 3-х минут. Т.е. производительность 16-ядерного Xeon ~160 партий в час на контроле 60+0,6.

Если эту штуку напрячь против LZ, то будет одна партия одновременно, т.к. в противном случае нужно по видеоплате на каждое ядро (что технически невозможно), и как следствие, выйдет не 160 партий в час, а 20.

И это никак не лечится, т.к. на CPU LZ крайне медленный, и на минуте будет безбожно зевать. Значит ему придется давать куда как больше времени, т.е. получится даже не 20 партий в час, а еще в несколько раз меньше.

[Rom77]

Цитата:

- Кто-то может увеличить лимит моей машины на Fishtest примерно до 3000, тогда я смогу временно запустить 20 тысяч ядер (8 ядер на машину), чтобы завершить очередь (хотя не уверен, что сервер сможет их обработать).

Развернуть для просмотра

Цитата:

- Someone may increase my fishtest machine limit to something like 3000, then I might be able to launch 20k cores(8 cores per machine) temporarily to finish the queue(not sure if the server can handle them though).
https://groups.google.com/d/msg/fish...4/abBZK_hnBAAJ

[свернуть]

Блин, кто же этот парень? Главадмин Гонконга? Председатель КНР?

[Омегазеро]

Цитата: Сообщение от Maratka

Твою дивизию!
Еще раз: большинство ядер на FishTest - это Xeon'ы, которые выдают частью ну наверное фанаты - админы, а частью частные пользователи, купившие их где-нить на распродаже старой техники.

Типичный процессор - что-то в районе 8-20 ядер

Если хватило денег на 20 ядер, хватит и на хорошую видеокарту

Если верить тестам, то Dual Xeon E5-2670 2,6 GHz (16 ядер, 32 потока) дает скорость в начальной позиции 24000 kN/s
Самый мощный 20-ядерный Dual Xeon E5-2687W v3 - 30000 kN/s
А RTX2060 - 18kN/s (получаем вполне пригодное для тестирования отношение 1:1400 или 1:1700)

Так что нет смысла драматизировать

[Омегазеро]

Цитата: Сообщение от Rom77

Блин, кто же этот парень? Главадмин Гонконга? Председатель КНР?

Вот именно!
Я думаю, найдутся сотни фанатов с мощными видеокартами

[Kesandr]

Цитата: Сообщение от Alex_Zet

Человек не в состоянии оцифровать гармонию и совершенство.

Alex_Zet нет сейчас совершенства ни в Стокфише ни в Лсзеро и я думаю что лет 10 15 не будет.

[Vizvezdenec]

Цитата: Сообщение от Rom77

Блин, кто же этот парень? Главадмин Гонконга? Председатель КНР?

Владелец датацентрав Китае.
Да я не знаю, в очереди всякий хлам висит на самом деле сейчас.

[Vizvezdenec]

А по поводу видеокарт на фиштесте...
Даже 1650 купить и поставить на эти машины - увеличить их стоимость в 2 раза (там стоит просто самое дешёвое, что на 8 ядер можно собрать), увеличить энергопотребление в 4 (человеку и так приходят счета на десятки тысяч долларов, про геморрой с установкой и отладкой я молчу), для того, чтобы тестировать патчи против других движков (для чего, например, не годится SPRT, так что придётся и в плане механизма что-то изобретать), а всё зачем? А затем, что "надо тестировать против нейросетей" (а что, версии стокфиша более новые не играют лучше против нейросетей, чем старые? Все тесты говорят, что они это делают).
Вот смотрю я на тесты тут - https://www.youtube.com/watch?v=uhddx9AErG8
последние все матчи (штук 5 примерно) либо ничья, либо SF выиграл. Понятно, что тут соотношение скоростей несколько "в пользу" SF, но ещё месяца 3 назад он тут все матчи проигрывал. И никакие тесты против нейросетей для этого не нужны почему-то.

[Maratka]

Цитата: Сообщение от Омегазеро

Если хватило денег на 20 ядер, хватит и на хорошую видеокарту

Не хватит, ибо я пока что еще не встречал GeForce с 16+ гигабайт памяти

И потом это... Вы собираетесь учить тех, кто за свои деньги дает железо под проект, какое им железо давать?
Т.е. типа "ты, сукин сын, давай RTX купи побыстрому, ибо твой хлам не годится для теста Fish vs net, а тестить Fish vs Fish мы не будем, потому что некая барышня так решила".
Но коль так, то покупайте и тестируйте. А мы посмотрим, что с этого получится.

Цитата: Сообщение от Омегазеро

А RTX2060 - 18kN/s (получаем вполне пригодное для тестирования отношение 1:1400 или 1:1700)

И наконец, это соотношение "все ядра против RTX". Т.е. производительность сервера падает на порядок, ибо он гоняет (что выше и писал) не ~150 партий в час, а теперь уже ~15.

[Vizvezdenec]

ELO: 35.72 +-1.9 (95%) LOS: 100.0%
Total: 38394 W: 7792 L: 3858 D: 26744

[Maratka]

Цитата: Сообщение от Vizvezdenec

ELO: 35.72 +-1.9 (95%) LOS: 100.0%

Нормально, где-то 3-3,5 Elo набирает...

[dew]

Цитата: Сообщение от Омегазеро

У всех тестировщиков Стокфиша нет хорошей графкарты?
Может, пора завести хотя бы 1650? Она стремительно дешевеет

Ну, если дашь денег, то буду рад, правда мне нужно 2-3 десятка
А еще нужно будет придумать как их в 1U сервера ногами забить

[Maratka]

Боюсь девочка не знает, что такое 1U

[dew]

Цитата: Сообщение от Maratka

Боюсь девочка не знает, что такое 1U

Ну и я пошутил тоже.. На самом деле, проблема всегда больше не в железе - а в питании.. Были времена, когда "гарем" машинок потреблял 15 киловатт в час, день за днем и год за годом

[dew]

и мне страшно представить, сколько это будет стоить, если туда еще и GPU навтыкать..

[svoitsl]

Цитата: Сообщение от dew

как их в 1U сервера ногами забить

просто купить переходник и ноги будут целы

[dew]

Цитата: Сообщение от svoitsl

просто купить переходник и ноги будут целы

а еще докупить упсов, кондиционеров, дополнительных фаз питания и еще для удобства говно-боксы для gpu-карт (ну что-бы в стойке не отсвечивали)
что я забыли и какие еще предложения будут в заботе о ногах?

[Maratka]

Цитата: Сообщение от svoitsl

просто купить переходник и ноги будут целы

Причем тут переходник, если для этих корпусов нужны низкопрофильные платы?
Причем, насколько я себе понимаю, крайне желательны еще и однослотовые.

[dew]

Цитата: Сообщение от Maratka

Причем тут переходник, если для этих корпусов нужны низкопрофильные платы?
Причем, насколько я себе понимаю, крайне желательны еще и однослотовые.

ну тут как? )
можно во вне вывести их в боксы или вообще вынуть мат-платы и переставить их в ATX pc корпуса.. Не знаю, что он в итоге имел ввиду и фантазировать можно сколько угодно..
Но я так скажу - фантастика в другом зале
Я конечно молчу, что в некотрых старых серверах и pci-e нету ниразу, но то такое.. )

[dew]

И давайте начистоту, делать мне было дома нечего (от слова что меня в этом месяце тама почти не было)
Решил NN "потренировать" в итоге счет за свет более 100 долларов (в четыре раза больше чем обычно навскидку)

[svoitsl]

Цитата: Сообщение от dew

итоге счет за свет более 100 долларов

у вас там ферма что ли?

[dew]

Цитата: Сообщение от svoitsl

у вас там ферма что ли?

Nvidia 3-way sli в одном корпусе.. может это для кого и ферма, или ранчо

[Alex_Zet]

Цитата: Сообщение от Vizvezdenec

А по поводу видеокарт на фиштесте...
человеку и так приходят счета на десятки тысяч долларов

Если допустим 10 000 долларов, то это примерно 660 000 рублей.
счета на десятки тысяч долларов ну допустим 5 десятков. Цифру взял наугад. Значит 5 умножим на 660 000 = 3 300 000рублей.
1 киловат это примерно 4.5 рубля.
То есть если 3 300 000 разделить на 4.5 = 733 333 киловатт.

Вопрос: - счет на десятки тысяч долларов на 733 тысячи киловат , это правда или ложь?
Допустим если чел не платит годами и скрывается от судебных приставов то это правдоподобно. Только если он скрывается,то как же он нажигает?