Stockfish и его производные

[Харлампий]

Stockfish 14
Stockfish 14 для Android
https://ufile.io/f/8ardx
https://pixeldrain.com/l/ndVpnHXc#item=1

Архив предыдущих версий: https://www.dropbox.com/sh/75gzfgu7q...UfHbBr4r_RwhGa

Официальный сайт стокфиш

Обновления тестовых версий стокфиша: http://abrok.eu/stockfish/

Сборки Stockfish и CorChess от I. Ivec

Развитие движка http://tests.stockfishchess.org/tests

Stockfish_NNUE https://github.com/nodchip/Stockfish

Сети: https://www.comp.nus.edu.sg/~sergio-v/nnue/

AsmFish

Сборки от Maratka

Компиляции движков от ChessMan

Сборка Stockfish от Otodranik

Sugar от Marco Zerbinati

Shark и Orka

О Stockfish

Цитата:

Авторы движка
Двигатель Stockfish был разработан Tord Romstad, Marco Costalba и Joona Kiiski. В настоящее время он развивается и поддерживается сообществом Stockfish.

Авторы приложений
Stockfish для Mac был собран Daylen Yang. Stockfish для iOS был собран Tord Romstad.

История
Проект Stockfish начался с движка Glaurung с открытым исходным кодом, созданного Tord Romstad. В ноябре 2008 года Марко Косталба разветвил код Glaurung 2.1 и представил Stockfish 1.0. Торд и Джоона Кииски присоединились к проекту «Стилфиш», и проект «Гларунг» постепенно исчез. Тем временем, Stockfish быстро поднялся, чтобы стать самым сильным шахматным движком с открытым исходным кодом, с частыми обновлениями каждые несколько месяцев. Сегодня он остается одним из самых сильных двигателей в мире.

О GPL
Stockfish является бесплатным и распространяется в соответствии с GNU General Public License Version 3 (GPLv3). По сути, это означает, что вы можете делать практически все, что хотите, с программой, включая ее распространение среди своих друзей, делая ее доступной для загрузки с вашего веб-сайта, продавая ее (либо самостоятельно, либо как часть некоторого более крупного программного пакета ) или использовать его в качестве отправной точки для собственного программного проекта.

Единственное реальное ограничение заключается в том, что всякий раз, когда вы каким-либо образом распространяете Stockfish, вы всегда должны включать полный исходный код или ссылку на исходный код. Если вы внесете какие-либо изменения в исходный код, эти изменения также должны быть доступны в GPL.

Для получения полной информации прочитайте GPL.

[свернуть]

[Переяслав]

Цитата: Сообщение от Владимир001

так лучше

[Владимир001]

Чем лучше? Ошибка

[byan_mivv]

[Владимир001]

вот так лучше, интересно с чем это связано, некоторые видео получаются в таком виде ,некоторые нет ,при чем в большинстве случаев.

[Переяслав]

Матч сеток: новейшая против первой дефолтной (встроенной)

Stockfish 12 (nn-62ef826d1a6d.nnue) vs Stockfish 12 (nn-82215d0fd0df.nnue)

Result:
-------------------------------------------------------------------------------
  #  name               games    wins   draws  losses   score    los%  elo+/-
  1. Stockfish 12 62ef   1000     284     485     231   526.5    99.0    18.4
  2. Stockfish 12        1000     231     485     284   473.5     1.0   -18.4

Tech:
-------------------------------------------------------------------------------

Tech (average nodes, depths, time/m per move, others per game)
  #  name                 nodes/m         NPS  depth/m   time/m    moves     time
  1. Stockfish 12 62ef       925K      947357     21.1      1.0     60.7     59.2
  2. Stockfish 12            926K      945233     21.2      1.0     60.7     59.4

TC=1min+0.1sec
Threads=1
Concurrency=24
Book=https://storage.lczero.org/files/opening_books/book-ply8-unifen-Q-0.25-0.40.pgn (разбалансированная книга!)

[Переяслав]

Result:
-------------------------------------------------------------------------------
  #  name               games    wins   draws  losses   score    los%  elo+/-
  1. Stockfish 12 62ef   1000     123     805      72   525.5   100.0    17.7
  2. Stockfish 12        1000      72     805     123   474.5     0.0   -17.7

Tech:
-------------------------------------------------------------------------------

Tech (average nodes, depths, time/m per move, others per game):
  #  name                 nodes/m         NPS  depth/m   time/m    moves     time
  1. Stockfish 12 62ef       897K      912805     22.4      1.0     53.0     52.1
  2. Stockfish 12            898K      913172     22.7      1.0     53.0     52.1

TC=1min+0.1sec
Threads=1
Concurrency=24
Book=Noomen4-moveTestsuite_2000.pgn (cбалансированная книга!)

[Переяслав]

Разницы в ЭЛО почти никакой, зато ничьих почти в 2 раза больше

[Владимир001]

Match Stockfish 13 Dev vs Lc0 JH J92-190

Развернуть для просмотра

Tournament: Gauntlet
Binaries: BMI2 | Lc0-v0.26.1
Engine Options: Default
Hardware: i7 7700k 4CPU | 1080TI -- 1000:1 Ratio 20b
Time control: 60+1
Book: Balsa v2724
Tablebases: None
Adjudication: +-9 Win
Software: Cutechess-Cli
Sheets: https://docs.google.com/spreadsheets...#gid=201239930
Comments: Stockfish's performance against Lc0 in 1 month of progress. Improvement against self, not too much against Lc0
H2H

 # PLAYER                       :  RATING  ERROR  POINTS  PLAYED   (%)    W    D    L  D(%)  OppN  CFS(%)
   1 Stockfish 13 Dev [Nov 28]    :      45     11    92.5     164  56.4   25  135    4  82.3     1     100
   2 Leela Jhorthos J92-190       :       0     11    71.5     164  43.6    4  135   25  82.3     1     ---

White advantage = 36.52 +/- 11.10
Draw rate (equal opponents) = 89.58 % +/- 3.01

All

   # PLAYER                       :  RATING  ERROR  POINTS  PLAYED   (%)    W    D    L  D(%)  OppN  CFS(%)
   1 Stockfish 13 Dev [Oct 28]    :      56     16   162.0     280  57.9   49  226    5  80.7     1      77
   2 Stockfish 13 Dev [Nov 28]    :      45     21    92.5     164  56.4   25  135    4  82.3     1      52
   3 Stockfish 13 Dev [Sep 28]    :      44     16   157.5     280  56.3   43  229    8  81.8     1      97
   4 Stockfish 12                 :      19     18   105.5     200  52.8   26  159   15  79.5     1      97
   5 Leela Jhorthos J92-190       :       0      8   486.5    1076  45.2   56  861  159  80.0     5      95
   6 Stockfish 11                 :     -19     20    72.0     152  47.4   16  112   24  73.7     1     ---

White advantage = 34.72 +/- 4.75
Draw rate (equal opponents) = 85.27 % +/- 1.23

[свернуть]

[Владимир001]

https://github.com/glinscott/fishtes...gression-Tests

[Владимир001]

+10 Эло в LTC

https://tests.stockfishchess.org/htm...a050a89f02cb6c

[Maratka]

Где?

[Владимир001]

Может быть так будет понятнее :
https://tests.stockfishchess.org/htm...a050a89f02cb6c
needs a serious jinx. +10 Elo at LTC

[Maratka]

Возможно я не там смотрю или не так, но я не вижу 10 Elo.
Я вижу тест, который скорее всего провалится, т.е. разница там будет в минуса.

[Владимир001]

https://m.habr.com/ru/company/huawei/blog/530892/

О шахматах. И не только.

[Владимир001]

https://www.sp-cc.de/

[Vizvezdenec]

Цитата: Сообщение от Владимир001

https://m.habr.com/ru/company/huawei/blog/530892/

О шахматах. И не только.

Переписал PR-записку гугла, ни в чём толком не разобравшись.
Замечательно, конечно, но не совсем.
Потом эти люди заходят в чаты турниров шахматных движков и спрашивают, где A0, а когда им пытаешься объяснить, что Leela сильнее на несколько сотен эло, говорят "быть того не может, там же ИИ".

[Владимир001]

Stockfish NNUE performance vs older engines

Result:
-----------------------------------------------------------------------------------
  #  name                   games    wins   draws  losses  score%    los%  elo+/-
  1. Stockfish 291120        1000     792     189      19    88.7   100.0   357.1
  2. Stockfish 10             200       8      47     145    15.8     0.0  -291.3
  3. Komodo 14.1 64-bit       200       6      63     131    18.8     0.0  -254.7
  4. Komodo 11.01 64-bit      200       3      39     158    11.3     0.0  -358.8
  5. Nemorino 6.00 (SSE41)    200       2      36     162    10.0     0.0  -381.7
  6. Spike 1.4                200       0       4     196     1.0     0.0  -798.3

Cross table:
-----------------------------------------------------------------------------------
  #  name                     score%   games         1         2         3         4         5         6
  1. Stockfish 291120           88.7    1000         x     168.5     162.5     177.5     180.0     198.0
  2. Stockfish 10               15.8     200      31.5         x                                        
  3. Komodo 14.1 64-bit         18.8     200      37.5                   x                              
  4. Komodo 11.01 64-bit        11.3     200      22.5                             x                    
  5. Nemorino 6.00 (SSE41)      10.0     200      20.0                                       x          
  6. Spike 1.4                   1.0     200       2.0

[Maratka]

Цитата: Сообщение от Vizvezdenec

Переписал PR-записку гугла, ни в чём толком не разобравшись.
Замечательно, конечно, но не совсем.
Потом эти люди заходят в чаты турниров шахматных движков и спрашивают, где A0, а когда им пытаешься объяснить, что Leela сильнее на несколько сотен эло, говорят "быть того не может, там же ИИ".

Ну вообще интересная мысль там есть.
Я о последнем абзаце:

Для AlphaZero – натренированная нейронная сетка – это все лишь набор чисел –коэффициентов. Как мы можем извлечь из этого набора чисел новое знание об игре? В каком то смысле мы должны решить задачу, сродни той, которую решил Стейниц полтора века назад. Описать знание об игре, используя человеческий язык. И сделать его доступным для изучения другими людьми.

Т.е. получив эти знания, можно писать ручную оценку для нового поколения движков по новому витку спирали, используя уже не человеческое понимание шахмат, а машинное, которое было "очеловечено". Ну и собственно люди возможно что-то из этого тоже получат. SF понятно не обыграют, но против последних Рыбок, которые на добрых 200-300 Elo сильнее современных топовых гроссмейстеров возможно уже смогут играть достойно, и без форы.

Ну а то, что AZ в том виде, как мы его увидели три года назад конечно же устарел - это не обсуждается.
Важно другое - он задал направление по построению оценки на основе обучения игре сам с собой, и это безусловная заслуга Гугла.

[Maratka]

Читаю старые темы, двухгодичной давности:

https://forchess.ru/showpost.php?p=82088&postcount=76

Цитата: Сообщение от Alex_Lk

Да нет у Лилы никаких перспектив !!!
Сейчас выскочит из-за угла, какой нибудь классический AB движок с "прикрученной" к нему сеткой. GPU будет грузить "сетка", процессор займется обычным перебором. Оценочную функцию обучат когда доверять "сетке" а когда послать ее по боку.
И будет царствовать не Stockfish а тот кто быстрее "сетку" к себе прикрутит.

Вышло именно так, ну кроме нюанса, что в общем-то и на CPU можно получить вменяемый результат, если сеть компактная (но и она все одно явно лучше оценивает позицию, чем ручная оценка в большинстве случаев).

Итого: SF, 95% оценки от малой и потому быстрой даже на CPU сети, и 5% - ручная оценка тогда, когда она важна и нужна.

[Владимир001]

https://maiachess.com/

[Владимир001]

[Vizvezdenec]

Цитата: Сообщение от Maratka

Ну вообще интересная мысль там есть.
Я о последнем абзаце:

Для AlphaZero – натренированная нейронная сетка – это все лишь набор чисел –коэффициентов. Как мы можем извлечь из этого набора чисел новое знание об игре? В каком то смысле мы должны решить задачу, сродни той, которую решил Стейниц полтора века назад. Описать знание об игре, используя человеческий язык. И сделать его доступным для изучения другими людьми.

Т.е. получив эти знания, можно писать ручную оценку для нового поколения движков по новому витку спирали, используя уже не человеческое понимание шахмат, а машинное, которое было "очеловечено". Ну и собственно люди возможно что-то из этого тоже получат. SF понятно не обыграют, но против последних Рыбок, которые на добрых 200-300 Elo сильнее современных топовых гроссмейстеров возможно уже смогут играть достойно, и без форы.

Ну а то, что AZ в том виде, как мы его увидели три года назад конечно же устарел - это не обсуждается.
Важно другое - он задал направление по построению оценки на основе обучения игре сам с собой, и это безусловная заслуга Гугла.

Не знаю, честно говоря.
Что можно извлечь из матриц с миллионом чисел? Кроме того, что человек так позицию оценивать не может?
А оценка уже давным давно строилась на основе обучения игры самим с собой, где-то со времён первых рыбок ещё.

[Maratka]

Цитата: Сообщение от Vizvezdenec

А оценка уже давным давно строилась на основе обучения игры самим с собой, где-то со времён первых рыбок ещё.

Так да не так.
Или есть скрипты, которые меняют в небольших диапазонах коэффициенты (скажем +/- 2-5%), и сами посылают итоговую сборку на тест?

А новый код - так вообще ручной полностью.

[Vizvezdenec]

Цитата: Сообщение от Maratka

Так да не так.
Или есть скрипты, которые меняют в небольших диапазонах коэффициенты (скажем +/- 2-5%), и сами посылают итоговую сборку на тест?

Ну а чем занимается тюнинг?
Тем же самым.
Только никто не гарантирует, что выйдет лучше, но и для нейросети то же самое. Не зря уже все тестируются с помощью SPRT.

[Vizvezdenec]

https://yh.reddit.com/r/chess/commen...few_years_ago/
Это прям неудачник года какой-то.
Если вкратце, заинтересовался человек игрой в шахматы, скачал популярное приложение...
Проигрывал ему все игры в течение месяца, разочаровался в себе, т.к. отзывы на приложение были очень хорошие.
После же выхода Queen gambit стал следить за шахматами снова и т.д. и случайно на стриме Накамуры услышал знакомое слово.
Stockfish.
Оказалось, что он на телефон скачал полноценный сток и честно пытался несколько месяцев его обыграть (понятно, что без особого успеха), из-за этого бросил шахматы на достаточно длительный срок.

[Maratka]

Цитата: Сообщение от Vizvezdenec

Проигрывал ему все игры в течение месяца, разочаровался в себе, т.к. отзывы на приложение были очень хорошие.

Ну ... он же сам пишет, что
"I figured I must just be terrible since all the reviews of the app were good and none mentioned that it was too difficult."

Все что нужно было - посмотреть кто и по какому поводу оставляет эти отзывы

[Maratka]

Дальше интересно в комментариях:

It's kind of like... imagine we applied elo to boxing. In that case it would be obvious that even if a 5 year old with 500 elo was predicted to have a certain chance of beating Mike Tyson, in practice this would be only because the mathematical formula was designed to spit out a non-zero answer.

[Владимир001]

Author: Vizvezdenec
Date: Sat Dec 5 16:48:33 2020 +0100
Timestamp: 1607183313

Introduce static history

The idea of this patch can be described as following: we update static
history stats based on comparison of the static evaluations of the
position before and after the move. If the move increases static evaluation
it's assigned positive bonus, if it decreases static evaluation
it's assigned negative bonus. These stats are used in movepicker
to sort quiet moves.

passed STC
https://tests.stockfishchess.org/tes...a050a89f02cd66
LLR: 3.00 (-2.94,2.94) {-0.25,1.25}
Total: 78152 W: 7409 L: 7171 D: 63572 Elo +1.06
Ptnml(0-2): 303, 5695, 26873, 5871, 334

passed LTC
https://tests.stockfishchess.org/tes...a050a89f02cd75
LLR: 2.94 (-2.94,2.94) {0.25,1.25}
Total: 40240 W: 1602 L: 1441 D: 37197 Elo +1.39
Ptnml(0-2): 19, 1306, 17305, 1475, 15

closes https://github.com/official-stockfis...fish/pull/3253

bench 3845156
https://abrok.eu/stockfish/

[Владимир001]

Author: Vizvezdenec
Date: Sat Dec 5 16:58:42 2020 +0100
Timestamp: 1607183922

Add comments to uncommented parts of code

https://github.com/official-stockfis...fish/pull/3250

No functional change

https://abrok.eu/stockfish/

[Asunta]

Имеем:
( 1 ) текущая дефолтная сеть default.nnue

Некоторое время:
( 2 ) все патчи на оценку/поиск притираются к этой самой default.nnue
( 3 ) новые версии сетей пытаются превзойти в тестах эту самую default.nnue

Раньше или позже:
( 4 ) появляется новая сеть new.nnue, прошедшая фиштест и теперь уже она default.nnue --- goto ( 1 )


Вопрос следующий..

Какое-то время десятки патчей ( в основном - мелкая шлифовка, реже - что-то более глобальное ) подстраивались
под default.nnue и не произойдёт ли IQ-обвал при смене этой сети на новую дефолтную, т.к. новая сеть
никак не привязана к предыдущим наработкам ( ? )


Понятно, что как-то себя вести надо.. Есть хитрая идея:

( 1 ) подставляем новую сеть default.nnue под дату появления предыдущей дефолтной сети
( 2 ) прогоняем все патчи на оценку/поиск после этой даты в том же режиме, но на новой default.nnue
( 3 ) оставляем только плюсовые патчи ( их может быть намного меньше )

Если учесть, что из 100 попыток проходит 2-3 патча - перепроверка уже прошедших патчей много ресурса не съест..
Жалеть о патчах, которые не прошли перепроверку, не стоит, т.к. предыдущую дефолтную сеть никто и никогда не вернёт..