Stockfish и его производные

[Харлампий]

Stockfish 14
Stockfish 14 для Android
https://ufile.io/f/8ardx
https://pixeldrain.com/l/ndVpnHXc#item=1

Архив предыдущих версий: https://www.dropbox.com/sh/75gzfgu7q...UfHbBr4r_RwhGa

Официальный сайт стокфиш

Обновления тестовых версий стокфиша: http://abrok.eu/stockfish/

Сборки Stockfish и CorChess от I. Ivec

Развитие движка http://tests.stockfishchess.org/tests

Stockfish_NNUE https://github.com/nodchip/Stockfish

Сети: https://www.comp.nus.edu.sg/~sergio-v/nnue/

AsmFish

Сборки от Maratka

Компиляции движков от ChessMan

Сборка Stockfish от Otodranik

Sugar от Marco Zerbinati

Shark и Orka

О Stockfish

Цитата:

Авторы движка
Двигатель Stockfish был разработан Tord Romstad, Marco Costalba и Joona Kiiski. В настоящее время он развивается и поддерживается сообществом Stockfish.

Авторы приложений
Stockfish для Mac был собран Daylen Yang. Stockfish для iOS был собран Tord Romstad.

История
Проект Stockfish начался с движка Glaurung с открытым исходным кодом, созданного Tord Romstad. В ноябре 2008 года Марко Косталба разветвил код Glaurung 2.1 и представил Stockfish 1.0. Торд и Джоона Кииски присоединились к проекту «Стилфиш», и проект «Гларунг» постепенно исчез. Тем временем, Stockfish быстро поднялся, чтобы стать самым сильным шахматным движком с открытым исходным кодом, с частыми обновлениями каждые несколько месяцев. Сегодня он остается одним из самых сильных двигателей в мире.

О GPL
Stockfish является бесплатным и распространяется в соответствии с GNU General Public License Version 3 (GPLv3). По сути, это означает, что вы можете делать практически все, что хотите, с программой, включая ее распространение среди своих друзей, делая ее доступной для загрузки с вашего веб-сайта, продавая ее (либо самостоятельно, либо как часть некоторого более крупного программного пакета ) или использовать его в качестве отправной точки для собственного программного проекта.

Единственное реальное ограничение заключается в том, что всякий раз, когда вы каким-либо образом распространяете Stockfish, вы всегда должны включать полный исходный код или ссылку на исходный код. Если вы внесете какие-либо изменения в исходный код, эти изменения также должны быть доступны в GPL.

Для получения полной информации прочитайте GPL.

[свернуть]

[Кевин]

http://tests.stockfishchess.org/test...bc5902bced8acf - новейший регресс-тест.


Author: 31m059
Date: Tue Nov 27 08:53:14 2018 +0100
Timestamp: 1543305194

Simplify casting extension

On November 16th, before the removal of the depth condition, I tried
revising castling extensions to only handle castling moves, rather than
moves that change castling rights generally. It appeared to be a slight
Elo gain at STC but insufficient to pass [0, 4] (+0.5 Elo), but what I
overlooked was that it made pos.can_castle(us) irrelevant and should
have been a simplification. Recent discussion with @Chess13234 and
Michael Chaly (@Vizvezdenec) inspired me to take a second look, and
the simplification continues to pass when rebased on the current master.

This replaces two conditions with one, because type_of(move) == CASTLING
implies pos.can_castle(Us), allowing us to remove the latter condition.

STC:
LLR: 2.95 (-2.94,2.94) [-3.00,1.00]
Total: 110948 W: 24209 L: 24263 D: 62476 Elo -0.17
http://tests.stockfishchess.org/test...bc5902bced3a63

LTC:
LLR: 2.95 (-2.94,2.94) [-3.00,1.00]
Total: 88283 W: 14681 L: 14668 D: 58934 Elo +0.05
http://tests.stockfishchess.org/test...bc5902bced4349

Bench: 3939338


Author: Steinar H. Gunderson
Date: Tue Nov 27 08:39:23 2018 +0100
Timestamp: 1543304363

Turn on MADV_RANDOM for Syzygy mmaps (on Unix-like builds)

When running on a cloud VM (n1-highcpu-96) with several NVMe SSDs and
some non-SSDs for tablebases, I noticed that the average SSD request size was
more than 256 kB. This doesn't make a lot of sense for Syzygy tablebases,
which have a block size of 32 bytes and very low locality.

Seemingly, the tablebase access patterns during probing make the OS,
at least Linux, think that readahead is advantageous; normally, it
gives up doing readahead if there are too many misses, but it doesn't,
perhaps due to the fairly high overall hit rates. (It seems the kernel cannot
distinguish between reading a block that was paged in because the userspace
wanted it explicitly, and one that was read as part of readahead.)

Setting MADV_RANDOM effectively turns off readahead, which causes
the request size to drop to 4 kB. In the aforemented cloud VM test,
this roughly tripled the amount of I/O requests that were able to go
through, while reducing the total traffic from 2.8 GB/sec to 56 MB/sec
(moving the bottleneck to the non-SSDs; it seems the SSDs could have
sustained many more requests).

Closes https://github.com/official-stockfis...fish/pull/1829

No functional change.

http://abrok.eu/stockfish/

[Alex_Zet]

18-11-27 sni master diff

ELO: 54.17 +-2.0 (95%) LOS: 100.0%
Total: 38907 W: 9507 L: 3489 D: 25911

40000 @ 60+0.6 th 1 Regression/progression test against SF9 after "Simplify casting extension" of November, 27th

http://tests.stockfishchess.org/test...bc5902bced8acf

Хотелось бы понять чем этот мастер отличается от этого

18-11-19 gog master diff

ELO: 53.77 +-1.9 (95%) LOS: 100.0%
Total: 40000 W: 9754 L: 3612 D: 26634

40000 @ 60+0.6 th 1 Regression/progression test against SF9 after "Stockfish 10-beta" of November, 19th

Собственно говоря вопрос лишь один. Тот master, от 18-11-19, писалось что он заморожен как бы что ли, пока что тупиковая ветвь. Или этот нынешний от 18-11-27 есть логическое продолжение неполноценного Stockfish 10-beta, наследия славного прошлого все же, плоть от плоти как говорится?

PS. Как можно заметить, прогресса практически нет. Посредственный порог в 55 ЭЛО нынче пройден так и не будет. В этом уж будьте уверены. Хотя бы в чем то.

[Asunta]

SF10 - это условность

Через пару месяцев набросают новые патчи ( родная мама не узнает! ) и будет текущий SF10+.
Аж до SF11

[Alex_Zet]

Цитата: Сообщение от Asunta

SF10 - это условность

Через пару месяцев набросают новые патчи ( родная мама не узнает! ) и будет текущий SF10+.
Аж до SF11

И вы всерьез верите тому что пишите? То есть , другими словами ровно через 2 месяца, 27 января 2019 года появится новая версия Стокфиш 11? Ну ну. я конечно понимаю что всякое привидиится, но что бы вот так безосновательно , на основании лишь иллюзий о якобы каком то невиданном рывке, о таком мало кто может и помыслить.

[svoitsl]

Цитата: Сообщение от Alex_Zet

То есть , другими словами

лучше бы вы по внимательнее почитали
Через пару месяцев будет SF10+ и так будет

Цитата: Сообщение от Asunta

Аж до SF11

[Maratka]

Цитата: Сообщение от Alex_Zet

И вы всерьез верите тому что пишите? То есть , другими словами ровно через 2 месяца, 27 января 2019 года появится новая версия Стокфиш 11

Новую версию можно выпускать хоть каждый день, было бы что выпускать.
SF 10, SF 10.1, SF10.2 ... SF 10.99, на случай, если оно Вам так принципиально иметь официальную сборку, а не сборку с номером соответствующим дате сборки проекта. Хотите - выпускайте сами, там всех дел - переменную поменять, и вместо пустой строки набрать то что Вам нужно.
Я вон уже давно версией 10 RC2 пользуюсь :D

А может хотите сразу версию 20, чем там на 10 мелочиться?

[Alex_Zet]

Цитата: Сообщение от Maratka

Новую версию можно выпускать хоть каждый день, было бы что выпускать.
SF 10, SF 10.1, SF10.2 ... SF 10.99, на случай, если оно Вам так принципиально иметь официальную сборку, а не сборку с номером соответствующим дате сборки проекта. Хотите - выпускайте сами, там всех дел - переменную поменять, и вместо пустой строки набрать то что Вам нужно.
Я вон уже давно версией 10 RC2 пользуюсь :D

А может хотите сразу версию 20, чем там на 10 мелочиться?

Maratka,а допустим новая версия будет называться Alex_Zet, такое возможно?

[Vizvezdenec]

Да хоть как угодно.
Авторы всяких shashchess вон не гнушались полгода молчать про то, что это - клон стокфиша.
У Ethereal того же версии вообще называются 11.21 (типа такого), при этом на гитхабе 1121 коммит, как берётся их название - сами догадаетесь

[Viktor]

Цитата: Сообщение от Alex_Zet

Ну ну. я конечно понимаю что всякое привидиится, но что бы вот так безосновательно , на основании лишь иллюзий о якобы каком то невиданном рывке, о таком мало кто может и помыслить.

Можно подумать, что Гудини и Комод с большой прибавкой выпускают. Она небольшая, а официальные версии чаще клепают.
Вот есть бесплатный, "народный" движок и, кажется, к нему не может быть вопросов? Но, нет, кому-то он как "кость в горле"! А те же платные, вечно плетущиеся сзади, но с огромными амбициями. Вас, наверное, это беспокоит, раз так печётесь о них?!

[Maratka]

Цитата: Сообщение от Alex_Zet

Maratka,а допустим новая версия будет называться Alex_Zet, такое возможно?

Пользуйтесь
https://yadi.sk/d/o6cHb3rg2lsVlA

[Maratka]

Цитата: Сообщение от Viktor

Можно подумать, что Гудини и Комод с большой прибавкой выпускают. Она небольшая, а официальные версии чаще клепают.
Вот есть бесплатный, "народный" движок и, кажется, к нему не может быть вопросов? Но, нет, кому-то он как "кость в горле"! А те же платные, вечно плетущиеся сзади, но с огромными амбициями. Вас, наверное, это беспокоит, раз так печётесь о них?!

Тем не менее, есть ощущение, что в этом сезоне чемпионом TCEC и прочих серьезных турниров с приличным железом будет уже не SF: писец подкрался откуда не ждали... Есть конечно вариант вытянуть 100 ничьих за счет семифигурок, но победить... Скажем так - 1-2 случайны победы, не более.

Однако при этом по сути ничего не меняется: движок как был свободным опенсурсом, так и остается, просто теперь будет уже другой движок. :D

[Vizvezdenec]

Цитата: Сообщение от Viktor

Можно подумать, что Гудини и Комод с большой прибавкой выпускают. Она небольшая, а официальные версии чаще клепают.
Вот есть бесплатный, "народный" движок и, кажется, к нему не может быть вопросов? Но, нет, кому-то он как "кость в горле"! А те же платные, вечно плетущиеся сзади, но с огромными амбициями. Вас, наверное, это беспокоит, раз так печётесь о них?!

Комодо с версии примерно 11.2 не может выйти за пределы погрешности хотя бы в одном рейтинг листе (а на коротком времени они небольшие, эло 5, возможно, не более). 11.2, между прочим, вышла в июле 2017 года
В то время как
2 asmFish 171004 x64 3379
1 Stockfish 9 64 3408
Ну а SF10 будет не ниже 3450.

[Vizvezdenec]

Цитата: Сообщение от Maratka

Тем не менее, есть ощущение, что в этом сезоне чемпионом TCEC и прочих серьезных турниров с приличным железом будет уже не SF: писец подкрался откуда не ждали... Есть конечно вариант вытянуть 100 ничьих за счет семифигурок, но победить... Скажем так - 1-2 случайны победы, не более.

Однако при этом по сути ничего не меняется: движок как был свободным опенсурсом, так и остается, просто теперь будет уже другой движок. :D

Это про Лилу?
Не знаю, пока что не видел ни одного матча, в котором она бы у SF выиграла на железе, которое в TCEC используется или около того. (тот же 4c для Лилы закончился поражением в 1х1 против ВСЕХ движков из топ-3, хотя она и заняла 3 место за счёт того, что SF просто избил Гудини, а Лила играла с SF лучше).
Более того, несколько факторов ещё будут в пользу SF:
1) Лила хуже вырубает хвост и вполне запросто может просто не попасть в финал;
2) В финале стараются ставить позиции поострее и посложнее, Лила в них путается весьма часто;
3) В финале используется очень длинный временной контроль, что Лиле совсем не на руку - после 2-4 mn/ход она вообще не скейлится, а это вполне достижимо с 45 knps и 2 часами на партию, даже не то, что достижимо, а почти в каждом ходе будет достигаться;
4) Лила зачастую проигрывает даже слабым AB движкам, просто зевнув что-то. В 4с Andscacs, например, в каждом турнире по игре по крайней мере у неё выигрывает на тактических зевках. Да она даже Pedone умудрилась проиграть не так давно

[sovaz1997]

На самом деле, Лида вполне может и выиграть SF. Но это напрямую зависит от развития новой сети.

[Maratka]

Цитата: Сообщение от Vizvezdenec

Это про Лилу?
Не знаю, пока что не видел ни одного матча, в котором она бы у SF выиграла на железе, которое в TCEC используется или около того.

Скоро увидите. ;)
Важно же не именно железо TCEC, а соответствие железа на тестовых машинах и в TCEC.
Скажем GTX 1060 для LZ и шестиядерный i5 для SF являются достаточно точным масштабированием вниз с TCEC'овских железок.

Цитата: Сообщение от Vizvezdenec

1) Лила хуже вырубает хвост и вполне запросто может просто не попасть в финал;
2) В финале стараются ставить позиции поострее и посложнее, Лила в них путается весьма часто;
3) В финале используется очень длинный временной контроль, что Лиле совсем не на руку - после 2-4 mn/ход она вообще не скейлится, а это вполне достижимо с 45 knps и 2 часами на партию, даже не то, что достижимо, а почти в каждом ходе будет достигаться;
4) Лила зачастую проигрывает даже слабым AB движкам, просто зевнув что-то. В 4с Andscacs, например, в каждом турнире по игре по крайней мере у неё выигрывает на тактических зевках. Да она даже Pedone умудрилась проиграть не так давно

Новые сети таки дали буст за последние дни. А до финала еще месяца три.

[Vizvezdenec]

Цитата: Сообщение от Maratka

Скоро увидите. ;)
Важно же не именно железо TCEC, а соответствие железа на тестовых машинах и в TCEC.
Скажем GTX 1060 для LZ и шестиядерный i5 для SF являются достаточно точным масштабирование вниз с TCEC'овских железок.

На 4c Лила играла с 35 knps против 70 mnps SF.
Что, конечно, несколько хуже, чем будет в TCEC, но зато там и временной контроль меньше, т.е. ни в какой потолок скейлинга Лила не упиралась.
Более того, в раунде с топ-8 она не была даже в топ-3 - слишком плохо вырубает хвост.
Так что не увижу в этом году и в этом я уверен. Более того, на 90+% уверен, что не увижу её в финале.
PS ну и да, в кубке TCEC, где лила вполне себе играла на новом уже железе, SF её разгромил. Понятно, что 8 партий это ерунда, но он выиграл там дважды, что уж точно не "1-2 случайные победы в финале", в финале не 8 игр.
А в то, что новая сеть даст какой-то невероятный буст, я не верю.
Что она выросла на целых 30 эло после двухнедельного простоя - это, конечно, крайне здорово, да только там ещё 300 нужно.
А то я слышал, что и 20 сеть будет ого-го, а на деле имеем то, что 10 пока куда сильнее любой другой.

[Maratka]

Цитата: Сообщение от Vizvezdenec

PS ну и да, в кубке TCEC, где лила вполне себе играла на новом уже железе, SF её разгромил. Понятно, что 8 партий это ерунда, но он выиграл там дважды, что уж точно не "1-2 случайные победы в финале", в финале не 8 игр.

Сеть старая. Сейчас на подходе 3xx.

Вот например что я вижу прямо сейчас на своей машине:

[Vizvezdenec]

Цитата: Сообщение от Maratka

Сеть старя. Сейчас на подходе 3xx

Вот например что я вижу прямо сейчас на своей машине:

А я вижу вот это
https://docs.google.com/spreadsheets...#gid=868347223
Lc0 ID 1250 3489
Lc0 ID 31550 3238
Или вот это
https://docs.google.com/spreadsheets...#gid=763519729
Leela Test30 ID 31559 3402
Leela ID 11258 v0.19.2 3547
И что-то у меня есть сомнения, что это Лила резко прибавила 150 эло за несколько суток.

[Vizvezdenec]

А по поводу временного контроля вот есть данные.
http://talkchess.com/forum3/viewtopic.php?f=2&t=69068

Ну удачи с таким скейлингом на 1,5-2 часах на партию играть
Понятно, что ошибки в тесте огромные, но это далеко не первый тест и все примерно такой результат и выдают.
Похоже, что гугл в своей базовой статье не зря больше минуты на ход не давал движкам, чтобы можно было рассказывать про "better scaling", как раз обрезая график там, где он становился совсем не "better"

[Maratka]

Цитата: Сообщение от Vizvezdenec

Похоже, что гугл в своей базовой статье не зря больше минуты на ход не давал движкам, чтобы можно было рассказывать про "better scaling", как раз обрезая график там, где он становился совсем не "better"

;)

В общем поживем - увидим. Доползти до высшего дивизиона IMHO и сети 11250 хватит. А значит, есть еще ~3 месяцев на допиливание новых сетей, да и самого движка тоже.

[Maratka]

Цитата: Сообщение от Vizvezdenec

Не знаю, пока что не видел ни одного матча, в котором она бы у SF выиграла на железе, которое в TCEC используется или около того. (тот же 4c для Лилы закончился поражением в 1х1 против ВСЕХ движков из топ-3, хотя она и заняла 3 место за счёт того, что SF просто избил Гудини, а Лила играла с SF лучше).

[Event "TCEC bonus games"]
[Site "?"]
[Date "2018.07.13"]
[Round "?"]
[White "LCZero 014.483"]
[Black "Stockfish 140618 64 BMI2"]
[Result "1-0"]
[ECO "A52"]
[WhiteElo "3219"]
[BlackElo "3519"]
[PlyCount "116"]
[EventDate "2015.??.??"]
[TimeControl "1440+16"]

1. d4 Nf6 2. c4 e5 3. dxe5 Ng4 4. Bf4 Bb4+ 5. Nc3 Bxc3+ 6. bxc3 Nc6 7. Nf3 Qe7
8. Qd5 f6 9. exf6 Nxf6 10. Qd3 d6 11. g3 O-O 12. Bg2 Bg4 13. O-O Rae8 14. Rfe1
b6 15. h3 Bh5 16. Bg5 Bf7 17. Bxf6 Qxf6 18. Ng5 Bg6 19. Qd5+ Kh8 20. Qxc6 Qxg5
21. Qd5 Re5 22. Qd4 Be4 23. Bxe4 Rf4 24. Bxh7 Rxd4 25. cxd4 Ra5 26. Bd3 Ra3 27.
Rac1 Rxa2 28. h4 Qa5 29. Kg2 Rd2 30. h5 Kg8 31. Rh1 Qg5 32. Rb1 a5 33. Rb5 Qe7
34. h6 Rxe2 35. Rf5 Re4 36. Rf3 gxh6 37. Rxh6 Rxd4 38. Bf5 Qe8 39. Be6+ Kg7 40.
Rhf6 Qh8 41. Rf7+ Kg6 42. R7f5 a4 43. Bf7+ Kg7 44. Rg5+ Kf8 45. Bd5+ Ke7 46.
Rf7+ Kd8 47. Rfg7 Qxg7 48. Rxg7 a3 49. Rg8+ Kd7 50. Ra8 b5 51. Rxa3 bxc4 52.
Bf3 Rd2 53. Kf1 Rb2 54. Rc3 Rb4 55. Bd5 c6 56. Bxc4 d5 57. Be2 Rb1+ 58. Kg2 Rb2
1-0

[Vizvezdenec]

Я говорю про матч, а не про конкретную партию
В 4c и в TCEC матчи такие были, все стокфиш выиграл.
При этом результат Лилы был получше её рейтинга на основании игр с другими альфабета движками, но про это я уже говорил - она плохо рубит хвост.

[Maratka]

Матч складывается из партий. ;)
А на сравнительно короткой дистанции еще и фактор случайностей играет роль.
Помните, как в партии с перекосом материала (ферзь против трех легких фигур) месяц назад LZ переиграл SF'а в одну калитку? Выпадет таких дебютов штуки три, тут уже и 11250-я сеть может матч взять.
Ну и опять же, как не крути, но сети развиваются куда как быстрее, чем 70 ELO в год. Сколько там LZ с сетью 11250 не хватает до уровня SF? 50, может 100 ELO. При определенной удаче сеть их можно набрать за неделю.

[Vizvezdenec]

Цитата: Сообщение от Maratka

Матч складывается из партий. ;)
А на сравнительно короткой дистанции еще и фактор случайностей играет роль.
Помните, как в партии с перекосом материала (ферзь против трех легких фигур) месяц назад LZ переиграл SF'а в одну калитку? Выпадет таких дебютов штуки три, тут уже и 11250-я сеть может матч взять.
Ну и опять же, как не крути, но сети развиваются куда как быстрее, чем 70 ELO в год. Сколько там LZ с сетью 11250 не хватает до уровня SF? 50, может 100 ELO. При определенной удаче сеть их можно набрать за неделю.

Я бы сказал, что для выхода в финал турнира формата TCEC lc0 не хватает больше эло, чем до того, чтобы обыграть Stockfish в 1х1.
А по поводу темпов развития... Сколько там прошло с релиза 10 серии последней сети? А прирост эло отсутствует вообще.
Более того, особо лучше и у гугла-то не получилось, а уж они потели не один год, я думаю.

[Кевин]

Цитата: Сообщение от Viktor

Можно подумать, что Гудини и Комод с большой прибавкой выпускают.

Вообще Гудини как раз выходит редко и с хорошей прибавкой (по 50 эло обычно примерно).

[Кевин]

Регресс-тест закончен:

ELO: 54.25 +-1.9 (95%) LOS: 100.0%
Total: 39983 W: 9752 L: 3559 D: 26672

http://tests.stockfishchess.org/test...bc5902bced8acf

[Maratka]

Цитата: Сообщение от Vizvezdenec

Сколько там прошло с релиза 10 серии последней сети? А прирост эло отсутствует вообще.

Ну как же отсутствует?
Было 0 (нуль), а стало на уровне движков в конце первой десятки. И это фактически за месяца полтора, ибо до этого момента сеть 3xx дрессировали в фоне. Понятно, что это все с помощью уже достаточно отлаженного ПО, а не полностью у нуля, но тем не менее, 3200 ELO за полтора месяца - это несколько больше, чем у любого a-b движка за год. А так как их зачастую тоже не с нуля пишут, то фактор отлаженного ПО у LZ можно не учитывать.

[Vizvezdenec]

Цитата: Сообщение от Maratka

Ну как же отсутствует?
Было 0 (нуль), а стало на уровне движков в конце первой десятки. И это фактически за месяца полтора, ибо до этого момента сеть 3xx дрессировали в фоне. Понятно, что это все с помощью уже достаточно отлаженного ПО, а не полностью у нуля, но тем не менее, 3200 ELO за полтора месяца - это несколько больше, чем у любого a-b движка за год. А так как их зачастую тоже не с нуля пишут, то фактор отлаженного ПО у LZ можно не учитывать.

Это ерунда, уж простите.
Это как стереть сорс код стокфиша и написать его с нуля и "прибавить" так 3500 эло за несколько дней. Только реально лучше, чем прошлая версия, он не будет.
Так-то вон автор Гудини тоже с 4 по 5 версию пол-программы переписал, но, тем не менее, утверждал 200 эло прибытка, а не 1000, которые реально дали новые эвристики с того места, откуда он их начал писать

[Alex_Zet]

Цитата: Сообщение от Maratka

Пользуйтесь
https://yadi.sk/d/o6cHb3rg2lsVlA

Это не сосем то. Надо что бы полностью было без всяких там стокфиш. Просто и лаконично - Alex_Zet. Расширение exe конечно же оставьте для солидности.

[Viktor]

Цитата: Сообщение от Кевин

Вообще Гудини как раз выходит редко и с хорошей прибавкой (по 50 эло обычно примерно).

Но было несколько выходов версий без прибавки. Правда, это были исправления "вдогонку". Что лишний раз "говорит" в пользу Стока!