Stockfish и его производные

[Харлампий]

Stockfish 14
Stockfish 14 для Android
https://ufile.io/f/8ardx
https://pixeldrain.com/l/ndVpnHXc#item=1

Архив предыдущих версий: https://www.dropbox.com/sh/75gzfgu7q...UfHbBr4r_RwhGa

Официальный сайт стокфиш

Обновления тестовых версий стокфиша: http://abrok.eu/stockfish/

Сборки Stockfish и CorChess от I. Ivec

Развитие движка http://tests.stockfishchess.org/tests

Stockfish_NNUE https://github.com/nodchip/Stockfish

Сети: https://www.comp.nus.edu.sg/~sergio-v/nnue/

AsmFish

Сборки от Maratka

Компиляции движков от ChessMan

Сборка Stockfish от Otodranik

Sugar от Marco Zerbinati

Shark и Orka

О Stockfish

Цитата:

Авторы движка
Двигатель Stockfish был разработан Tord Romstad, Marco Costalba и Joona Kiiski. В настоящее время он развивается и поддерживается сообществом Stockfish.

Авторы приложений
Stockfish для Mac был собран Daylen Yang. Stockfish для iOS был собран Tord Romstad.

История
Проект Stockfish начался с движка Glaurung с открытым исходным кодом, созданного Tord Romstad. В ноябре 2008 года Марко Косталба разветвил код Glaurung 2.1 и представил Stockfish 1.0. Торд и Джоона Кииски присоединились к проекту «Стилфиш», и проект «Гларунг» постепенно исчез. Тем временем, Stockfish быстро поднялся, чтобы стать самым сильным шахматным движком с открытым исходным кодом, с частыми обновлениями каждые несколько месяцев. Сегодня он остается одним из самых сильных двигателей в мире.

О GPL
Stockfish является бесплатным и распространяется в соответствии с GNU General Public License Version 3 (GPLv3). По сути, это означает, что вы можете делать практически все, что хотите, с программой, включая ее распространение среди своих друзей, делая ее доступной для загрузки с вашего веб-сайта, продавая ее (либо самостоятельно, либо как часть некоторого более крупного программного пакета ) или использовать его в качестве отправной точки для собственного программного проекта.

Единственное реальное ограничение заключается в том, что всякий раз, когда вы каким-либо образом распространяете Stockfish, вы всегда должны включать полный исходный код или ссылку на исходный код. Если вы внесете какие-либо изменения в исходный код, эти изменения также должны быть доступны в GPL.

Для получения полной информации прочитайте GPL.

[свернуть]

[Vizvezdenec]

Цитата: Сообщение от Maratka

А это тесты на сетевом движке?
Если да, то очевидно так и есть. Ведь поиск был то был оптимизирован под совершенно другую оценку!

Но что плохо - в этом случае тюнинг убивает качество игры при ручной оценке, я уверен на 99%.

Ну убивает и убивает, так сказать.
Что мы можем сделать? Не делать же два отдельных поиска...
Кстати, с одной стороны это так, а с другой стороны - мы знаем, что "существует оценка, которая прям очень хороша при таком поиске, модифицируйте ручную", как-то так

[Maratka]

Цитата: Сообщение от Vizvezdenec

Что мы можем сделать? Не делать же два отдельных поиска...

Ну поняно не делать, но несколько таких подборов параметров, и зачем будет нужна ручная оценка в целом, и как вариант "замены сетевой в некоторых позициях" в частности?

Ведь оно с двух сторон сжиматься будет: с одной стороны этот поиск будет ухудшать игру при ручной оценке, а с другой стороны приходят новые сети, которым данный "ускоритель" в общем-то и не нужен.

[kruzh]

Цитата: Сообщение от Vizvezdenec

Author: Unai Corzo
Date: Mon Aug 10 19:17:57 2020 +0200
Timestamp: 1597079877

Assorted search parameter tune

STC https://tests.stockfishchess.org/tes...816720665374ec
LLR: 2.96 (-2.94,2.94) {-0.50,1.50}
Total: 3376 W: 487 L: 359 D: 2530 Elo +13.18
Ptnml(0-2): 17, 253, 1042, 337, 39

LTC https://tests.stockfishchess.org/tes...81672066537502
LLR: 2.93 (-2.94,2.94) {0.25,1.75}
Total: 8360 W: 581 L: 475 D: 7304 Elo +4.41
Ptnml(0-2): 11, 407, 3238, 513, 11
20 тысяч игр тюнинга всего лишь... Просто тюнинг разной дребедени в поиске. Думаю, там ещё вагон эло на самом деле.

У меня почему то на аброке пропал этот патч.

[kruzh]

Странно, опять появился... видимо, что-то подправили

[Владимир001]

Цитата: Сообщение от kruzh

Странно, опять появился... видимо, что-то подправили

Да такое бывает, даже по несколько раз подряд. Я замечал.

[Asunta]

Упорненько, но условия были уж очень антисанитарные.. В греческом зале : )

[ Threads: 1 / Hash: 64MB / Contempt: 0 / syzygy: 3,4,5 / Time Control: 20sec + 0.2sec ]
[ Дебюты: M100 SolidBook.pgn >> https://ru.files.fm/u/29jdej88 ]

49.0 : 51.0 ( +10 =78 -12 ) --- [ 2020.08.08 SF11 solid + 20200809-1951 ] vs [ 2020.08.08 SF11 hybrid + 20200809-1951 ]
48.5 : 51.5 ( +12 =73 -15 ) --- [ 2020.08.08 SF11 solid + 20200809-1951 ] vs [ 2020.07.19 SF11 NN ( nodchip ) + 20200809-1951 ]
50.5 : 49.5 ( +11 =79 -10 ) --- [ 2020.08.08 SF11 solid + 20200809-1951 ] vs [ 2020.07.29 SF11 NN ( FireFather ) + 20200809-1951 ]

[ 2020.08.08 SF11 solid ], [ 2020.08.08 SF11 hybrid ] >> https://ru.files.fm/u/d22pttqw
[ 2020.07.19 SF11 NN ( nodchip ) ] >> https://github.com/nodchip/Stockfish...-2020-07-19.7z
[ 2020.07.29 SF11 NN ( FireFather ) ] >> https://github.com/FireFather/sf-nnu...20.binaries.7z

Тут ещё подкинули ссылку на NNUE_ONLY >> https://github.com/joergoster/Stockf...nue_always/src
Только неясно, насколько этот мастер синхронизирован со Stockfish-master..
Лучше уж 2-3 строчки перекомпилировать самому, если сильно приспичит..


Общее понимание пока что окончательно не зашло : )
Как чисто сетевая оценка может поймать гибрид на передёргивании оценочных функций SF_nnue и SF_classic ( ? )

--- замусоривание хэша оценками двух стилей ( научно не доказано )
--- гибридные АВ-отсечения ( при решении задач слегка проявилось )
--- гибридные оценки в "истории прогресса" для ходов-кандидатов ( этого точно должно быть много )

В любом случае, чем длиннее контроль - тем больше шансов выловить "нюанс"..
Для победы в партии может хватить 1-2 подходящих "эпизодов"..

На микроконтролях идёт настолько жуткое долбление, что до "нюансов" движки не доходят физически : )

[Vizvezdenec]

Я не знаю, о каком "замусоривании хэша" может идти речь, кстати.
Ведь условия на переход на более простую оценку - функция позиции, т.е. если оно выполняется, то оно и в хэше выполнялось. Поэтому никакого замусоривания не будет.
Но меня всё это сподвигло на подвиги, я попробовал написать патч на мультипроцессинг, который даже прошёл короткий временной контроль, связанный со всем этим.
Если пройдёт и длинный - вот там замусоривание хэша будет в полной мере, зато, возможно, на нескольких ядрах поиск "растащится".
Учитывая, правда, что из меня эксперт в мультипроцессинге совсем не очень, может быть, мне просто повезло. В любом случае жду результата.
https://tests.stockfishchess.org/tes...8167206653755c

[Кевин]

Интересное дело: на современном процессоре с поддержкой BMI2 ради интереса (глянуть скорость) запустил обычную modern-версию. И с удивлением обнаружил, что она нагревает процессор гораздо сильнее, чем bmi2-компиляция. В обоих случаях нейросеть была подключена, конечно же.

Почему так?

[Кевин]

О видеокартах: почему всё-таки отказались от задействования видюшек при работе нейросетевого Стока?

С одной стороны я рад, что, как и раньше, достаточно одного процессора и не нужно заморачиваться с покупкой топовых видеокарт и вдвойне платить за электричество, а с другой не могла ли бы получиться улётная смесь и ещё десятки эло прироста при работе ЦП+графика? Это был бы уникальный опыт и двойная мощь ресурсов компьютера.

[Rom77]

Цитата: Сообщение от Кевин

Интересное дело: на современном процессоре с поддержкой BMI2 ради интереса (глянуть скорость) запустил обычную modern-версию. И с удивлением обнаружил, что она нагревает процессор гораздо сильнее, чем bmi2-компиляция.

А этот современный процессор выпущен AMD или Intel? У AMD выполнение инструкций BMI2 замедляет процессор. Но не совсем понятно, как это влияет на ситуацию с нагревом.

Цитата: Сообщение от Кевин

О видеокартах: почему всё-таки отказались от задействования видюшек при работе нейросетевого Стока?

Большая задержка по времени при пересылке данных на видеокарту и обратно (кстати, это одна из причин, почему у Лилы небольшая скорость). Кроме того, нейросеть у Стока такая маленькая, что проще высчитывать её на месте. Благо центральный процессор отчасти предоставляет такие же возможности, как и видеокарта - те же векторные операции. Хотя, здесь правильнее сказать, что нейросеть у Стока маленькая именно потому, что сразу предполагалось запускать её именно на центральном процессоре.

[Jeweller]

Цитата: Сообщение от ChessMan

А нет... NNUEThreshold там не отключены... Надеюсь Ivec это исправит.

тоже надеюсь... если нет, то можно высказать пожелание, чтобы хотя бы в CFish и CiChess была возможность выбирать 1.чистую сетевую ОФ, 2. чистую ручную и 3. гибридную ?)

сравнил сетевую и гибридную версии Asunta-компиляций:
- разная оценка не в 30% случаев, а практически каждый ход
- в режиме multiPV разные оценки по всем линиям, упорядоченность линий очень разная
- совершенно разная динамика изменения оценок по линиям с набором глубины, отслеживать динамику изменения оценки теперь бессмысленно
- заметил скачки в микс-оценке
- во многих сложных позициях, особенно с мат.дисбалансом, микс-оценка перескакивает на стандартную ручную с характерным выводом нулей и углублением на очень короткую глубину, в то время как сетевая оценка ненулевая и продолжает углубляться. этот момент, пмм, качественно важен

- фактически подмена чистой сетевой оценки микс-оценкой убивает сетевую оценку как альтернативный аналитичекий инструмент - во многих позициях теперь просто нет возможности смотреть сетевой оценкой, микс там никакой не микс, а обычная ручная
хочешь посмотреть сетевой? - невозможно!

[AndreyZhivotkov]

nodchip stockfish-nnue-2020-08-11

https://github.com/nodchip/Stockfish/releases

[AndreyZhivotkov]

Цитата: Сообщение от AndreyZhivotkov

nodchip stockfish-nnue-2020-08-11

https://github.com/nodchip/Stockfish/releases

Не все файлы залил, подождём.

[kruzh]

Цитата: Сообщение от AndreyZhivotkov

Не все файлы залил, подождём.

Да вроде бы он все залил для тренинга:
nodchipСегодня, в 9:08
Я выпустил новый двоичный набор генератора обучающих данных и трейнера Stockfish.

[AndreyZhivotkov]

Цитата: Сообщение от kruzh

Да вроде бы он все залил для тренинга:
nodchipСегодня, в 9:08
Я выпустил новый двоичный набор генератора обучающих данных и трейнера Stockfish.

Прошлые версии были с шахматным движком.

[kruzh]

Ну да, пока их нет.

[kruzh]

Вычитал на дискорде :

rikСегодня, в 10:06
почему нет шахматного движка?

rongle99Сегодня, в 10:07
шахматный движок теперь доступен только на abrok

rikСегодня, в 10:09
Версия nodchip понравилась мне больше

rongle99Сегодня, в 10:09
компиляция nodchip теперь предназначена только для создания сети

[sergey1963]

Да нет там никакой разницы- между сетевым стоком и обычным... Объясняю на пальцах- эта разница между УДК и УКК, с помощью сети сократилось время нахождения лучшего хода- вот откуда и появился резерв. В самом УКК также существует разница- одно дело 5 минут на партию, другое- 1 минута, третье- 10 секунд. Эта разница в 50-100 эло была всегда- лучшие игроки могли гудком -5 обыграть гудок-6 или Стоком-10 сток-11 при 12 часах (ночном БА) на ход, а если еще ручками подвигать...
На всякий случай напоминаю- нормальный сток был до 31 июля, его года на 2 вполне хватит. С 6 августа нашим программистам снесло крышу... по-Сталину- "Головокружение от успехов"...

[Asunta]

Цитата: Сообщение от Jeweller

тоже надеюсь... если нет, то можно высказать пожелание, чтобы хотя бы в CFish и CiChess была возможность выбирать 1.чистую сетевую ОФ, 2. чистую ручную и 3. гибридную ?)

сравнил сетевую и гибридную версии Asunta-компиляций:
- разная оценка не в 30% случаев, а практически каждый ход
- в режиме multiPV разные оценки по всем линиям, упорядоченность линий очень разная
- совершенно разная динамика изменения оценок по линиям с набором глубины, отслеживать динамику изменения оценки теперь бессмысленно
- заметил скачки в микс-оценке
- во многих сложных позициях, особенно с мат.дисбалансом, микс-оценка перескакивает на стандартную ручную с характерным выводом нулей и углублением на очень короткую глубину, в то время как сетевая оценка ненулевая и продолжает углубляться. этот момент, пмм, качественно важен

- фактически подмена чистой сетевой оценки микс-оценкой убивает сетевую оценку как альтернативный аналитичекий инструмент - во многих позициях теперь просто нет возможности смотреть сетевой оценкой, микс там никакой не микс, а обычная ручная
хочешь посмотреть сетевой? - невозможно!

Я им так и написал здесь: https://github.com/official-stockfis...sh/issues/2961
Пока что глухо... Приличные люди не заходят : )

( nodchip )-style ----------- Hybrid / Classic_ONLY ( checkbox )
https://github.com/nodchip/Stockfish...c/evaluate.cpp ( Line 943 )

( FireFather )-style --------- NNUE_ONLY / Classic_ONLY ( checkbox )
https://github.com/FireFather/sf-nnu...c/evaluate.cpp ( Line 896 )

( !!! ) must be
( Stockfish )-style ---------- NNUE_ONLY / Hybrid / Classic_ONLY ( combobox )


Тем временем... Последний NN-Сток на аброке от 2020.08.10
намного сильнее NN-Стоков за предыдущие дни..

[sergey1963]

Майк!- а что если провести тест Сегодняшний NN---Сток 31.07- 100 партий с контролем 0,01, 0,1, 1, 10, 100 секунд на партию на 1 ядре с 64мб хэшем? Эти 5 временных контролей дадут хороший вектор для понимания- куда идем, предлагаю начать с позиции отборной базы партий ИКЧФ, проигрыша явного здесь нет, но и подводных камней за обе стороны хватает (можешь предложить свою)-

rn1qkb1r/pb3p2/2p1pn1p/1p4p1/2pPP3/2N2NB1/PP2BPPP/R2QK2R w KQkq - 2 10

Если нужна моя помощь- 4 ядра 6600, SSD- готов скачать Кутчес, настройки- подскажешь...

[Владимир001]

Author: mstembera
Date: Tue Aug 11 08:17:03 2020 +0200
Timestamp: 1597126623

Fix AVX512 build with older compilers

avoids an intrinsic that is missing in gcc < 10.

For this target, might trigger another gcc bug on windows that
requires up-to-date gcc 8, 9, or 10, or usage of clang.

Fixes https://github.com/official-stockfis...sh/issues/2975

closes https://github.com/official-stockfis...fish/pull/2976

No functional change
see source

+еще 3 версии

https://abrok.eu/stockfish/

[sergey1963]

Тогда говори- как и чего, можно в личку- если контроль сильно мал- то можно 1-4-16с и 1-4 минуты на партию...

[Asunta]

Цитата: Сообщение от sergey1963

Майк!- а что если провести тест Сегодняшний NN---Сток 31.07- 100 партий с контролем 0,01, 0,1, 1, 10, 100 секунд на партию
на 1 ядре с 64мб хэшем? Эти 5 временных контролей дадут хороший вектор для понимания- куда идем

На контроле ( xxx + s ) при s < 0.2sec могут быть просрочки, искажающие картину...
Поэтому нельзя просто давать время на партию, т.е ( xxx + 0 )

Думаю, нужно подождать 2-3 недели, чтобы обстановка слегка стабилизировалась...
Сейчас идёт двойной рост: движки и сети... Глаза разбегаются : )

[Переяслав]

Цитата: Сообщение от Asunta

На контроле ( xxx + s ) при s < 0.2sec могут быть просрочки, искажающие картину...
Поэтому нельзя просто давать время на партию, т.е ( xxx + 0 )

Можно движкам timemargin задать в cutechess - вроде как должно помочь не просрачиваться

[Asunta]

Если ( +0 ) без добавления, то через N ходов тупо упадёт флаг...
Такой хоккей нам не нужен : )

[Jeweller]

вижу три достаточно полных списка тестирования 256-х сетей:
1. Aster - 10 000 партий, контроль - ?
2. Переяслав - 1 000 партий, 4''+0,15''
3. sp-cc.de - 500 партий, 60''+0.5''

попробую немного обработать их своими методами, взаимно профильтровать, выделить области локальных максимумов (если такие есть), и несколько лидеров

если кто-то знает еще достаточно полные тесты по всей группе 256-сетей, скиньте ссылки - чем больше независимых списков, тем точнее будет результат

зы. Aster, какой контроль в Вашем тесте?

[Переяслав]

Цитата: Сообщение от Jeweller

Aster - 10 000 партий, контроль - ?

10"+0.1"

[Владимир001]

Processor:Intel Core i5-7600K, GHz:4.20 , Сore:1, Gui:Fritz-11, Games:100, Time:1+1, Book:SuperGM_4mvs.ctg ,Endgame tables:Syzygy 3-4-5, Hash:128 MB, Ponder:Off.

[Владимир001]

Stockfish vs Stockfish NNUE

https://youtu.be/FUrUw2fc6ts

[Jeweller]

Цитата: Сообщение от Переяслав

10"+0.1"

гут

у Вас в таблице есть тест 20200723-1844, но у Сержио нет такой сети
вероятно описка.. какая это сеть, можно уточнить сейчас?

нет тестов
20200721-1907
20200722-0944
20200722-1517
20200723-0511
20200724-1732
Вы их не проводили?