TCEC 20

[Alex_Zet]

Цитата: Сообщение от Переяслав

Обычный рывок и даже самый лучший, если отбросить переход на NNUE

Не 33,7 эло, а чуть поболее.

NCM Stockfish Dev Builds https://nextchessmove.com/dev-builds утверждают что на данный момент к 12 релизу уже прибавилось в районе 50 эло.

Stockfish 12 / +326.01
тест от 20210111-1842 / 20000 партий / 15963 побед / 98 поражений / 3939 ничьих // +375.28 эло +/- 5.41

Stockfish Development Builds

NCM plays each Stockfish dev build 20,000 times against Stockfish 7.
 This yields an approximate Elo difference and establishes confidence 
in the strength of the dev builds.

Test Conditions
NCM uses dual CPU Xeon E5-2670 16 core dedicated servers to perform
 its dev build tests. Each physical server plays 8 games concurrently.
 Hash is set to 128. Threads is set to 2 so that each position during 
the test is evaluated using two processor cores.

Time controls are set to 30+0.3 and scaled periodically by comparing 
the server's Stockfish bench score to 1600k nps.

Если сравнить показатели картинки и показатели NCM, то получаются любопытные цифры.
+133,7 у Переяслава, против 83,23 у NCM,

NCM
Stockfish 11 +242.78 +/- 3.95	
	
Stockfish 12 +326.01 +/- 4.87

и уже еще + 50 эло к Сток 12, на NCM. Из предыдущих показателей 83,23 у NCM, что равнялось +133,7 у Переяслава, нынешние +50 на NCM, дают еще в районе 80 эло, если пеерсчитать с кэфициентном картинки.

Получается что дофига и как бы это уже следующий 13 релиз.

[Vizvezdenec]

Интересный график глубины поиска в Komodo-SF.
Такой разницы по глубине поиска не было и во времена 6 версии, когда SF использовал YBWC, который давал больше глубины, но меньше силы игры, а Комодо использовал LazySMP.
Просто интересная картинка, ничего более. Похоже, что с последними изменениями LMR сток больше рассчитывает не на точный просчёт на средних глубинах, а на то, что он зароется на 50+, и даже если так он отсечёт что-то - быстрый рост глубины корневого узла поправит, т.к. там усечения поиска имеют всё меньше и меньше влияния.
Ну оно всегда так работало, конечно, но, по-моему, эффект никогда не был настолько велик. Раньше я видел +5 в миттельшпиле (это прям максимум) и 10-15 в эндшпиле, а тут прям совсем большая разница.

[Maratka]

Может Komodo просто замедлился?
У него же тоже NNUE версия, а значит где-то переписали и поиск, но повернули в другую сторону, вида "раз у нас такая хорошая оценка, то (типа как у LZ) - нет смысла глубоко рыть, мы лучше ширину посмотрим"?

[Vizvezdenec]

Да нет, это скорее у стока глубина сильно выросла. На 11-12 ходу за 50 - это реально много, и более мощное железо это не объясняет.

[Maratka]

А на На 11-12 ходу ручная оценка я так понимаю еще не успевает толком включиться (ну может некоторые эндшпили, до которых успели досчитать), т.е. патчи на поиск сильно увеличили глубины благодаря тому, что теперь есть более точная оценка, которой больше оснований доверять?

Ну типа "сильнее режем, за счет чего быстрее набираем глубину"?

[svoitsl]

S20 - Division P

KomodoDragon по приросту Эло вряд ли уже кто нибудь перегонит

[Maratka]

Komodo таки крепко третье место держит, дай ему Бог удачи, чтобы подрос до второго, все же реально у нас какой уже подряд финал SF vs LZ будет? Да и полтора года назад, когда SF играл с AS, тот был просто себе обычным неудачным клоном, но таки LZ, т.е. в общем-то правомочно сказать, что это было LZ полугодичной давности по силе игры, с тем же стилем, но и результат вполне прогнозируем, как если бы играл LZ полугодичной давности или около того. Надоело это все! Хочется финал SF vs Komodo! Даже готов на LZ vs Komodo посмотреть...

Цитата: Сообщение от svoitsl

KomodoDragon по приросту Эло вряд ли уже кто нибудь перегонит

Разумеется, реальный рост над собой ~200 ELo по их внутреннему тесту перебить сложно, все кто могли - уже обзавелись аналогичной технологией.

__________
Мне вот что интересно, кто мне может расскажет: чем сеть SF/Komodo принципиально отличается от сети LZ (размерность не в счет, это чисто масштабирование вверх, которое мало имеет смысла без увеличения мощности сопроцессоров, обслуживающих сети LZ)?
И второе - насколько реально перенести расчет сети у SF на те же внешние сопроцессоры (не выбрасывая конечно же оригинальную возможность работы без них вообще), и что это даст с точки зрения nps/глубины?

[Alex_Zet]

С появлением Ceres , возможны перетрубации в ТСЕС.Поясню.
Ceres, - это высокооптимизированная поисковая система Монте-Карло с множеством новых идей по улучшению алгоритмов, написанных на C #. Он использует нейронные сети от LCZero.
Да, он использует сети от LCZero, при этом является полностью независимым движком, играющим примерно на 30 - 40 эло сильнее Лилы.
Что это значит и что из этого следует?

следующий Премьер будет выглядеть так :

   1 Stockfish         
   2 LCZero             
   3 KomodoDragon      
   4  AllieStein
   5 Stoofvlees          
   6 ScorpioNN  
   7 Ceres
   8 не имеет значение

А вот так будет выглядеть Суперфинал 21

LCZero - Ceres

Суперфинал без стокфиш

[StenR]

Цитата: Сообщение от Alex_Zet

Суперфинал без стокфиш

Ага , типа Россия без Путина, к нам едет Навальный..

[Maratka]

Я бы еще сильно подумал, будет ли он вообще выступать в TCEC'е как еще один двиг на базе идей AZ. Мне кажется, если он и зайдет, то вместо LZ, а не вместе с ним, ибо три движка, использующие одни и те же сети - это уже слишком, по хорошему, и второму уже тут не место, так что AS гнать из TCEC нужно: все что его автор сделал, так это испоганил оригинальный движок LZ, добившись тем самым якобы оригинальности, но потеряв на этом ~50 Elo.

[sergey1963]

Цитата: Сообщение от StenR

Ага , типа Россия без Путина, к нам едет Навальный..

Ржал полчаса...
Дежа вю... опять из Германии, опломбированный вагон, война (только на этот раз Донбасс, Сирия и пандемия), повальное воровство среди "царской верхушки", обнищание простого люда, "ничего неделание" начальничков всех уровней, полное равнодушие среднего класса, дикая инфляция... ну и в результате- октябрь... 2021...

[byan_mivv]

"... Вы пророк в своём отечестве ?"

[sergey1963]

А вы- молчун в своем Отечестве (кстати- с большой буквы)? Вам все равно, что делается и как воруется?

[byan_mivv]

Как хорошо Вы знаете своих форумчан?!
Смайлик " Сарказм"

[sergey1963]

Мне не за кем и незачем следить, в ЧК- не работаю. Если чел говорит по-теме и по-существу, здравые мысли (хоть и противоречащие моему мнению)- то поддерживаю... Зачем мне знать форумчан? К чему? Вы попробуйте для начала познать самого себя или своих близких... получается?

[Владимир001]

Остался последний круг -4 партии

Сток и Лилка будут играть черными:

	
ScorpioNN 3.0.11	-	Stockfish 20201225	

Stoofvlees II a16	-	LCZero v0.26.3_T60.66740

У обоих равные очки , но у Стока шансов больше взять первое место. так как соперник слабее соперника Лилки. Да и сам Сток сильнее .Будем посмотреть.

https://tcec-chess.com/liveold.html

[Alex_Zet]

Цитата: Сообщение от Владимир001

У обоих равные очки , но у Стока шансов больше взять первое место. так как соперник слабее соперника Лилки. Да и сам Сток сильнее .Будем посмотреть.

А в чем Сток сильнее? В 160 партии Лила обула его белыми, а черными удержала ничью. Ну чем не колхоз, годами дудящие в одну дуду.

Шансы в первую очередь зависят от доставшегося дебюта, и тут у Стока точно шансов меньше. Вы хоть разберитесь вначале в трех соснах.

[Alex_Zet]

[IMG][/IMG]

Весь прикол в том что даже имея на пол очка больше, Стокфиш все равно занимает лишь второе месте.
Скоро вообще перестану при распределении мест, учитывать набранные очки, будут оценивать по вкладу и количество красивых сыгранных партиях. На этот шаг устроители идут ради зрителей и зрелищности. И тут Стокфиш, заимствующий ной хау Лилы, будет вечно на вторых ролях.

[Владимир001]

Цитата: Сообщение от Alex_Zet

А в чем Сток сильнее?

А что до сих пор не знаете?
Стокфиш чемпион и восклицательный знак.

[Asunta]

[Alex_Zet]

Цитата: Сообщение от Владимир001

Стокфиш чемпион и восклицательный знак.

[IMG][/IMG]

Сила движков измеряется относительно - здесь и сейчас.
Чемпионом была устаревшая версия Стокфиш, неактуальна на сегодняшний день, поскольку с тех пор Лила прибавила очень значительно, чему все и убедились в 160 - ой партии. Какой же он чемпион и сильнейший?
По таблице мы видим что Стокфиш всего лишь второй.
Массовое помутнение сознания и галлюцинации, это самый сильный патч Стока.

[Maratka]

В этом сезоне в TCEC выступал некий Igel, занял в общем-то не самое плохое место, при определенной удаче мог бы выйти в высший дивизион и в нем и остаться.



Является NNUE движком, сеть в том же формате, что и у SF, потому возможно прямое сравнение силы сети, что и сделал:

Games Completed = 1000 of 1000 (Avg game length = 10.142 sec)
Settings = RR/32MB/3000ms+30ms/M 1000cp for 12 moves, D 150 moves/PGN:E:\Games\Chess\LittleBlitzer-2.74\2moves_v2.pgn(12525)
Time = 1975 sec elapsed, 0 sec remaining
 1.  Stockfish Igel net 150121	335.5/1000	122-451-427  	(L: m=285 t=0 i=0 a=166)	(D: r=249 i=97 f=34 s=8 a=39)	(tpm=66.5 d=13.90 nps=730926)
 2.  Stockfish own net  150121 	664.5/1000	451-122-427  	(L: m=64 t=1 i=0 a=57)	 (D: r=249 i=97 f=34 s=8 a=39)	(tpm=66.1 d=14.61 nps=751421)

[Alex_Zet]

NNUE

Развернуть для просмотра

Being tempted by the success of Stockfish NNUE and attracted by how easy the method and small the code is, many engine developers have started testing and applying NNUE. For quick trials and evaluating before going into serious development, some of them borrowed and/or rewrote NNUE code and use networks from Stockfish NNUE. Most of them reported positive results, such as David Carteau with Orion [9], Ehsan Rashid with DON [10], various Stockfish derivatives by Michael Byrne [11], and Volodymyr Shcherbyna with Igel [12] using the Night Nurse NNUE net by Dietrich Kappe [13]. Daniel Shawul added NNUE support à la CFish into his egbbdll probing library of Scorpio [14] [15], making it even easier to use NNUE. The promising engines Halogen 7 and 8 by Kieren Pearson, and Seer by Connor McMonigle came with their own, distinct NNUE implementations, and on November 10, 2020, the commercial Dragon by Komodo Chess aka Komodo NNUE appeared [16], trying to close the gap to Stockfish NNUE

Соблазненные успехом Stockfish NNUE и привлеченные тем, насколько простой метод и небольшой код, многие разработчики движков начали тестирование и применение NNUE . Для быстрых испытаний и оценки перед тем, как приступить к серьезной разработке, некоторые из них позаимствовали и / или переписали код NNUE и использовали сети из Stockfish NNUE. Большинство из них сообщили о положительных результатах, такие как Дэвид Карто с Орионом [9] , Эхсан Рашид с ДОН [10] , различные производные Stockfish от Майкла Бирна [11] и Владимир Щербина с Игелем [12] с использованиемНочная медсестра Сеть ННУЭ Дитриха Каппе [13] . Даниэль Шавул добавил поддержку NNUE а-ля CFish в свою библиотеку зондирования egbbdll Scorpio [14] [15] , что еще больше упростило использование NNUE. Перспективные двигатели Halogen 7 и 8 от Кирена Пирсона и Seer от Коннора МакМонигла поставлялись со своими собственными, отличными реализациями NNUE, а 10 ноября 2020 г. появился коммерческий Dragon от Komodo Chess, также известный как Komodo NNUE [16] , пытаясь закрыть разрыв до Stockfish ННУЭ.

[свернуть]

=============================================

Ethereal,

Развернуть для просмотра

an UCI compliant open source chess engine written by Andrew Grant in C, licensed under the GNU GPL and first officially released in June 2016 [2]. Ethereal is greatly influenced from Crafty, Stockfish, TSCP, MadChess, and Fruit [3]. On October 09, 2020, Andrew Grant announced his withdrawal from Ethereal's development with his final releases of Ethereal V12.75 [4] and Ethereal 12.75 SF-NNUE, the latter a NNUE implementation based on Stockfish NNUE, to deliberately demonstrate how everybody may considerably improve the playing strength of their engines without much effort [5] - causing the author's frustration.

Ethereal , шахматный движок с открытым исходным кодом, совместимый
с UCI, написанный Эндрю Грантом на языке C , лицензированный под GNU GPL и впервые официально выпущенный в июне 2016 года [2] . На Ethereal сильно повлияли Crafty , Stockfish , TSCP , MadChess и Fruit [3] . 9 октября 2020 года Эндрю Грант объявил о своем выходе из разработки Ethereal с его заключительными выпусками Ethereal V12.75 [4] и Ethereal 12.75 SF-NNUE , последний - NNUE. реализация, основанная на Stockfish NNUE , чтобы сознательно продемонстрировать, как каждый может значительно улучшить игровую силу своих движков без особых усилий [5], вызывая разочарование автора

[свернуть]

Igel,

Развернуть для просмотра

an UCI compliant open source chess engine by Volodymyr Shcherbyna licensed under the GPL, initially based on GreKo 2018.01 and following independent development since 2018. In August 2020, Igel switched to NNUE as a main evaluation function using Dietrich Kappe's Night Nurse net [2] [3] as default [4] participating in TCEC Season 19, League 2, and promoting to League 1. In October 2020 Igel switched to own network trained on Igel 2.6.0 (Hand Crafted Evaluation) participating in TCEC Cup7 and in TCEC Season 20.

Игель , UCI совместимый с открытым исходным кодом движок от Владимира Щербина под лицензией GPL , первоначально основанный на Greko 2018.01 и после самостоятельного развития , так как 2018. В августе 2020, Игель переключился на NNUE в качестве основной функции оценки с помощью Дитриха KAPPE в Night Nurse сети [2 ] [3] по умолчанию [4] участвует в TCEC Season 19, League 2 и продвигается в League 1 . В октябре 2020 года Игел перешел на собственную сеть, обученную на Игеле 2.6.0 (Hand Crafted Evaluation), участвуя в TCEC Cup7 и TCEC Сезон 20 .

[свернуть]

Nemorino 6.04_NNUE

Развернуть для просмотра

Nemorino 6 (NNUE)
Post by Florentino » Mon Sep 28, 2020 8:11 pm

I just released version 6 of Nemorino!
Main new feature is the support for NNUE networks, which improves Nemorino's playing strength a lot!

Nemorino comes with it's own network. The network format is slightly different than the original format from Stockfish as I removed the 64 "BONA_PIECE_ZERO" input parameters from the weights file and from the inference code (which is an adapted copy of the code from Stockfish). Nevertheless Nemorino can use the network files from Stockfish as well - it will simply create a converted copy on first use.

Additionally as it's more than 2 years since the last release, this version contains a lot of minor improvements and bugfixes.

Неморино 6 (ННУЭ)
После по Флорентино» Пн сен 28, 2020 20:11

Я только что выпустил Неморино 6-й версии!
Главной новой функцией является поддержка сетей NNUE, что значительно улучшает игровые возможности Nemorino!

Nemorino имеет собственную сеть. Сетевой формат немного отличается от исходного формата Stockfish, поскольку я удалил 64 входных параметра «BONA_PIECE_ZERO» из файла весов и из кода вывода (который является адаптированной копией кода из Stockfish). Тем не менее, Nemorino также может использовать сетевые файлы из Stockfish - он просто создаст преобразованную копию при первом использовании.

Кроме того, поскольку с момента последнего выпуска прошло более 2 лет, эта версия содержит множество мелких улучшений и исправлений.

[свернуть]

RubiChess

Развернуть для просмотра

RubiChess,
an UCI compliant open source chess engine by Andreas Matthies, written in C++, licensed under the GPL v3.0. RubiChess started in 2017 as 0x88 engine and soon evolved to a bitboard engine first using rotated bitboards and subsequently magic bitboards (about 24% faster) to determine sliding piece attacks [2]. In September 2020, Andreas Matthies announced RubiChess NNUE [3].

RubiChess , шахматный движок с открытым исходным кодом, совместимый
с UCI , написанный Андреасом Маттисом на C ++ , под лицензией GPL v3.0 . RubiChess началось в 2017 году , как 0x88 двигателя и вскоре превратился в bitboard двигателя сначала с помощью повернутого bitboards и затем магического bitboards (около 24% быстрее) , чтобы определить , скользящий элемент атаки [2] . В сентябре 2020 года Андреас Маттис объявил RubiChess NNUE [3] .

[свернуть]

Половина S20 - League 1 это NNUE!
То есть, АВ стадо пошло под нож, колхозы упраздняются. На дворе наступил век ИИ.
Новое быстро пускает корни, заполняя все вокруг, как вирус. Ладно бы только Первая Лига. Смотрим Вторую.

Pedone 3.0 , выпущенный в январе 2021 года, использует чистую оценку нейронной сети [8]

Winter 0.6.2 , функция оценки основана на нейронной сети с двумя основными частями. Первая часть представляет собой нестандартную сверточную нейронную сеть, которая использует разреженность аналогично NNUE .

Fat Fritz

MinicNNUE

Развернуть для просмотра

С появлением NNUE летом 2020, Вивьен Clauzon выпустила Минич 2,47 ака MinicNNUE с NNUE вяленой в сетевой архитектуре и вес файлов, что дает в прочности увеличение примерно на 200 ЭЛО по сравнению Минич со стандартной оценкой, но требование , что эта NNUE версия не должна заменить Миник в официальных рейтинговых списках [2] . Minic 2.50 включал обучающий код из репозитория Stockfish Nodchip , так что MinicNNUE могла создавать файлы весов самостоятельно [3] .

[свернуть]

Seer использует настраиваемую реализацию NNUE, основанную на 32-битных весах с плавающей запятой

Wasp

Развернуть для просмотра

В 2020 году Джон Стэнбэк играл с крошечными нейронными сетямичтобы узнать, как распространять ошибки в обратном направлении, используя оценку Wasp в качестве цели, а затем переписать функцию оценки Wasp с учетом быстрой настройки , что очень похоже на подход крошечной NN [5] .

[свернуть]

Оказывается и здесь больше половины это NN!

В общем, тот кто не перейдет в новую религию NN, место им даже на свалке не найдется. Стокфишевцы одни из первых это поняли. Ушлые ребята.

====================================

PS. Маратка, научитесь наконец уменьшать картинки до нормальных размеров.

[Владимир001]

Ну и хорошо, все идёт, все течёт, прогресс.
Хотя я уже говорил не раз и ещё раз скажу, на сайте с друзьями играю и с врагами , они играют классикой а я nnue. Сыграли не мало уже за это время. Одни ничьи, не видно разницы вообще. Но стоит поставить тест, как версия nnue рвёт на части классику.

[Alex_Zet]

Да. я уже давно заметил, что все сторонники АВ давно перешли под знамена NN

[Maratka]

Только вот заметьте, что под знамена сторонников подхода LZ как-то особо никто не стремится: прикрутить готовый код расчета сетевой оценки от SF'ша, который ему написали еще в июле прошлого года к любому a-b движку оказалось куда как проще, чем переписать их поиск под MCTS, расчет сети под видеоплату, и наиграть сотни миллионов партий для обучения сети на непонятно откуда взявшемся оборудовании.

Брать же готовые партии от LZ как бы уже и не очень хорошо, залететь есть риск, как обучать сеть - фиг его поймешь, это нужно отдельную тему курить, тогда как простые сети для SF и подобных движков учатся достаточно быстро, просто потому, что маленькие, т.е. несложно проверить несколько режимов, партии наигрываются и вовсе мгновенно, на моем старичке FX'е 10 млн. партий часа за четыре для профессионала, который может позволить себе Ryzen TR средненький такой, на 24-32 ядра- это пролетит вообще за 20 минут - пол-часа.
А между тем эти 10 млн партий все сообщество LZ с сотнями видеоплат наигрывать будет ~ недели, это чисто так для сравнения масштаба разницы скорости: 4 часа на одном устаревшем CPU, полчаса на современном, и много суток на сотнях ПК с сотнями видеоплат.

А миллиард партий, т.е. всего-то сотня циклов "игра > обучение" - это вполне себе приличного уровня сеть, которая уж точно лучше ручной оценки.

Выше я показывал, как играет сеть Igel против сети SF на одном и том же движке SF. А вот как она же играет против классИка:

Games Completed = 1000 of 1000 (Avg game length = 9.835 sec)
Settings = RR/32MB/3000ms+30ms/M 1000cp for 12 moves, D 150 moves/PGN:E:\Games\Chess\LittleBlitzer-2.74\2moves_v2.pgn(12525)
Time = 1826 sec elapsed, 0 sec remaining
 1.  Stockfish classic 310720 64 POPCNT	366.5/1000	190-457-353  	(L: m=238 t=0 i=0 a=219)	(D: r=214 i=90 f=33 s=6 a=10)	(tpm=69.2 d=14.89 nps=1075747)
 2.  Stockfish Igel net 150121		633.5/1000	457-190-353  	(L: m=136 t=0 i=0 a=54)		(D: r=214 i=90 f=33 s=6 a=10)	(tpm=69.0 d=14.75 nps=766158)

И по этой причине a-b движков, играющих в топе будет больше и больше, из MSCT, к тому же использующих видеоплаты только LZ да его клоны и останутся.

[Alex_Zet]

Чуть копнул и вот еще гроздь:

Marvin (GitHub) 01/2021 Open Source 5.0.0 NN Martin Danielsson

Slow Chess Blitz 01/2021 free 2.5 NN Jonathan Kreuzer

Toga (GitHub) ... (derived from Fruit 2.1) 01/2021 Open Source *4 III 0.2 NN Dietrich Kappe

Halogen (GitHub) 12/2020 Open Source *4 9 NN Kieren Pearson

Orion, Cerebrum (GitHub) 12/2020 free *4 0.8 NN David Carteau


Скоро правилом хорошего тона станет заиметь парочку NN

[Maratka]

О, и все они - a-b :D
Или какой-то там их них LZ-подобный, где оценка считается на видеоплате, а поиск реализован по алгоритму MCTS?

[Alex_Zet]

Цитата: Сообщение от Maratka

И по этой причине a-b движков, играющих в топе будет больше и больше, из MSCT, к тому же использующих видеоплаты только LZ да его клоны и останутся.

Нет больше никаких АВ. Если к АВ прикрутили NN, то это ГИБРИД.
За счет чего Сток NNUE громит Сток АВ? За счет NNUE которые дают огромный прирост силы игры. У Комодо это примерно 200 ЭЛО. Сам по себе АВ без NNUE это фантик. Говорить нужно именно о связке AB + NNUE = ГИБРИД

Нет , ну конечно можно талдычить о якобы том что Стокфиш все ещё АВ движок

[Владимир001]

Да какая разница АB или NN. ЭТО СТОКФИШ.