LCZero

[Intruder]

Да, наверное никого не удивлю, тут все прилично играют, со своими фишками. Но еще Васс (помните его базы?) писал - что двумя-тремя двигами. Искать компромисс между двумя двигами - это просто подразумевается. Если можно в разумное время считать.

И еще. Уже писал. Не нужно относиться с фанатизмом к каждым лишним Эло (хотя этот рейт считается, понятно, не как человеческий). Я еще поверю, что прибавка идет на 10000 партий с адванс-контрлем. Но нет, там в районе 1 минуты на ход. Ну да, там альфа-бета нифига не отрежет. Как тут знают БОЛЬШИНСТВО - и под ручками альфа-бета порежет. И надо ли с фанатизмом относиться к росту ЭЛО среди двигов? В умелых руках какая-то версия комодо/гудини все эти прибавки эло задвинет. Ну нет этого волшебного движка, который все решит, особенно белыми форсированно. А вот перемудрить можно и при минусовой оценке.

Кто хочет доказать - так и пишем - я, на таких-то ядрах все уже придумал за вас. Не, надо играть. Я в ничейную смерть не верю, но до Виктора далеко.

[Burcontovk]

Intruder, Ну а как же история? Многие ее быстро забывают. А программист Вызвезденец ее напоминал в своем интервью. Я имею ввиду Васика Райлиха и рыбку. Почему она дала скачок? Да все просто - постоянные тесты на укк. Да рыбка это ворованный код и т.д. но подход был революционным и это принесло плоды и в адвансе. Пока все не перешли на рыбку с ипполитоподобных движков.

[Viktor]

Цитата: Сообщение от Intruder

Виктор, я не догнал - что должно зависнуть? И на 4-х ядрах зависы системы были, знаю, но это если все потоки отдать, один нужен ОС, если других задач высоконагруженных нет в системе. Обычно ставил -1 поток. И по фен-шую, половину памяти в системе. Еще на кэш мег. Не увидел прекращения работы, разве что недобитая буржуйская ОС, криво исследованная, скажем так. ;)

Не путайте Стокфиш с Лилой. Они по-разному работают: Лила-то на видеокарте. Вот и попробуйте на 4-х ядернике запустить в IDeA 4 одноядерных движка. Пройдите пару-тройку минимаксов. А потом вернемся к разговору.

[Vizvezdenec]

Мы бы с удовольствием тестировали на контроле адванса, если бы это занимало сколько-нибудь адекватное время.
К сожалению это просто не так. Наиграть там сотню партий хотя бы - уже неплохо, а делать выводы по сотне партий физически невозможно, как эти партии не проводи.
К сожалению, подходы вроде "наиграй 1000 партий" или "реши 1000 позиций" работают просто никак, что уже не раз и не два доказано и доказывается и сейчас. По крайней мере все тестовые наборы каждая новая версия стока решает лучше предыдущей в среднем, если в них, конечно, на 20 позиций - вот там вариация может быть очень большая даже при очень близких по силе игры версиях.

[svoitsl]

Latest update: 2022/01/11: Lc0 0.28.2 611216 (30x384)

     Program                            Elo    +    -   Games   Score   Av.Op.  Draws

   1 Stockfish 13 bmi2                : 3723    3    3 24750    62.8 %   3629   53.0 %
   2 Lc0 0.28.0 610062 (30x384)       : 3667   18   18   750    42.1 %   3723   55.9 %
   3 Lc0 0.27.0 69722 (30x384)        : 3666   18   18   750    41.9 %   3723   55.3 %
   4 Lc0 0.28.0 610226 (30x384)       : 3663   18   18   750    41.5 %   3723   57.5 %
   5 Lc0 0.27.0 69722vf20 (30x384)    : 3662   18   18   750    41.4 %   3723   57.2 %
   6 Lc0 0.28.0 610176 (30x384)       : 3662   18   18   750    41.3 %   3723   55.5 %
   7 Lc0 0.27.0 69626 (30x384)        : 3661   18   18   750    41.3 %   3723   54.5 %
   8 Lc0 0.27.0 68695 (30x384)        : 3661   18   18   750    41.2 %   3723   56.8 %
   9 Lc0 0.28.2 610889 (30x384)       : 3660   18   18   750    41.1 %   3723   56.7 %
  10 Lc0 0.28.0 609973 (30x384)       : 3657   18   18   750    40.7 %   3723   56.3 %
  11 Lc0 0.28.0 610594 (30x384)       : 3656   18   18   750    40.6 %   3723   57.2 %
  12 Lc0 0.28.2 611216 (30x384)       : 3656   17   17   750    40.5 %   3723   55.2 %
  13 Lc0 0.28.0 610428 (30x384)       : 3656   18   18   750    40.5 %   3723   56.8 %
  14 Lc0 0.28.0 610035 (30x384)       : 3654   18   18   750    40.3 %   3723   52.3 %
  15 Lc0 0.28.0 mg1670k (40x512)      : 3651   17   17   750    39.9 %   3723   54.4 %
  16 Lc0 0.28.0 mg2000k (40x512)      : 3649   18   18   750    39.5 %   3723   54.3 %

Кажется прогресс какой то небольшой :-(

[svoitsl]

Это наверное самая лучшая сеть этого размера, рост составил 5 Эло за полтора года
Latest update: 2022/01/15: Lc0 0.28.2 T75_2400k (20x256)

     Program                            Elo    +    -   Games   Score   Av.Op.  Draws

   1 Stockfish 13 bmi2                : 3723    3    3 25500    62.9 %   3628   53.0 %
   2 Lc0 0.28.0 610062 (30x384)       : 3667   17   17   750    42.1 %   3723   55.9 %
   3 Lc0 0.27.0 69722 (30x384)        : 3666   18   18   750    41.9 %   3723   55.3 %
   4 Lc0 0.28.0 610226 (30x384)       : 3663   17   17   750    41.5 %   3723   57.5 %
   5 Lc0 0.27.0 69722vf20 (30x384)    : 3662   18   18   750    41.4 %   3723   57.2 %
   6 Lc0 0.28.0 610176 (30x384)       : 3662   18   18   750    41.3 %   3723   55.5 %
   7 Lc0 0.27.0 69626 (30x384)        : 3661   18   18   750    41.3 %   3723   54.5 %
   8 Lc0 0.27.0 68695 (30x384)        : 3661   18   18   750    41.2 %   3723   56.8 %
   9 Lc0 0.28.2 610889 (30x384)       : 3660   18   18   750    41.1 %   3723   56.7 %
  10 Lc0 0.28.0 609973 (30x384)       : 3657   18   18   750    40.7 %   3723   56.3 %
  11 Lc0 0.28.0 610594 (30x384)       : 3656   18   18   750    40.6 %   3723   57.2 %
  12 Lc0 0.28.2 611216 (30x384)       : 3656   18   18   750    40.5 %   3723   55.2 %
  13 Lc0 0.28.0 610428 (30x384)       : 3656   17   17   750    40.5 %   3723   56.8 %
  14 Lc0 0.28.0 610035 (30x384)       : 3654   18   18   750    40.3 %   3723   52.3 %
  15 Lc0 0.28.0 mg1670k (40x512)      : 3651   19   19   750    39.9 %   3723   54.4 %
  16 Lc0 0.28.0 mg2000k (40x512)      : 3649   19   19   750    39.5 %   3723   54.3 %
  17 Lc0 0.27.0 69146 (30x384)        : 3648   18   18   750    39.4 %   3723   54.0 %
  18 Lc0 0.27.0 69363 (30x384)        : 3648   18   18   750    39.4 %   3723   52.9 %
  19 Ceres 0.94 610062                : 3647   18   18   750    39.3 %   3723   54.8 %
  20 Ceres 0.93 69722                 : 3646   17   17   750    39.2 %   3723   53.1 %
  21 Lc0 0.27.0 J94-100 (30x384)      : 3646   18   18   750    39.1 %   3723   51.3 %
  22 Ceres 0.91b 69722                : 3646   18   18   750    39.1 %   3723   52.4 %
  23 Ceres 0.90rc1 69626              : 3645   18   18   750    39.0 %   3723   52.9 %
  24 Lc0 0.28.0 780023 (40x512)       : 3644   18   18   750    38.9 %   3723   55.6 %
  25 Lc0 0.28.0 754042 (15x192)       : 3622   18   18   750    36.0 %   3723   54.1 %
  26 Lc0 0.28.0 761187 (15x192)       : 3616   18   18   750    35.1 %   3723   54.0 %
  27 Lc0 0.28.2 771567 (15x192)       : 3605   18   18   750    33.7 %   3723   49.6 %
  28 Lc0 0.28.2 T75_2400k (20x256)    : 3602   19   19   750    33.4 %   3723   51.9 %
  29 Lc0 0.27.0 LS 15 (20x256)        : 3597   19   19   750    32.8 %   3723   50.4 %
  30 Lc0 0.28.2 771126 (15x192)       : 3593   18   18   750    32.2 %   3723   52.7 %
  31 Lc0 0.28.0 770578 (15x192)       : 3567   20   20   750    29.1 %   3723   49.7 %

[svoitsl]

Цитата: Сообщение от svoitsl

Latest update: 2022/01/11: Lc0 0.28.2 611216 (30x384)

Кажется, что точность несколько маловата, и хорошо бы увеличить число игр хотя бы до 2000.
А в целом, основной прогон T60 уже устаревает и наверное пора уже основным сделать сеть 40х512, там хоть есть перспективы.

[Hendry]

ну выжмут они еще скажем 40 эло через три года, а толку Сток, Комодо и прочие за это время сделают 100-150 эло. увеличение размерности это не выход. нужны новые идеи

[sdchess]

Еще раз о файлах с актуальных сетей!
Знатоки вслед за разработчиками Leela отмечают, что файл сети следует выбирать в зависимости от имеющегося железа и программного обеспечения и типа задач и приводят ряд ссылок (https://lczero.org/play/networks/bestnets/) , большинство из которых в свою очередь приводят вас целым морям сетей из которых крайне сложно сделать выбор по нескольким причинам не буду здесь подробно останавливаться на всех их них скажу лишь, что индексация файлов "с сетями" не вполне совпадает с приводимой в описании а их размер отличатся от крошечных до гигабайтных морей! Нельзя также сбрасывать со счетов и фактор свежести сети...
В общем блуждать можно долго, а правильный выбор сделать весьма трудно...
Теперь о моем случае. У меня встроенная графика Radeon Vega 8, на компе с Ryzen 7 5700G которая обеспечивает неплохие результаты leela с сетью, которая сопровождает версию движка для GPU, хочется большего особенно для анализа и игры с длинным контролем.
Был бы признателен за прямую ссылку.

[svoitsl]

Цитата: Сообщение от sdchess

хочется большего особенно для анализа и игры с длинным контролем.

ну просто очень не хочется вас разочаровывать....
Выбор упрощается, тем. что вам нужен длинный контроль, поэтому лучше берите сеть максимального размера, которая у вас будет работать.
если работает эта 610062 (30x384) то ее и берите
иначе придется довольствоваться малым
сетью 754042 (15x192)
https://www.sp-cc.de/nn-vs-sf-testing.htm
параметр NNCacheSize можно сделать побольше, например 20000000, или даже ещё больше (если памяти много)

[sdchess]

Спасибо, память есть - 32 гига!
Скажите, а какие значения могут быть чувствительны к качеству оценки?

[svoitsl]

Цитата: Сообщение от sdchess

Спасибо, память есть - 32 гига!

К сожалению не нашел, сколько может использовать вега, если всего 2Гб - то сеть придется взять 15х192
можно посмотреть настройки Лилы на турнире ССС

Цитата:

CPuct 1.473
CPuctBase 45669.0
CPuctFactor 3.973
FpuValue 0.279
MaxPrefetch 37
MinibatchSize 768
MoveOverheadMs 1000
NNCacheSize 20000000
PolicyTemperature 1.3
SmartPruningFactor 3.6141
SmartPruningMinimumBatches 300
StrictTiming true
Threads 2
TimeManager alphazero(alphazero-time-pct=23.0629)
UCI_ShowMovesLeft true
UCI_ShowWDL true

НО Это для блица 5'+5" хотя и довольно шустрого компа (относительно веги)

[svoitsl]

В турнире CCC 16 Blitz: Semifinals (5|5) играет сеть 610826 ещё от 06.12.2021 г
Последняя (не крайняя) 611246
Тренировка сетей Т60 остановлена 08.01.2022 г
Сейчас идет тренировка только сети T78
Интересно, какую сеть будут использовать на TCEC22?
Новая сеть T78 может быть ещё не готова, несмотря на то, что на нее идут сейчас все ресурсы, но их осталось совсем ничего :-( (наверное все перешли на майнинг)
Возможно появление сетей, натренированных на данных сетей T60+tb7

[Maratka]

Цитата: Сообщение от svoitsl

Интересно, какую сеть будут использовать на TCEC22?

Честно говоря, есть у меня сомнения, что это имеет значение.

Оно где-то как получается то? Ну пусть будет очень качественная сеть, которая даст резко добрых 50 Elo к лучшей на сегодня. Но потом то известно что будет: SF получит эти партии, обучит свою сеть, которая также резко станет лучше имеющейся на сегодня. А т.к. SF'шевский движок сам по себе лучше движка Лилы, то дельта особо не изменится, Лила так и будет проигрывать несколько десятков Elo.

Т.е. для адванса - ну да, это интересно. Но не для турнира движков.

[svoitsl]

Цитата: Сообщение от Maratka

Но потом то известно что будет: SF получит эти партии

То есть вы думаете, что формат сети Стокфиша ещё в не насыщении,и как только появятся более высокоуровневые итры, он сразу же станет сильнее?
А может ему потребуется увеличить размер сети? Тогда и скорость упадет....

[Maratka]

Цитата: Сообщение от svoitsl

То есть вы думаете, что формат сети Стокфиша ещё в не насыщении,

Цитата: Сообщение от svoitsl

А может ему потребуется увеличить размер сети?

Я думаю, что эти два термина между собой мало связаны
А потому, да, в этот формат возможно получится накидать и более точные коэффициенты. Равно как переход на другой формат не обязательно будет сопровождаться ростом размерности сети.

[Владимир001]

https://www.chess2u.com/t17914-lc0-with-a-b-helper

[svoitsl]

Такого рода движок с помощником уже года 2.5 назад был, помощник (по сути обычный ab движок на минимальной настройке) помогал отсечь очевидные ему зевки
(на глубине 8 ходов). Но потом то ли зевки стали глубже и их стало меньше (сеть то поумнела), то ли ещё почему то, но эксперимент с помощником решили закончить.

[svoitsl]

По сравнению в сетью 780023 рост составил целых 6 Эло
То есть за месяц, но половину месяца эта сеть не получала всех ресурсов
Таким образом , если к концу февраля будет тоже 6 Эло, марта +5, апреля +4, мая+3, то к июню можно набрать 18 Эло и достигнуть 3668 и превзойти самую сильную сеть T60
Latest update: 2022/01/24: Lc0 0.28.2 780706 (40x512)

     Program                            Elo    +    -   Games   Score   Av.Op.  Draws

   1 Stockfish 13 bmi2                : 3723    3    3 26250    62.8%   3629   53.0%
   2 Lc0 0.28.0 610062 (30x384)       : 3667   18   18   750    42.1%   3723   55.9%
   3 Lc0 0.27.0 69722 (30x384)        : 3666   17   17   750    41.9%   3723   55.3%
   4 Lc0 0.28.0 610226 (30x384)       : 3663   18   18   750    41.5%   3723   57.5%
   5 Lc0 0.27.0 69722vf20 (30x384)    : 3662   18   18   750    41.4%   3723   57.2%
   6 Lc0 0.28.0 610176 (30x384)       : 3662   18   18   750    41.3%   3723   55.5%
   7 Lc0 0.27.0 69626 (30x384)        : 3661   18   18   750    41.3%   3723   54.5%
   8 Lc0 0.27.0 68695 (30x384)        : 3661   18   18   750    41.2%   3723   56.8%
   9 Lc0 0.28.2 610889 (30x384)       : 3660   18   18   750    41.1%   3723   56.7%
  10 Lc0 0.28.0 609973 (30x384)       : 3657   18   18   750    40.7%   3723   56.3%
  11 Lc0 0.28.0 610594 (30x384)       : 3656   18   18   750    40.6%   3723   57.2%
  12 Lc0 0.28.0 610428 (30x384)       : 3656   18   18   750    40.5%   3723   56.8%
  13 Lc0 0.28.2 611216 (30x384)       : 3656   19   19   750    40.5%   3723   55.2%
  14 Lc0 0.28.0 610035 (30x384)       : 3654   18   18   750    40.3%   3723   52.3%
  15 Lc0 0.28.0 mg1670k (40x512)      : 3651   18   18   750    39.9%   3723   54.4%
  16 Lc0 0.28.2 780706 (40x512)       : 3650   17   17   750    39.7%   3723   54.1%
  17 Lc0 0.28.0 mg2000k (40x512)      : 3649   18   18   750    39.5%   3723   54.3%
  18 Lc0 0.27.0 69146 (30x384)        : 3648   18   18   750    39.4%   3723   54.0%
  19 Lc0 0.27.0 69363 (30x384)        : 3648   18   18   750    39.4%   3723   52.9%
  20 Ceres 0.94 610062                : 3647   18   18   750    39.3%   3723   54.8%
  21 Ceres 0.93 69722                 : 3646   18   18   750    39.2%   3723   53.1%
  22 Ceres 0.91b 69722                : 3646   18   18   750    39.1%   3723   52.4%
  23 Lc0 0.27.0 J94-100 (30x384)      : 3646   18   18   750    39.1%   3723   51.3%
  24 Ceres 0.90rc1 69626              : 3645   18   18   750    39.0%   3723   52.9%
  25 Lc0 0.28.0 780023 (40x512)       : 3644   18   18   750    38.9%   3723   55.6%

[svoitsl]

Лила использует вспомогательный двигатель
Снова обновилась стетейка

[svoitsl]

Цитата: Сообщение от svoitsl

В турнире CCC 16 Blitz: Semifinals (5|5) играет сеть 610826 ещё от 06.12.2021 г

Занятно, что в турнире CCC 16 Blitz: Challenger (5|5)
играет сеть уже 780977 ОТ 31.01.2022

с параметрами

Backend demux
BackendOptions backend=cuda-fp16,multi_stream=true,threads=2,(gpu=0),(gpu=1)
CPuct 1.9775
CPuctBase 45669.0
CPuctFactor 3.973
FpuValue 0.5512
MaxPrefetch 37
MinibatchSize 512
MoveOverheadMs 1000
NNCacheSize 20000000
PolicyTemperature 1.4816
Ponder false
SmartPruningFactor 2
SmartPruningMinimumBatches 300
StrictTiming true
SyzygyPath /data/tablebases
Threads 2
TimeManager legacy
UCI_ShowMovesLeft true
UCI_ShowWDL true
VerboseMoveStats true

[свернуть]

то есть надежда,что она как минимум не хуже T60, хотя интенсивное обучение началось совсем недавно, и такая большая сеть быстро не научится

[svoitsl]

Пока сеть топчется на месте
Latest update: 2022/02/01: Lc0 0.28.2 780856 (40x512)

     Program                            Elo    +    -   Games   Score   Av.Op.  Draws

   1 Stockfish 13 bmi2                : 3723    3    3 27000    62.8%   3630   53.1%
   2 Lc0 0.28.0 610062 (30x384)       : 3667   18   18   750    42.1%   3723   55.9%
   3 Lc0 0.27.0 69722 (30x384)        : 3666   18   18   750    41.9%   3723   55.3%
   4 Lc0 0.28.0 610226 (30x384)       : 3663   18   18   750    41.5%   3723   57.5%
   5 Lc0 0.27.0 69722vf20 (30x384)    : 3662   18   18   750    41.4%   3723   57.2%
   6 Lc0 0.28.0 610176 (30x384)       : 3662   18   18   750    41.3%   3723   55.5%
   7 Lc0 0.27.0 69626 (30x384)        : 3661   18   18   750    41.3%   3723   54.5%
   8 Lc0 0.27.0 68695 (30x384)        : 3661   17   17   750    41.2%   3723   56.8%
   9 Lc0 0.28.2 610889 (30x384)       : 3660   18   18   750    41.1%   3723   56.7%
  10 Lc0 0.28.0 609973 (30x384)       : 3657   18   18   750    40.7%   3723   56.3%
  11 Lc0 0.28.0 610594 (30x384)       : 3656   18   18   750    40.6%   3723   57.2%
  12 Lc0 0.28.2 611216 (30x384)       : 3656   17   17   750    40.5%   3723   55.2%
  13 Lc0 0.28.0 610428 (30x384)       : 3656   18   18   750    40.5%   3723   56.8%
  14 Lc0 0.28.0 610035 (30x384)       : 3654   19   19   750    40.3%   3723   52.3%
  15 Lc0 0.28.0 mg1670k (40x512)      : 3651   18   18   750    39.9%   3723   54.4%
  16 Lc0 0.28.2 780706 (40x512)       : 3650   18   18   750    39.7%   3723   54.1%
  17 Lc0 0.28.0 mg2000k (40x512)      : 3649   18   18   750    39.5%   3723   54.3%
  18 Lc0 0.28.2 780856 (40x512)       : 3648   18   18   750    39.4%   3723   55.1%

[Владимир001]

If someone is interested in comparing Lc0 against Lc0 +Helper :
config Lc0 0.29.0-dev + H :

Last version of Lc0 download at : https://ci.appveyor.com/project/hans-ekbrand/lc0
weights : weights_run1_610889.pb
backend=cudnn-fp16

AuxEngineFile=C:\Program Files (x86)\Arena\Engines\Stockfish\stockfish_22012908_x 64_bmi2.exe
AuxEngineInstances=3
AuxEngineMaxDepth=2
AuxEngineOptions=Threads=1;Hash=32;Ponder=off
AuxEngineOptionsonRoot=Threads=2;Hash=128;Ponder=o ff
AuxEngineThreshold=100
AuxEngineTime=300
AuxEngineVerbosity=3


System: Windows 10 Home 64 bit
CPU : 6-Cores ; 12-Threads ; Intel(R) Core(TM) i7-9750H @ 2.60GHz 15,9 GB
GPU : NVIDIA GeForce GTX 1660 Ti 6GB

Level tournament :* Blitz 3'+2"
Ponder off,* book off
Openings are from draws between TCEC superfinal seasons 20-21 (up to 8moves),
3-4-5-6 piece Syzygy* TB
each game repeated with colors reversed

[Vizvezdenec]

Да кто такой этот ваш Fat Fritz 3?

[svoitsl]

Цитата: Сообщение от Vizvezdenec

Да кто такой этот ваш Fat Fritz 3?

Ну уж какой есть, CB видимо теперь старается не афишировать своё авторство,и скорее всего он исчезнет, так уже сейчас его не суют в обновления.

[svoitsl]

кстати вышел новый cuda 11.6

[Viktor]

Обновлял видеодрайвера через Nvidia. Как-то раз у Лилы начались сбои и мне пришлось откатывать версию. А какое значение имеет Cuda? Есть ли смысл её устанавливать и удалять ли при этом видеодрайвер от Nvidia?

[Viktor]

Первоначальный видеоадаптер у меня был GeForce GTX 750 Ti (4ГБ). Лила при нем работала! Потом после обновления Nvidia, а может и обновления версии движок перестал запускаться. В то время я успел закупить более сильный GeForce RTX 2060 (тогда за 26 тыс.!).

Но мне интересно, в чем причина тогдашнего случая. И можно ли было запустить движок? Может надо было выбрать другую версию движка или что-то отметить в настройках? А может виновата новая версия видеодрайвера? И какую роль играет здесь Cuda?

[svoitsl]

Цитата: Сообщение от Viktor

Может надо было выбрать другую версию движка

Надо было попробовать с cudann
https://lczero.org/play/download/

Цитата: Сообщение от Viktor

В то время я успел закупить более сильный GeForce RTX 2060 (тогда за 26 тыс.!).

Это вовремя мы с вами подсуетились

[Maratka]

Цитата: Сообщение от Viktor

Обновлял видеодрайвера через Nvidia. Как-то раз у Лилы начались сбои и мне пришлось откатывать версию. А какое значение имеет Cuda? Есть ли смысл её устанавливать и удалять ли при этом видеодрайвер от Nvidia?

Не сломалось - не чини!