LCZero

[alchemist888]

Цитата: Сообщение от Vizvezdenec

Последнюю сеть из 42ххх берите, эта уже идёт за номером 60ххх.
А вообще сети первые Лилы я мог достаточно долго обыгрывать (хоть по идее я и на где-то сотни 2-3 эло посильнее Маратки, но против движков это не особо важно), потом ещё достаточно долго мог найти в них дыры, где она играет один и тот же плохой вариант на мою последовательность ходов и я могу её дожать.
Ну а потом это стало бесполезно

LCZero движок не для ленивых, налажать много где можно Представляю лица переписочников, при попытке улучшить свои анализы ранними сетями 60xxx

[Corrs]

Vizvezdenec, не думал, что ты страдаешь этой фигнёй с последовательностью ходов

[Vizvezdenec]

Цитата: Сообщение от Corrs

Vizvezdenec, не думал, что ты страдаешь этой фигнёй с последовательностью ходов

Ну мне было чуть-чуть интересно, я сначала играл просто как придётся - побеждал, потом уже играл нормальные дебюты, потом уже пришлось играть какие-то варианты, которые мне не казались плохими, но Лила там рисовала себе перевес, кое-какие из них и правда были неплохи Ну когда она даже на 50 узлах за ход перевалила за 2000 эло, я это бросил - мне там ловить нечего уже

[Corrs]

Цитата: Сообщение от Vizvezdenec

мне там ловить нечего уже

Но соблазн же был

[crem]

Цитата: Сообщение от svoitsl

даже если сеть и 1.8 раза больше (320*24*24/256/20/20), это не оправдывает замедление обучения в 18 раз !!!

Количество вычислений растёт пропорционально количеству фильтров, а не блоков (должно быть 320*320*24/256/256/20).

[svoitsl]

Эло немного снизилось

Цитата: Сообщение от crem

пропорционально количеству фильтров

тогда получатся чуть больше в 1.875 раза

Кстати, как я заметил, сейчас обучение теста 60 идет по примерно 8 тыс игр (а не 32000 для 40 теста), возможно это только в начале так, а потом это число будет расти.
И неизвестна также цель обучения теста 56, на него идет наверное 90% всех игр.

[svoitsl]

за сутки удалось обучить тест60 примерно 100 тыс игр.
А если надо будет 100 млн,то сколько это займет времени?

[svoitsl]

Рейтинг меняется в районе 18 Эло

[Maratka]

Цитата: Сообщение от svoitsl

А если надо будет 100 млн,то сколько это займет времени?

У Вас кулькулятор сломался?

[sovaz1997]

Цитата: Сообщение от Maratka

У Вас кулькулятор сломался?

По калькулятору 1000. Хотя никто не обещает, что в какой-то момент кто-то не подключить несколько тысяч GPU по приколу к проекту
Да и если популярность проекта будет расти, то уже будет не 1000, а 300 дней, например. А для уровня T40 - так вообще 150))

[Maratka]

Цитата: Сообщение от sovaz1997

Хотя никто не обещает, что в какой-то момент кто-то не подключить несколько тысяч GPU по приколу к проекту

А не пофиг ли оно, ибо считается в среднем за сутки/неделю/месяц?
Любой часовой пик даже в 2-3 раза над типичным уровнем даст не более 10-20% за сутки в среднем, т.е. вообще говоря - погрешность.

[Vizvezdenec]

Ну GPU подключать дороже.
Причём дороже любой способ - свои GPU будут дороже в базовой цене раз в 5 (чем, например, одна машина noobpwnftw) и будут дороже в амортизации примерно во столько же раз (электричество они жрут дай боже, да и греются очень сильно, одна RTX это же 250 Ватт, что больше, чем вообще любой вменяемый процессор, вплоть до 32-ядерных всяких).
И аренда серверов с GPU тоже сильно дороже сейчас облачных, чем "чистые" CPU.
С другой стороны, у Лилы есть тут один неоспоримый перевес - прирост строго линеен в зависимости от количества железа, у АВ движков это не так (закиньте на фиштест ещё 15000 ядер - мы просто физически не сможем их занять даже написанием полного бреда).

[svoitsl]

Согласно подсчетом Jon Mike на 1 узле Лила с сетью 42850 играет

Цитата:

42850 - новый чемпион по политике (как для NN, так и впервые также для двигателей A / B), более того, достигший этого со значительным отрывом
Приблизительное эло главы политики 42850 составляет от 2500 до 2600 ...

То есть получатся что уровень международного гроссмейстера,как минимум,а может и чемпионка мира среди женщин (если допустить что это Лила )
К сожалению более точно определить автор поленился, сказав, что для него и так сойдет

[svoitsl]

Если сравнить всем известную сеть jhorthos 610 и какую нибудь из последних обычных , то 610 окажется заметно быстрее (на RTX2060 fp16 у неё 20.5 knps, у обычной 16.5 knps), примерно на четверть, из-за чего бы это могло быть?

[svoitsl]

Немного выросла, но вот дойдет ли до 19 (или хотя бы до 18.5) Эло???


И ещё раз,- главное не упустить момент

Pawel SalsaDura

Цитата:

Эта новая сеть T60 просто веселая. Я только что закончил одну игру против него, и настоящий Elo 684 почти прав. Забавно видеть эту сеть совершенно беспомощной против слабого человеческого противника. Так что, если вы хотите надрать задницу будущему чемпиону, самое время это сделать. Позже это будет только сложнее и сложнее. И вы всегда можете сохранить игру в меню и показать ее внуку через 20 лет, сказав: «Послушайте, сын мой, когда я был маленьким, я надрал задницу лучшему двигателю в истории шахмат!

[Кевин]

v0.21.4 вышла.

Цитата:

Two small changes in this release.

A fix for crashes that can occur during use of sticky-endgames
Change the false positive value reported when in wdl style resign and display average nodes per move as part of tournament stats in selfplay mode.

https://github.com/LeelaChessZero/lc0/releases

[svoitsl]

можно посмотреть турнирчик, пока идет

Цитата:

Leela Chess Zero 42845 vs. Stockfish 260719
Marathon Match
Hardware 2950x, RTX 2080 ti Stockfish 32 Thread, 2 GB HT
Leela Chess Zero 4 threads, 9900000 NN CS.
6 man Tablebase 8 move opening book TC= Game in 4m +4s Ponder = off

[Омегазеро]

Закончился турнир на 400 партий с двухходовой книгой Noomen на 200 дебютов (белыми и черными)

Leela Chess Zero 42850 против. Stockfish 260719

Хэш Стокфиша 256, Лилы 2000000, прочие установки по дефолту

Отношение скоростей 8600/4 (четырехядерник i3-9350KF против GTX1650)
Контроль 20/2 с включенным пондером (то есть фактически движки думают 40/4)

Результат +63 -78 =259

Различие Эло -13 (+-20)

При этом с сетями 426** было +13, то есть явное падение

[svoitsl]

Цитата: Сообщение от Омегазеро

то есть явное падение

все таки "явным" я бы не стал его называть, что бы оно таким было,надо чтобы различие Эло хотя бы превышало сумму ошибок его определения,то есть надо что бы 26>40, а это не так.

по тесту все есть тенденция к росту

[Омегазеро]

Цитата: Сообщение от svoitsl

бы 26>40

Откуда такие цифры? Ведь тестировалось несколько сетей, а не одна, и это уменьшает ошибку

Партии прилагаются

[svoitsl]

Цитата: Сообщение от Омегазеро

Откуда такие цифры?

так из вашего сообщения,откуда ж еще то...
13-(-13)=26
20+20=40
Что бы было "явно" надо чтобы первое было больше второго, а это пока не так

[Омегазеро]

Цитата: Сообщение от svoitsl

так из вашего сообщения,откуда ж еще то...

Давайте внимательно изучим игры

После 25 партий Лила проигрывает со счетом - 4:5
После 50 партий - 6:11
После 75 партий - 8:17
После 100 партий - 17:20

Хотя на 25-100 партиях ошибка очень велика, мы ее здесь не видим. Стокфиш захватывает лидерство и ведет до самого конца с отрывом, который меняется не сильно

А теперь напомню предыдущий тест

После 50 партий Лила выигрывает со счетом 10:7
После 100 партий - 15:9
После 200 партий - 31:22
После 300 партий - 46:35

Теоретически ошибка большая, практически Лила захватывает лидерство и ведет с отрывом, которые меняется не сильно

Более того, в этих колебаниях заметно влияние выбора дебютов - когда начинаются редкие дебюты, Лила играет заметно хуже

А где же влияние вашей случайности? Где скачки на 30-40 Эло из-за "теоретической ошибки"?

[sovaz1997]

Чтобы увидеть теоретическую ошибку, надо запустить огромное количество таких турниров, убрать из них 5% самых дальних результатов. И оставшиеся 95% как раз будут примерно показывать приросты от -x до +x

[Омегазеро]

Ошибка наших гуру в том, что они почти детерминированную игру движков считают случайным процессом и анализируют с позиций математической статистики

Это ошибка особенно очевидна, если, например, Стокфиш играет сам с собой. Теоретически на 50 партиях ошибка очень большая, но это не значит, что одна и та же версия сыграет с собой с разрывом в 40 Эло на 50 партиях

Я специально проверяла - счет равный или отличается на один пункт

Надо учитывать, что игра движков детерминирована, случайность играет минимальную роль.

[sovaz1997]

Омегазеро, тогда результаты в любом случае могут быть другими на другой дебютной книге.

[Омегазеро]

Цитата: Сообщение от sovaz1997

Омегазеро, тогда результаты в любом случае могут быть другими на другой дебютной книге.

Конечно!
Я же выкладывала цитату с форума стокфишевцев
На разных дебютных книгах тест одной и той же версии Стокфиша на 40 тысяч партий выдает результаты, отличающиеся на 10-12 Эло, что гораздо больше ошибки

[Maratka]

Цитата: Сообщение от Омегазеро

Это ошибка особенно очевидна, если, например, Стокфиш играет сам с собой. Теоретически на 50 партиях ошибка очень большая, но это не значит, что одна и та же версия сыграет с собой с разрывом в 40 Эло на 50 партиях

А вот люди, которые запускают тесты на FishTest'е утверждают ровно обратное. Да и я неоднократно видел, как по итогам 50 партий один движок выигрывает у другого где-то +12 -2 =36, что составляет целых 70 ELO разницы.

[Vizvezdenec]

Т.е. Вы запускаете тест на 400 партий, выбираете лучшие из них, потом говорите, что у последней результат хуже, поэтому она хуже?
Ну что я тут могу сказать... "Явное падение". Вы пытаетесь сравнить новейшую сеть с теми, которым повезло попасть в лучшие 2-3%, конечно, она будет хуже с вероятностью процентов 95, т.к. реальная разница там единицы эло. Но я по крайней мере не удивляюсь, откуда у Вас взялось 50+ эло разницы на железе TCEC - Вы смотрите на лучшие 2-3% результатов, т.е. прибавляете к реальному эло фактически увеличенную ошибку измерения. Ну так да, и 50 можно сделать.
А, ну по поводу "одной и той же версии".
Я видел, когда кто-то делал бонус за вскрытый шах (по-моему) в оценке. Есть одна проблема - оценка НЕ ВЫЗЫВАЕТСЯ физически, когда на доске шах.
Что не помешало тесту показывать +10 эло перформанса на 5000 партий. Что сильно за теми самыми 95%, хотя тест не делает вообще ничего.
А уж что там может быть на 50 партиях... У меня был тест в +120 эло на таком количестве партий, надо ли говорить, что на 10к партиях был 0?
А, ну ещё у меня недавно был тест, который после 10к игр был +5 эло, после 40к игр был +2 и ему вот чуть-чуть не хватало, чтобы пройти... И за ещё 10к игр LLR из 2.7 рухнул в -2.95. Вот вам и "посмотрите на динамику".
Нет никакой динамики в вероятностно не связанных событиях.

[Омегазеро]

Цитата: Сообщение от Vizvezdenec

Т.е. Вы запускаете тест на 400 партий, выбираете лучшие из них

Вы откуда взяли такую глупость?

[Vizvezdenec]

Потому что Вы с ними сравниваете.
Уже 2 или 3 раз я вижу, что "вот новейшая сеть не дотягивает *какое-то там эло* до лучшей, поэтому она хуже".
Лучшая сеть - ВСЕГДА та, которой в тесте повезло. Поэтому в сравнении с ней у Вас всегда будет хуже, только если реальный прирост эло не превысил погрешность.