LCZero

[svoitsl]

Эндщпиль раз на раз не приходится, но в целом она его играет все же хуже чем надо.

По тесту видно что id310 набрала 2919 Эло и почти приблизилась по силе к самой сильной прошлой сети id245 (2924 Эло). Есть надежда,что при следующей проверке она этот уровень превысит и тем самым завершит своё восстановление вернувшись у рейтингу за 4 мая, то есть 2 недели назад.
Рост рейтинга id310 по сравнению с предыдущей протестированной сетью id305 составил 2919-2885 = 34 Эло
Посмотрим как долго продлится такая тенденция.
Рейтинг id313 при игре с самой же оказался ниже уровня сети id310 и это самое большое падение за весь период восстановления

[svoitsl]

ну что ж... результат сравнительного теста со Стокфишами наконец то появился
Рейтинг сети id312 составил 2960 Эло, что ровно 46 Эло больше чем рейтинг сети id307(2914 Эло)
До Стокфиша 3 осталось 112 Эло, и есть надежда, что к понедельнику (или вторнику) этот уровень Лилой тоже будет достигнут.
И вполне возможно, что на следующей неделе начнется вытеснение плотных рядов движков 2-3 уровней, с рейтингами 3000-3200, и даже Fritz16 может быть потеснен к концу мая! Что возможно даже при среднесуточном росте рейтинга в 30 Эло.

[sovaz1997]

Очень хочется, чтобы в следующем TCEC 13 LCZero прошла путь от низшего дивизиона к высшему и заняла 1-е место. Осталось всего лишь 400-500 пунктов ЭЛО, а до следующего TCEC ещё достаточно далеко. Вполне возможно, что к началу следующего сезона LCZero превзойдет 3200, а значит пройдет по-крайней мере до 2-го дивизиона. А там уже будет 3300 для 1-го и Премьер-дивизиона. Ну а дальше посмотрим)

[Maratka]

Покуда LZ не научится решать позиции со скрытым шахом, никаких серьезных подвижек в игре против реальных соперников не будет:

Цитата: Сообщение от svoitsl

3K4/4r1p1/3n1bP1/7P/8/8/2k3Q1/8 b - - 0 1

И это только вершина айсберга, IMHO.
Тут на форуме очень много раз описывали, как LZ проигрывает партии одним ходом, ведя по ходу партии +3, а значит есть очень много позиций, в которых LZ супротив "счетных" движков находится на уровне плинтуса.

[svoitsl]

Цитата: Сообщение от sovaz1997

Осталось всего лишь 400-500 пунктов ЭЛО

На это обычным движкам и их разработчиками потребовалось не мало не много а 20 лет!

Цитата: Сообщение от Maratka

никаких серьезных подвижек в игре против реальных соперников не будет:

Все таки на разных турнирах обычно и контроль побольше и техника получше, поэтому даже та сеть что есть сейчас успешно решит за вполне адекватное время.
Если будет перебор хотя бы 5 knps, то за 6 сек ход будет найдет

Опасность в том, что дойдя до 3200-3250 сеть снова затормозится и потребуется снова увеличивать сеть с известными негативными последствиями (снижение наигрывания партий до 100000 в сутки, больший трафик, если не оптимизируют размер файла сети, временный спад рейтинга...)
Скорость обучения может упасть с 30-40 Эло в сутки до такого же числа в месяц!

[Maratka]

Цитата: Сообщение от svoitsl

Если будет перебор хотя бы 5 knps, то за 6 сек ход будет найдет

У меня он не находится и за двадцать минут. Хотя видеоплата мощнее Вашей, да и процессор не медленнее.
Т.е. таки имеем какую-то багу, из-за которой у Вас ход находится, а у меня - нет.

Цитата: Сообщение от svoitsl

Скорость обучения может упасть с 30-40 Эло в сутки до такого же числа в месяц!

Это шикарный результат, который и не снится ни одному "классическому" движку.
Лучшее что есть (SF) текущими темпами даст под сотню за год, а то что прогнозируется Вы - это 400-500 Elo за год.

[Maratka]

Цитата: Сообщение от Maratka

Т.е. таки имеем какую-то багу, из-за которой у Вас ход находится, а у меня - нет.

Кстати, разработчики что-то брезгуют этим форумом. Ну это их добрая воля: не хотят чтобы ошибки находили за них, хотят находить сами - да ради Бога!

[Maratka]

Цитата: Сообщение от svoitsl

На это обычным движкам и их разработчиками потребовалось не мало не много а 20 лет!

Гораздо меньше, если бы текущее (современное) железо было бы у них сразу.

Все то же самое применительно кстати и к LZ: если бы этот проект стартанул не сейчас, а пять лет назад - то сейчас было бы наиграно хорошо если 3-4 млн. партий, что +\- соответствует реальном рейтингу ~2200 Elo.
Аналогично - вперед, в будущее: через три-пять лет можно будет наиграть текущие ~15 млн. партий за три недели, а не три месяца.

[svoitsl]

Цитата: Сообщение от Maratka

Хотя видеоплата мощнее Вашей, да и процессор не медленнее.

Вы наверное используете стандартную GPU версию, а cudnn от crem на Nvidea палатах все же дает значительное преимущество.
К тому же Ваш проц может и помощьнее, но не факт что у него есть всякие новшества типа bmi2
И конечно факт остается фактом , что старая сеть и прога находит нужный ход гораздо быстрее.
А общий уровень игры только сравнялся, а вовсе ещё не превысил старого, к тому же сеть содержит кучу ошибок.

[Maratka]

Цитата: Сообщение от svoitsl

Вы наверное используете стандартную GPU версию, а cudnn от cream на Nvidea палатах все же дает значительное преимущество.

На сколько оно значительное? В тридцать раз?
Прошу пардону, но не верю! Реальная разница там раза в полтора-два от силы, что с легкостью компенсируется гораздо бОльшей вычислительной мощностью моей платы.

Цитата: Сообщение от svoitsl

К тому же Ваш проц может и помощьнее, но не факт что у него есть всякие новшества типа bmi2

Факт что их нет. ;)
Но версия BMI2 (ну или попросту - AVX2) - дает прирост хорошо если вдвое.
А это значит, что если у меня ход не находится за 20 минут, то у Вас движок должен ее искать минимум 10 минут.
А за сколько времени он ее реально находит - я к сожалению не знаю, потому спрошу: за сколько?
Отдельно CPU-версия, отдельно CUDA, отдельно - OpenCL.

Сможете проверить? (естественно с перезапуском оболочки после каждого теста).

Цитата: Сообщение от svoitsl

А общий уровень игры только сравнялся, а вовсе ещё не превысил старого, к тому же сеть содержит кучу ошибок.

Это никак не объясняет, что у меня нужный ход не находится, а у Вас - находится. Поведение движков с одной и той же сетью должно быть практически одинаковом, с поправкой на скорость железа, и соответственно - глубину поиска.

[svoitsl]

Цитата: Сообщение от Maratka

за сколько?

Я уже тут пытался кое какие цифры привести
Возможно сейчас cudnn версия чуть по шустрее стала, не 385 а наверное порядка 500-550 nps, но к сожалению раньше понедельника (вечера) ответить на эти вопросы не смогу

[Maratka]

Ну мне не горит... ;)

[Maratka]

Цитата: Сообщение от svoitsl

Возможно сейчас cudnn версия чуть по шустрее стала

Кстати, где ее взять?

[Rom77]

Цитата: Сообщение от Maratka

Все то же самое применительно кстати и к LZ: если бы этот проект стартанул не сейчас, а пять лет назад - то сейчас было бы наиграно хорошо если 3-4 млн. партий, что +\- соответствует реальном рейтингу ~2200 Elo.

Пять лет назад даже термина такого как "блок" не знали. Тогдашние сети просто тупо не протренировать до приличного уровня, хоть сколько партий наигрывай.

Цитата: Сообщение от Maratka

На сколько оно значительное? В тридцать раз?
Прошу пардону, но не верю! Реальная разница там раза в полтора-два от силы, что с легкостью компенсируется гораздо бОльшей вычислительной мощностью моей платы.

Больше. Сравните скорость у одинаковых пользователей.

Суть выигрыша lc0 в скорости в чём? Хорошую видеокарту оценкой одной позиции не загрузить. Но с другой стороны, пока мы не получим оценку, мы не сможем расширить дерево перебора и дать новое задание видеокарте. Так играет Лила 10. В lc0 видеокарте дают в довесок ещё сотню-другую более-менее перспективных позиций, чтобы она не простаивала. Их оценки затем хранят в кэше процессора, и если возникнет нужда, то эти оценки не надо заново вычислять.

Цитата: Сообщение от Maratka

Кстати, где ее взять?

Наверное здесь. По-видимому потребуется регистрация на сайте Nvidia.
Не спрашивайте подробности - у меня Radeon.

[Maratka]

Цитата: Сообщение от Rom77

В lc0 видеокарте дают в довесок ещё сотню-другую более-менее перспективных позиций, чтобы она не простаивала. И

У меея OpenCL-версия нагружает ведеоплату на ~90+ % всего двумя процессоными потоками при обучении, и ~95% - тремя потока при игре.
Недогрузки нет...

Цитата: Сообщение от Rom77

Наверное здесь. По-видимому потребуется регистрация на сайте Nvidia

Тогда пошли они.... в лес!

[Maratka]

Цитата: Сообщение от Rom77

Хорошую видеокарту оценкой одной позиции не загрузить. Но с другой стороны, пока мы не получим оценку, мы не сможем расширить дерево перебора и дать новое задание видеокарте. Так играет Лила 10. В lc0 видеокарте дают в довесок ещё сотню-другую более-менее перспективных позиций, чтобы она не простаивала.

Есть не очень то давнее исследование, которое показывает ровно обратное:
Загрузить работой видеплату на базе чипа nVidia (даже поколения Паскаль) несложно, тогда как альтернативная архитектура от AMD - проявляет себя с точности до наоборот: дать ей полную нагрузку непросто, но если ее таки дать - то Radeon опережает GF, причем (если смотреть разницу в математике супротив FPS в играх)- то ОЧЕНЬ заметно, раза в полтора.

https://3dnews.ru/968792

[Rom77]

Тем не менее, факт тот что объединение позиций в пакет (батч) позволяет сильно сэкономить.

[Maratka]

Цитата: Сообщение от Rom77

Тем не менее факт тот, что объединение позиций в пакет позволяет сильно сэкономить.

А нет и не может быть спора, что запатентованный API, вылезанный под вполне конректую железную его реализацию может дать прирост супротив открытого и универсального API. Но разница в производительности более чем на порядок все же скорее погрешность, чем правило: грубую вычислительную дуру AMD, которая ВЕСЬМА НЕПЛОХА, обойти за счет оптимизированного под ядра nVidia API на два порядка - это из области фантастики, и если таковое и имеет место быть - то лишь за счет "нейтрального" OpenCL кода, без заточек под архитектуру GCN.

_______
Иными словами: CUDA версия LZ может считать быстрее. Но не потому, что она "CUDA", а потому, что вылизыванием OpenCL версии никто не занимается.

[Maratka]

Кстати, CUDA-версия будет работать на GPU поколения DX 10(1)?

[svoitsl]

Цитата: Сообщение от Rom77

По-видимому потребуется регистрация на сайте Nvidia.

я так делал , но может это и лишнее, так как нужные библиотеки возможно можно скачать тут

Цитата: Сообщение от Maratka

что вылизыванием OpenCL версии никто не занимается.

да, разработчики пишут что весьма трудное и мало известное занятие, и решили это оставить не будущее, возможно не определённое

[svoitsl]

Maratka вы уже можете готовить своего Шредера
Уровень Лилы скоро превысит 5800 попугайных Эло!

[Maratka]

Уже превысил.
Так что если модераторы на заблокируют меня - результат будет через двое суток.

_______
А то понимаете ли они блокируют сообщения вроде вот этого:
http://forchess.ru/showpost.php?p=68450&postcount=310

на основании того, что тест, закрытый вопросиками в оригинале был также замаскированным термином, но замаскированным менее сильно. И этот термин характеризовал особь женского пола, занимающейся частыми половыми связями без материальной выгоды.

Т.е. если теперешняя формулировка прокатит, то результаты будут через пару суток. А если не прокатит - то их никогда не будет, ибо согласно правилам форума меня нужно будет забанить.

[Maratka]

Ну что... Запустил вчера вечером.
В общем пока что LZ меня радует, идет +/- вровень с DeepShreder 10

[svoitsl]

А на сколько игр планируется турнир и с каким контролем?

При играх со стокфишами у Лилы кажется началась очередная растренировка, сеть id317 набрала всего 2928 Эло, что ровно на 33 Эло меньше чем последняя до неё протестированная сеть id312 (2961 Эло). Конечно возможно что это не упадок рейтинга, а просто его торможение, что при значительной погрешности его вычисления может давать понижение оценки

Тем более что при игре с другими движками у сети id 315 пока есть рост, она набрала 2915 Эло (предыдущая id 310 набрала 2890), то есть рост 25 Эло
Кстати сейчас тестируется версия c cuda9.2, и с неизвестной сетью - посмотрим на результат.

[Maratka]

50 партий 10+15
LZ на CPU

[Maratka]

В общем, поспешил я LZ похвалить.
Сыплется он, как карточный домик...

[svoitsl]

Ну ещё не вечер, к тому же сама себя она обучает с успехом, и уже до почти 5839 Эло (id320) себя доучила.
осталось только объективные данные собрать....

[svoitsl]

как тут протестовали
cuda92 версия имеет значительное преимущество, в целых 3000-2893=107 Эло на той же сети id315
обойдя заодно и сразу
Scorpio 2.8, Zappa Mexico II, Komodo 1.0
GPU у них GTX 980ti

[Maratka]

Похоже это все же дрова...
Та же ошибка от партии к партии:

[Event "103 DS_10 vs LZ 0.10_ID317, Rapid 10m+1"]
[Site "?"]
[Date "2018.05.20"]
[Round "25.1"]
[White "lczero v0.10"]
[Black "Deep Shredder 10 UCI"]
[Result "0-1"]
[ECO "B12"]
[Annotator "0.38;0.48"]
[PlyCount "72"]
[EventDate "2018.05.20"]
[EventType "tourn"]
[SourceTitle "Fritz Engine Tournament"]
[TimeControl "600+15"]

{AMD FX(tm)-8350 Eight-Core Processor 4013 MHz W=18.8 plies; 0kN/s;
PlayChess.ctg B=17.6 plies; 4*759kN/s; PlayChess.ctg} 1. e4 {B 0} c6 {B 0} 2.
d4 {B 0} d5 {B 0} 3. e5 {B 0} Bf5 {B 0} 4. Nf3 {B 0} e6 {B 0} 5. Be2 {B 0} Nd7
{B 0} 6. O-O {0.38/18 22} Ne7 {0.48/17 79} 7. Nh4 {0.34/19 29} Bg6 {0.35/17 47
(Be4)} 8. c3 {0.51/19 25 (Nc3)} Nf5 {0.32/18 35 (c5)} 9. Nxf5 {0.52/19 26} Bxf5
{0.38/18 17} 10. f4 {0.60/19 18 (Nd2)} h5 {0.17/19 54 (f6)} 11. Bd3 {0.77/19
27 (Be3)} g6 {-0.01/19 39 (Bxd3)} 12. Bxf5 {0.74/19 27 (Be2)} gxf5 {-0.63/16 4}
13. Nd2 {0.74/19 24 (Qb3)} h4 {-0.37/19 61 (c5)} 14. Nf3 {0.81/19 31 (Qe2)} h3
{-0.24/19 59 (c5)} 15. g3 {1.21/18 21} c5 {-0.18/18 40} 16. Be3 {1.14/19 27}
Qc7 {0.15/17 48 (cxd4)} 17. Kf2 {1.08/19 33 (a4)} c4 {0.11/17 58 (Be7)} 18. a4
{1.44/19 30 (Ng5)} a5 {-0.16/17 50} 19. Ng5 {1.33/19 33 (b3)} Qc6 {-0.22/17 33
(Be7)} 20. Re1 {1.22/19 38 (Qe2)} Nb6 {-0.24/17 36 (Be7)} 21. g4 {1.13/19 35
(Bc1)} fxg4 {-0.60/16 12} 22. Qxg4 {0.59/19 28 (Rg1)} Qd7 {-0.82/15 5 (Nxa4)}
23. f5 {0.43/19 28 (Nxh3)} exf5 {-1.36/15 4} 24. Qf3 {0.37/19 23 (Qe2)} O-O-O {
-1.07/17 42} 25. Kg1 {0.02/20 41} Re8 {-0.84/17 38 (Nxa4)} 26. Nxh3 {0.74/19 35
} Bh6 {-0.57/17 59 (Be7)} 27. Bxh6 {1.14/18 24} Rxh6 {-0.53/18 20} 28. Nf4 {
1.28/19 15} Rg8+ {-0.29/17 31 (f6)} 29. Kh1 {1.13/18 20} Kb8 {-0.05/17 44
(Rgh8)} 30. Re2 {1.38/19 38 (Reb1)} Rg4 {0.00/16 11} 31. Rf2 {1.16/19 22 (Rg2)}
Qd8 {0.08/16 34} 32. Ne2 {1.20/19 28} Qc8 {0.28/16 30 (Qh8)} 33. Qxf5 {2.84/18
24 (Rg1)} Rxh2+ {-15.90/20 28 (Rg7)} 34. Rxh2 {-18.89/18 30} Qxf5 {-15.90/21 7}
35. Rg1 {-17.31/18 15} Qe4+ {-16.24/20 24 (Qf3+)} 36. Rgg2 {-16.64/18 22} Nxa4
{-16.23/20 19} 0-1

[Rom77]

Здесь предлагают оптимальные настройки Лилы для игры. Далее в теме есть результаты и кое-какое обсуждение возможных позитивных и негативных сторон таких настроек.