Лила (LCZero). Установка и вопросы по ней.

[SergeyMZ]

Удалось наконец-то установить Лилу!

Развернуть для просмотра

[свернуть]

Алгоритм запуска такой:

1. Здесь я скачал OpenCl версию:

Lila 0.20 OpenCl

Куда-версия у меня не пошла.

Видеокарта Nvidia Geforce 1070 Gigabyte.

2. Нейросетку я скачал эту:

Network

3. Запустил в оболочке CB15 как новый движок UCI.



Актуальная информация по установке

[Maratka]

Цитата: Сообщение от sovaz1997

Кевин, для Лилы 50 Эло - это "пшик", который решается очень быстро по сравнению с ab-движками

Да как бы не очень.
LZ набрал где-то столько за полгода. SF 17-18 ELO за два месяца.
Т.е не сказать, что темпы у LZ после выхода на уровень первой тройки сколь-нибудь отличаются от темпов SF.
С нуля и до 3000 он конечно "качается" мгновенно, но 3000 (т.е. уровень где-то Рыбки) сейчас мало кому интересен.

[Maratka]

Цитата: Сообщение от Falstaf

Да, именно эту.

Тогда нужно с позициями разбираться.
Сильные стороны LZ - грамотная стратегическая игра, но он не переваривает позиции с большой мобильностью фигур. Возможно после миллиарда-другого партий что-то и изменится, но миллиард ему не дают сыграть даже теоретически, прерывая обучение гораздо раньше, и запуская его с нуля с другими параметрами.

[sovaz1997]

Maratka, ждём 40X, пока выводы делать равно

[Maratka]

Цитата: Сообщение от sovaz1997

Maratka, ждём 40X, пока выводы делать равно

Я то не против подождать.
Просто помнится, как до этого ждали 30x, до нее 20x, а еще раньше пять раз перезапускали обучение 1x из-за тривиальных ошибок в написании шахматных правил.

При этом, в 40x вообще говоря никто ничего не обещает, это обычное тестовое обучение, не лучше и не хуже любого другого. Выгорит - и хорошо, нет - будем ждать 50x, 60x.... 100x
А SF имеющимися темпами стабильно даст +100 ELO в год.

Для LZ одна хорошая новость: все эти патчи дают львиную часть бонуса к тактике, практически ничего не добавляя к пониманию дебютов, и позиционной игре вообще, а по тактике SF и так на три головы выше, и проблем с реализацией соответствующих позиций не имеет.
Т.е через год +30 ELO для LZ в реальной дуэли могут оказаться более жирными, чем +100 у SF.

[Кевин]

Народ, а вообще видюшки не перегреваются от использования Лилы на постоянке? У меня без кулера видеокарта, например.

[Vizvezdenec]

Цитата: Сообщение от Кевин

Народ, а вообще видюшки не перегреваются от использования Лилы на постоянке? У меня без кулера видеокарта, например.

Для видеокарты без кулера, наверное, вообще нету смысла Лилу и запускать.

[Кевин]

Цитата: Сообщение от Vizvezdenec

Для видеокарты без кулера, наверное, вообще нету смысла Лилу и запускать.

Упс Я малость попутал: думал одно, написал другое. Это у другой видюшки на старом компе нет радиатора. У моей, конечно, кулер есть. Если б не было - без должного охлаждения, разумеется, после запуска тяжёлой нагрузки ГП можно сразу и спалить видюшку.

Тем не менее вопрос с нагревом актуален. У кого как по датчикам?

[Rom77]

Цитата: Сообщение от Кевин

Тем не менее вопрос с нагревом актуален. У кого как по датчикам?

У 1050Ti чаще срабатывает ограничение по мощности, чем по нагреву. Младшие модели 10-й серии вообще достаточно холодные. Так что ничего вы не спалите на стандартной видеокарте.

Моя GTX 1050 без проблем бустится до 1700 МГц и вентилятору ещё далеко до предельных оборотов. GPU-Z показывает срабатывание ограничения по мощности (Pwr):

[Rom77]

Если кому интересно измерить скорость, просто запустите Лилу из консоли (то есть запустите файл lc0.exe из папки с программой) и наберите:
go movetime 120000

Через пару минут получите результат. У меня Лила набрала 1931 nps для сети 32910:

[svoitsl]

Цитата: Сообщение от Rom77

Если кому интересно измерить скорость

Вроде теперь уже есть встроенный бенчмарк, вот только как пользоваться я пока не понял

[Rom77]

Цитата: Сообщение от svoitsl

Вроде теперь уже есть встроенный бенчмарк, вот только как пользоваться я пока не понял

Я просто решил народ не парить. Но в принципе бенчмарк запустить не трудно:

- создайте в папке с программой текстовый файл;
- скопируйте туда следующий текст:

lc0.exe benchmark

pause

- измените расширение текстового файла на .bat
- запустите его

Мой результат:

Цитата:

Benchmark final time 7.55539s calculating 1534.53 nodes per second.

[svoitsl]

Цитата: Сообщение от Rom77

Я просто решил народ не парить.

тут важно обеспечить единство измерений, что б можно было бы сравнить потом.
Вот на моей карточке GT730 получилось:
Benchmark final time 7.69698s calculating 81.7204 nodes per second.

[Rom77]

Цитата: Сообщение от svoitsl

Benchmark final time 7.69698s calculating 81.7204 nodes per second.

Это CUDA-версия? 81 nps маловато для такой видеокарты. Может быть видеопамяти не хватает?

[svoitsl]

Цитата: Сообщение от Rom77

Это CUDA-версия? 81 nps маловато для такой видеокарты. Может быть видеопамяти не хватает?

пишет что CUDA, драйвер один из новейших, а скоростишка паршивенькая, это верно

GT730

o:\chess\cutechess-cli\LC020.2_40463>lc0.exe benchmark
_
| _ | |
|_ |_ |_| v0.20.2 built Feb 1 2019
Found pb network file: ./ad8a0f8eb2266363e3df58ab79d0145dd4ed5b39c8aa1d2b824f6da
f7af33789.gz
Creating backend [cudnn]...
GPU: GeForce GT 730
GPU memory: 1 Gb
GPU clock frequency: 901.5 MHz
GPU compute capability: 3.5
CUDA Runtime version: 10.0.0
Cudnn version: 7.3.1
Latest version of CUDA supported by the driver: 10.0.0
Benchmark time 373ms, 2 nodes, 5 nps, move e2e4
Benchmark time 555ms, 5 nodes, 9 nps, move e2e4
Benchmark time 746ms, 9 nodes, 12 nps, move e2e4
Benchmark time 932ms, 15 nodes, 16 nps, move e2e4
Benchmark time 1041ms, 24 nodes, 23 nps, move e2e4
Benchmark time 1406ms, 35 nodes, 24 nps, move e2e4
Benchmark time 1777ms, 51 nodes, 28 nps, move e2e4
Benchmark time 1962ms, 55 nodes, 28 nps, move e2e4
Benchmark time 2071ms, 63 nodes, 30 nps, move e2e4
Benchmark time 2442ms, 84 nodes, 34 nps, move e2e4
Benchmark time 2809ms, 101 nodes, 35 nps, move e2e4
Benchmark time 3176ms, 127 nodes, 39 nps, move e2e4
Benchmark time 3544ms, 157 nodes, 44 nps, move e2e4
Benchmark time 3915ms, 200 nodes, 51 nps, move e2e4
Benchmark time 4285ms, 229 nodes, 53 nps, move e2e4
Benchmark time 4654ms, 274 nodes, 58 nps, move e2e4
Benchmark time 5026ms, 317 nodes, 63 nps, move e2e4
Benchmark time 5409ms, 360 nodes, 66 nps, move e2e4
Benchmark time 5780ms, 394 nodes, 68 nps, move e2e4
Benchmark time 6149ms, 424 nodes, 68 nps, move e2e4
Benchmark time 6772ms, 517 nodes, 76 nps, move e2e4
Benchmark time 7142ms, 564 nodes, 78 nps, move e2e4
Benchmark time 7340ms, 602 nodes, 82 nps, move e2e4
bestmove e2e4
Benchmark final time 7.69698s calculating 81.7204 nodes per second.

o:\chess\cutechess-cli\LC020.2_40463>pause
Для продолжения нажмите любую клавишу . . .

[свернуть]

[Rom77]

Цитата: Сообщение от svoitsl

пишет что CUDA, драйвер один из новейших, а скоростишка паршивенькая, это верно

Сеть 40 немного медленнее, чем сеть 30, но результата это не объясняет, да.

GTX 1050

c:\Program Files (x86)\cutechess\Engine\lc0-v0.20.2-windows-cuda>lc0.exe benchmark
_
| _ | |
|_ |_ |_| v0.20.2 built Feb 1 2019
Found pb network file: ./40463-17f49ad2e17d621cdd0c8d2dcc0a9be3406a6a796b67933657d7a5b4e4f1937c
Creating backend [cudnn]...
GPU: GeForce GTX 1050
GPU memory: 2 Gb
GPU clock frequency: 1468 MHz
GPU compute capability: 6.1
CUDA Runtime version: 10.0.0
Cudnn version: 7.3.1
Latest version of CUDA supported by the driver: 10.0.0
Benchmark time 79ms, 2 nodes, 25 nps, move e2e4
Benchmark time 116ms, 3 nodes, 25 nps, move e2e4
Benchmark time 155ms, 5 nodes, 32 nps, move e2e4
Benchmark time 194ms, 7 nodes, 36 nps, move e2e4
Benchmark time 231ms, 12 nodes, 51 nps, move e2e4
Benchmark time 261ms, 20 nodes, 76 nps, move e2e4
Benchmark time 331ms, 32 nodes, 96 nps, move e2e4
Benchmark time 397ms, 45 nodes, 113 nps, move e2e4
Benchmark time 463ms, 66 nodes, 142 nps, move e2e4
Benchmark time 528ms, 91 nodes, 172 nps, move e2e4
Benchmark time 592ms, 124 nodes, 209 nps, move e2e4
Benchmark time 655ms, 160 nodes, 244 nps, move e2e4
Benchmark time 718ms, 197 nodes, 274 nps, move e2e4
Benchmark time 781ms, 243 nodes, 311 nps, move e2e4
Benchmark time 844ms, 302 nodes, 357 nps, move e2e4
Benchmark time 908ms, 363 nodes, 399 nps, move e2e4
Benchmark time 968ms, 406 nodes, 419 nps, move e2e4
Benchmark time 987ms, 427 nodes, 432 nps, move e2e4
Benchmark time 1067ms, 505 nodes, 473 nps, move e2e4
Benchmark time 1147ms, 589 nodes, 513 nps, move e2e4
Benchmark time 1244ms, 683 nodes, 549 nps, move e2e4
Benchmark time 1372ms, 799 nodes, 582 nps, move e2e4
Benchmark time 1488ms, 911 nodes, 612 nps, move e2e4
Benchmark time 1851ms, 1271 nodes, 686 nps, move e2e4
Benchmark time 1934ms, 1344 nodes, 694 nps, move e2e4
Benchmark time 2236ms, 1681 nodes, 751 nps, move e2e4
Benchmark time 2315ms, 1773 nodes, 765 nps, move e2e4
Benchmark time 2456ms, 1939 nodes, 789 nps, move e2e4
Benchmark time 2760ms, 2308 nodes, 836 nps, move e2e4
Benchmark time 2972ms, 2588 nodes, 870 nps, move e2e4
Benchmark time 3082ms, 2720 nodes, 882 nps, move e2e4
Benchmark time 3746ms, 3500 nodes, 934 nps, move e2e4
Benchmark time 5084ms, 5279 nodes, 1038 nps, move e2e4
Benchmark time 6046ms, 6619 nodes, 1094 nps, move e2e4
Benchmark time 6100ms, 6640 nodes, 1088 nps, move e2e4
bestmove e2e4
Benchmark final time 6.29874s calculating 1101.01 nodes per second.

c:\Program Files (x86)\cutechess\Engine\lc0-v0.20.2-windows-cuda>pause
Для продолжения нажмите любую клавишу . . .

[свернуть]

[Maratka]

Цитата: Сообщение от svoitsl

пишет что CUDA, драйвер один из новейших, а скоростишка паршивенькая, это верно

Ну так это самый дешевый Kepler! Скажем в миддле на момент выхода архитектуры (это был GTX 660) 960 процессоров против ваших 384, и шина 192 бита против вашей 64.
К тому же гиг памяти, для сетей 20*256 этого явно мало (скрин чуть выше у Rom77), значит идет подкачка сети с ОЗУ, и идет медленно (т.к. шина подключения x8, к тому же версии 2.0).

И это при том, что Kepler'ы сами по себе тут не шустрят (мой GTX 960, при 1024 процессоров, т.е. столько же, как и у 660, быстрее раза в два).

[Maratka]

Цитата: Сообщение от svoitsl

пишет что CUDA, драйвер один из новейших, а скоростишка паршивенькая, это верно

Сделайте скриншот GPU-Z на вкладке "Датчики" в то время, когда LZ что-то считает (например пусть бутет бенчмарк), сеть та, что играет в TCEC
Саму утилиту тоже обновите по возможности.
https://www.techpowerup.com/download/techpowerup-gpu-z/

[svoitsl]

Цитата: Сообщение от Maratka

Ну так это самый дешевый Kepler!

Покупал уже довольно давно, именно как не дорогую, но с сетью 10х128 (id36090)
все же цифра побольше
Benchmark final time 6.9225s calculating 925.678 nodes per second.

Но все равно в 3 раза меньше, чем GTX1060 3G (id33000)
Benchmark final time 6.63837s calculating 2925.11 nodes per second.

[Maratka]

Ну собственно что и хотел увидеть.
Bus interface Load не нулевой, да и даже не околонулевой.
Т.е. при расчетах идет постоянный обмен данными из сети между системной памятью и видеопамятью (попросту говоря, часть данных постоянно недоступна для GPU)
При этом, Memory Controller Load всего 37% (ибо данных часто в видеопамяти нет, а значит и контроллер простаивает, ждет, покуда подкачаются).

Цитата: Сообщение от svoitsl

но с сетью 10х128 (id36090)
все же цифра побольше
Benchmark final time 6.9225s calculating 925.678 nodes per second.

Для этой сети хватит (возможно впритык) и 512 мегабайт видеопамяти.

Т.е. основная проблема Вашей платы даже не в том, что чип медленный (а он очень медленный), а в том, что памяти мало.

[svoitsl]

Цитата: Сообщение от Maratka

Для этой сети хватит (возможно впритык) и 512 мегабайт видеопамяти.

Судя по вашим объяснениям не хватит

[Maratka]

Ну значит вот так... :(
Значит два гигабайта - это минимум для LZ.

[svoitsl]

Цитата: Сообщение от Maratka

Значит два гигабайта - это минимум для LZ.

С другой стороны же мы не знаем как там внутри проги все устроено, может и хеш они в GPU держат, по умолчанию он 1Гб, но а его можно и ужать немного
Хотя конечно тоже любопытно,что использование памяти для небольшой сети (10х128) и большой (20х256) не сильно то и отличается, 920 и 1007 Мб соответственно

[Rom77]

У меня сеть 40х256 требует 1289 MB видеопамяти. Но она увеличенный аналог сети 30. Аналог SE-сети (сеть 40), потребует скорее всего на 100 MB больше. Так что "640 КБ 3 ГБ видеопамяти хватит всем"

GTX 1050

c:\Program Files (x86)\cutechess\Engine\lc0-v0.20.2-windows-cuda>lc0.exe benchmark
_
| _ | |
|_ |_ |_| v0.20.2 built Feb 1 2019
Found pb network file: ./net69.pb.gz
Creating backend [cudnn]...
GPU: GeForce GTX 1050
GPU memory: 2 Gb
GPU clock frequency: 1468 MHz
GPU compute capability: 6.1
CUDA Runtime version: 10.0.0
Cudnn version: 7.3.1
Latest version of CUDA supported by the driver: 10.0.0
Benchmark time 133ms, 2 nodes, 15 nps, move g1f3
Benchmark time 194ms, 4 nodes, 20 nps, move d2d4
Benchmark time 255ms, 7 nodes, 27 nps, move g1f3
Benchmark time 376ms, 17 nodes, 45 nps, move g1f3
Benchmark time 436ms, 27 nodes, 61 nps, move d2d4
Benchmark time 494ms, 37 nodes, 74 nps, move g1f3
Benchmark time 552ms, 54 nodes, 97 nps, move d2d4
Benchmark time 611ms, 62 nodes, 101 nps, move d2d4
Benchmark time 669ms, 86 nodes, 128 nps, move d2d4
Benchmark time 727ms, 106 nodes, 145 nps, move d2d4
Benchmark time 844ms, 146 nodes, 172 nps, move d2d4
Benchmark time 959ms, 184 nodes, 191 nps, move d2d4
Benchmark time 1017ms, 203 nodes, 199 nps, move d2d4
Benchmark time 1133ms, 250 nodes, 220 nps, move d2d4
Benchmark time 1249ms, 304 nodes, 243 nps, move d2d4
Benchmark time 1364ms, 383 nodes, 280 nps, move d2d4
Benchmark time 1481ms, 452 nodes, 305 nps, move d2d4
Benchmark time 1571ms, 513 nodes, 326 nps, move d2d4
Benchmark time 1721ms, 583 nodes, 338 nps, move d2d4
Benchmark time 1878ms, 679 nodes, 361 nps, move d2d4
Benchmark time 2030ms, 784 nodes, 386 nps, move d2d4
Benchmark time 2180ms, 895 nodes, 410 nps, move d2d4
Benchmark time 2331ms, 1019 nodes, 437 nps, move d2d4
Benchmark time 2561ms, 1180 nodes, 460 nps, move d2d4
Benchmark time 2752ms, 1323 nodes, 480 nps, move d2d4
Benchmark time 2940ms, 1418 nodes, 482 nps, move d2d4
Benchmark time 2942ms, 1455 nodes, 494 nps, move d2d4
Benchmark time 3128ms, 1599 nodes, 511 nps, move d2d4
Benchmark time 3320ms, 1749 nodes, 526 nps, move d2d4
Benchmark time 3512ms, 1892 nodes, 538 nps, move d2d4
Benchmark time 3785ms, 2118 nodes, 559 nps, move d2d4
Benchmark time 4067ms, 2387 nodes, 586 nps, move d2d4
Benchmark time 4304ms, 2593 nodes, 602 nps, move d2d4
Benchmark time 4549ms, 2788 nodes, 612 nps, move d2d4
Benchmark time 4958ms, 3153 nodes, 635 nps, move d2d4
Benchmark time 5196ms, 3360 nodes, 646 nps, move d2d4
Benchmark time 5477ms, 3604 nodes, 658 nps, move d2d4
Benchmark time 6107ms, 4268 nodes, 698 nps, move d2d4
Benchmark time 6927ms, 4990 nodes, 720 nps, move d2d4
Benchmark time 8659ms, 6660 nodes, 769 nps, move d2d4
Benchmark time 9055ms, 7098 nodes, 783 nps, move d2d4
bestmove d2d4
Benchmark final time 9.40675s calculating 784.011 nodes per second.

[свернуть]

[Maratka]

Оно еще и от позиции может зависеть.
По идее, чем проще -тем меньше потребление памяти.

____
Лучше конечно у Crem'а спросить.

[svoitsl]

Цитата: Сообщение от Rom77

Аналог SE-сети (сеть 40), потребует скорее всего на 100 MB больше

не знаю как у вас, но у меня она показывает целых 1942 Мб (id 40710)
А вот id 33000 уже 1918 Мб (прошлую цифру в 1007 следует признать не достоверной, так как на GT730 просто больше нет места)

[Rom77]

Цитата: Сообщение от svoitsl

А вот id 33000 уже 1918 Мб

Вы наверное две сети запустили
Я уже выкладывал скриншот для сети 30 - 1098 Мб

[svoitsl]

Цитата: Сообщение от Rom77

Вы наверное две сети запустили

А ведь вы пожалуй правы..... всего 1007 Мб при id33000
и 1031 Мб при id 40719

[Кевин]

Поставил Лиле позицию из своей партии, участвовавшей в конкурсе на лучшую партию РАЗШ-25 (вариант 1. e4 e5 2. Nf3 Nc6 3. Bc4 Nf6 4. Ng5 d5 5. exd5 Na5 6. Bb5+ c6 7. dxc6 bxc6
8. Qf3 *. Здесь я жертвовал качество путём 8...cxb5! и играл на победу).

r1bqkb1r/p4ppp/2p2n2/nB2p1N1/8/5Q2/PPPP1PPP/RNB1K2R b KQkq - 0 8

И что думаете? Она нашла мой ход. Почти сразу же. Причём верно указала после 9. Qxa8 сильнейшее Be7!. И вот тут я Лилу зауважал. Программа как минимум заслуживает внимания. Поднимать, играючи, такие идеи на раз-два - это потрясающе.

[Viktor]

Так Стокфиш тоже признает это сильнейшим!

[xaoc]

Фриц 4 - тоже признает это сильнейшим!!