LCZero

[svoitsl]

а вот если почитать

Цитата:

Every new LCZero version plays 100 games each against:
1) lowest rated Stockfish engine not previously beaten by LCZero and
2) Stockfish engine one level above or below (depends on the first match result)

То получится, что игры проходят только с 1.01 и 3

[svoitsl]

Надо было просто немного подождать и рейтинг стремительно (+30) пошел вверх,при игре с собой, и превысил уровень id 241 от 3 мая, и каких то 2 млн новых игр (0.8rc1) ничему особенному сеть не научили.

Заценим?
v0.9rc1

Цитата:

This is a Release Candidate! If severe bugs are found you will need to download an update!

#546 NNCache full history
More accurate results (important for low playouts i.e. self-play games).
NPS for match games will be lower due to this, but more steady.
#536 Disable tree reuse in training
More accurate application of Dirichlet noise to help discover new moves, for very small performance hit
NPS for client self-play will be much higher, but wall clock time to play a game slightly longer.
#529, #526 Fix resign code
#521 Fix --playouts
#518 increment tbhits on root probes
#516 faster loading of weights
#512 rename visits to nodes (--visits is deprecated, use --nodes or go nodes N) instead

lczero_v0.9_avx2_mkl.zip is the Intel MKL release, you must download the dlls from Intel: https://software.intel.com/en-us/mkl

[Maratka]

Цитата: Сообщение от svoitsl

То получится, что игры проходят только с 1.01 и 3

Так версия "3" и есть выше, на добрых ~600 ELo

Обратите внимание на разницу у SF8 между 1 и 4 ядрами.
У третьей версии прирост от четырех ядер не думаю что сильно меньше, во всяком случае как мне представляется, по порядку величины рассчитывать на сотню Elo вполне можно.

___________
Другое дело, что SF3 искусственно обрезали до одного ядра, а LZ наоборот - запустили в благоприятных условиях, на GPU, а не CPU, потому и кажется, что разница в "всего" в 200 Elo.
По моим же тестам, LZ буквально неделю назад не тянул не то что на конкурента SF3, а и на Deep Shredder 8, который этому самому SF3 проигрывает практически вчистую (оба движка работают на CPU).

[Maratka]

Цитата: Сообщение от svoitsl

и каких то 2 млн новых игр (0.8rc1) ничему особенному сеть не научили.

Отсутствие результата - тоже результат. ;)

Теперь в сети ошибочные ходы, вызванные неверными вводными условиями (правилами игры) уже не имеют сколь-нибудь значимого перевеса над правильными ходами, а значит реальный уровень сети может идти вверх.

[svoitsl]

Цитата: Сообщение от Maratka

Так версия "3" и есть выше, на добрых ~600 ELo

но они то считают что всего то на 3074-2855 (для id228, да -да , не играет,а рейтинг ростет!!! )=219 (если калькулятор нам мне врет)

Цитата: Сообщение от Maratka

Другое дело

Они хотели как то сопоставить движки и выбрали тот Стокфишь что на 1 ядре,это же позволяет рассчитать рейтинг Лилы?

Кстати новая id263 демонстрирует впечатляющий рост, целых 2833 (настоящих Эло), а у id260 было всего 2802
то есть рост на 31 настоящих Эло (и на 14 деффектных)
Почти достигла id235 (2835)

Цитата: Сообщение от Maratka

Теперь в сети ошибочные ходы,... не имеют сколь-нибудь значимого перевеса

да ещё и новая версия вышла, может кое что ещё исправили и добавили....
кстати, что то mkl версия не пашет.....
Это у всех так?

[Maratka]

Цитата: Сообщение от svoitsl

но они то считают что всего то на 3074-2855

Так считать можно очень по разному.

Мои тесты с Ruffian (который работает строго в один поток) показывают рост.
Если бы Ruffian умел в много потоков (да, я знаю, что это из темы "если бы у бабушки был бы.... то она была бы дедушкой), но тем не менее: любой классический движок имеет некий теоретический предел, после которого его Elo не растет вне зависимости от мощности железа. Т.е. это чистый упор в оценочную функцию - раз, и функцию отсечения малоперспективных веток. Так вот, далеко не факт, что Ruffian уперся в предел собственно шахматных алгоритмов, а не в предел недостаточной мощности.
Собственно говоря, проверить это я могу очень легко: запущу LZ vs Ruffian строго по потоку каждому. Хотите?


____________
Что LZ, что SF на данных свои этапах развития в этот предел пока что не уперлись, однако таки сравнивать SF (пусть и старый) на одном потоке с LZ, использующего по мере надобности до 1280 ядер CUDA все же не очень правомерно: вполне может оказаться, что LZ линейно масштабируется ну скажем до 2580 ядер (GTX 1080), тогда как SF даже древней третьей версии может вытянуть допустим 8 ядер, из чего следует прирост скорости в два и восемь раз соответственно.

_______
собственно потому я тестирую все движки на CPU, а запуск LZ на GPU - это бонус в скорости, но не в мозгах, который имеет четкий предел. А вот новые сети пока что никто не знает, во что упрутся, и вполне реальна ситуация, когда LZ на хорошем CPU уже даст бой классическим топовым движкам.

_______
Ну или в двух словах: работу LZ на GPU предлагаю рассматривать как работу на неком сопроцессоре, недоступном другим движкам.

[Maratka]

crem, скажите пожалуйста, вы проводите тесты прогресса обучения сети не только против предыдущих версий сети, но и против классических движков?

Если да - какой реальный Elo LZ на их фоне (отдельно по CPU-версии, и отдельно - по GPU)?

[Maratka]

И еще один вопрос:
http://forchess.ru/showpost.php?p=67584&postcount=531

По этой позиции Вам вопрос уже должны были задавать, но ответа я пока что не видел.

Есть что сказать?
(интересует 19.Qd5, почему и зачем он сделан?).

[svoitsl]

Цитата: Сообщение от Maratka

и вполне реальна ситуация, когда LZ на хорошем CPU уже даст бой классическим топовым движкам.

думаю, что эта ситуация все же мало реальна
даже если использовать только целочисленную арифметику,слишком разные требования предъявляют разные алгоритмы движков к железу.
так уж получилось, что на GPU стали лучше стали идти матричные алгоритмы,так как GPU стали адаптировать под обработку изображений (точнее они для этого и нужны).
Кстати если вам нравятся CPU то попробуйте вариант mkl,а то что то он у меня не пошел пока, чистый CPU и никаких GPU

Crem тут может и не бывает, а ответ он все же дал

Развернуть для просмотра

Цитата:

В отличие от первой партии тут не одноходовый зевок, а надо посчитать (и ферзь висит, и ладья после отхода короля, и вообще не понятно без счёта кто в плюсе). Поэтому тут не получается просто сказать какую из позиций она оценивает неправильно.

Я постараюсь на неделе на том форуме написать пост о том, как смотреть внутренние счётчики поиска Монте-Карло и что они обозначают. Тогда все смогут посмотреть что не так, для любой позиции.

Только нужна будет версия для cuDNN ( https://crem.xyz/lc0/ ), а она работает только с видеокартами NVidia и для неё надо установить CUDA v9.0 и cuDNN (а для cuDNN надо зарегистрироваться на сайте NVidia). Но зато она быстрее ( сравнить с openCl версией можно тут https://docs.google.com/spreadsheet...P7Vul4DpRNfn6K8oeCjBILe6uA/edit#gid=857482380 ), и со временем станет основной, со своими свежими багами.
OpenCL версия тоже показывает счётчики, но не все.

[свернуть]

Эту версию я поставил конечно, но вот где чего и как смотреть пока не понял

[svoitsl]

удалась запустить mkl версию, рост около 1.5 - 2 раза

[Maratka]

Цитата: Сообщение от svoitsl

Crem тут может и не бывает

Не бывал бы - я бы у него не спрашивал.

[Maratka]

Цитата: Сообщение от svoitsl

думаю, что эта ситуация все же мало реальна

Не нужно думать. Вполне достаточно подсчитать, сколько nps дает в процессе обучения (там это очень удобно смотреть) Ваш процессор в один поток, и сколько - Ваша видеоплата на всех своих ядрах.
Далее, отмасштабировать CPU-производительность по количеству ядер/потоков ну скажем к относительно бюджетному Ryzen TR 1950x, и сравнить.

[svoitsl]

скачайте и положите рядом с новой avx2/mkl LCO
должен быть рост в 1.5-2 раза на процессоре, ну и конечно многопоточность никто не отменял -t 4(например)
сеть можно не распаковывать, но надо переименовать

[Maratka]

У меня AVX2 не поддерживается.

[svoitsl]

Цитата: Сообщение от Maratka

У меня AVX2 не поддерживается.

впрочем, как выяснилось:
cpu обычная на 4-х потоках дает 125 nps
cpu на avx2 при 4-х потоках дает 200 nps
gpu (на gf730) обычная дает 120-110 (на 4-х дает 140-130 nps)

[svoitsl]

gpu (на gf730) cuda дает порядка 385 nps

Кстати поддержка проекта продолжает падать,ещё несколько дней назад я думал что она не упадет менее чем 190 тыс игр в день,но вот есть вероятность что она упадет даже ниже 180 тыс в день.
И это на фоне выхода более скоростных (cuda и avx2) вариантов,хотя как применить cuda для обучения я не знаю.

[Maratka]

Цитата: Сообщение от svoitsl

cpu на avx2 при 4-х потоках дает 200 nps

Цитата: Сообщение от svoitsl

gpu (на gf730) cuda дает порядка 385 nps

Итого, практически одинаково.
Лучший из GeForce, формально доступный в розницу дает в 25 раз больше, чем Ваш GT730, но он именно что формально доступен.
https://www.nvidia.ru/titan/titan-v/


А ширпотреб вроде GTX 1080 Ti быстрее всего раз в пятнадцать, что более-менее компенсируется количеством ядер у старших Ryzen TR/ Core i9, а тем более Xeon/Epic

Так что никаких откровений использование GPU в сравнении с по настоящему мощными CPU не даст, а значит LZ в случае если из его обучения что-то путное выйдет вполне будет способен и на CPU дать бой классическим движкам.

[svoitsl]

Большего разнообразия версии Лилы для наигрывания кажется ещё не было,тут и 7 и 8 и 9-я версии одновременно, а на самом деле вариантов больше, многие умудряюся совмещать разные версии клиента и собственно Лилы. Но Лила что то от такого разнообразия не очень быстро стала обучаться.
Все таки довольно странно, а не было ли бы полезно сделать в проге самообновление, раз уж все равно без инета не может

[Maratka]

Цитата: Сообщение от svoitsl

Все таки довольно странно, а не было ли бы полезно сделать в проге самообновление, раз уж все равно без инета не может

Что-то подобное уже сделали в сервере - он должен выбрасывать клиента с версией ниже чем нужная с соответствующим кодом ошибки.

[svoitsl]

да, действительно, версия 0.7 вылетает с сообщением ERROR: unrecognised option '--fpu_reduction=0'
а v0.8 нормально работает

[Maratka]

Я имел в виду другое:
https://github.com/glinscott/leela-c...677c634a5f8bdb

Впрочем, возможно что-то пропустил.

[svoitsl]

так это просто сообщение у них на страничке, кто зашел - молодец, а кто нет.... тот может портить сеть дальше
кстати теория заговора уже потихоньку пробивает себе путь

Цитата:

the really odd results we were seeing in the past few days could be the result of bad data (games) being fed into the system. I'll confess I wasn't thinking "bug" but rather something malicious being done to derail the project. So have I read that correctly over on github? Will it be possible to dump the corrupt data and re-set back to just before it went haywire?

[Maratka]

Цитата: Сообщение от svoitsl

the really odd results we were seeing in the past few days could be the result of bad data (games) being fed into the system. I'll confess I wasn't thinking "bug" but rather something malicious being done to derail the project. So have I read that correctly over on github? Will it be possible to dump the corrupt data and re-set back to just before it went haywire?

Это вообще говоря проблемы индейцев. :(
Самое правильное обучение - внутренне, на доверенных системах, отключенных от Интернета. Очевидно, что оно будет идти либо долго (при недостатке мощностей), либо дорого (если купить десяток Тесел), по сравнению с публичным обучением "для всех желающих".
Зато вероятность хака равна нулю.

А тут у них открытый клиент с исходниками... Поменяй что считаешь нужным, запусти на Гугловских теслах - и в базе будет каша.

[svoitsl]

LC0 преподнесла сегодня утром два не очень приятных сюрприза
1 Её уровень в собственных Эло снова упал до 5509 Эло
2 Уровень её новой cети id273 тоже упал по сравнению со Стокфишем до уровня 2713 эло (за счет чего уровень сети id228 вырос до 2856!), что нижу уровня предыдущей протестированной сети id268 на целых 96 вполне реальных Эло
Разработчики порадовали нас новой версией
v0.10rc1

Цитата:

Note: The server will display you are using lczero engine version v0.9 even after you upgrade to v0.10. This will be fixed soon(tm).

Main change:

#577 - Two inputs to the Neural Network (rule50 and the all 1s plane) were not connected properly.

We don't expect this bug fix to resolve the current strength fluctuations, but it's still an important fix so we made another quick release. Thanks to Alexander Lyashuk and Trevor for both finding this issue independently, and Tilps for implementing a fix.

Ну все, теперь AZ0 скоро будет побеждена очень скоро (просто не придет на турнир )


Есть сообщение crem с другого форума

Цитата:

В v0.10 пофикшен серьёзный баг, который был в коде давно, но скорее всего был усилен изменениями в v0.8.
Он генерировал плохие тренировочные данные, и объясняет многочисленные зевки и остановку роста рейтинга. Все переходите на v0.10.

Интересно, означает ли это , что всё что нажито непосильным трудом, все ж пропало?
(12 млн игр)

[Maratka]

Цитата: Сообщение от svoitsl

Интересно, означает ли это , что всё что нажито непосильным трудом, все ж пропало?

Скорее, партии за последнее дней пять, т.е. с момента выхода версии .8

[Maratka]

Кстати, в описании к версии сказано, что:

We don't expect this bug fix to resolve the current strength fluctuations, but it's still an important fix so we made another quick release. Thanks to Alexander Lyashuk and Trevor for both finding this issue independently, and Tilps for implementing a fix.

Т.е. прыгать рейтинг все равно будет, никуда не денется.

Ну а исправили они:

Two inputs to the Neural Network (rule50 and the all 1s plane) were not connected properly.

[svoitsl]

сглазить бояться....
Но все таки он был давно, может и в 0.7, а до этого пешка кроме коня не в кого не превращалась....

[svoitsl]

Почти все перешли на новую 10-ку и наметился осторожный прогресс, при игре сама с собой сеть улучила рейтинг на почти 4, а затем на почти целых 6 Эло.
А теперь о реальном рейтинге....
Однако реальный рейтинг пока продолжает снижаться, на сей раз он упал на 82 Эло (для id 278) по сравнению с сетью id273, но все ещё превышает уровень id156 с его 2622 Эло на 10 Эло.
Но и тут есть повод для оптимизма, ведь это ровно на 9 Эло !!!! меньше,чем в прошлый раз (id 273 упала сразу на 93 Эло по сравнению с id 268).
К тому же счастливые обладатели не очень древних компов могут быстро помочь делу используя более шустрый вариант Лилы для mkl, bmi2, popcnt
Но увы,нет гарантий, что все глюки устранены и поэтому они могут как быстро помочь, так и быстро повредить рейтингу,но делу несомненно помогут,так как отрицательный результат - тоже результат!!!

Есть ещё один повод для оптимизма (в некотором роде) -сеть id228 снова увеличила свой рейтинг ,достигнув рекордных для Лилы 2857 Эло!!!

[Maratka]

Цитата: Сообщение от Maratka

Проверил с базой ID227
На прошлой базе ID181 было 47 из 200

на базе ID227: Result: 55 out of 200 = 27.5%

Проверил версию .10 с базой ID280:
Result: 56 out of 200 = 28.0%

Solving: D:\My Documents\ChessBase\Testsets\-=DieRybka4TestSuite=-200_combined_24-12-2011.cbh
Maximum time = 20s.

1. 01. Polugaevsky-Torre (London - Bxh7+,  Computer Chess Test Suite 2011   > 20s.
2. 49. Smirnov-Kurnosov (Istanbu - Bxh5,  Computer Chess Test Suite 2011   Solved in 0.41s/8; Solved: 1
3. arasan12.215 - Bxf7+,  Computer Chess Test Suite 2011   > 20s.
4. arasan12.124 - Re8+,  Computer Chess Test Suite 2011   > 20s.
5. arasan12.122 - Ra2,  Computer Chess Test Suite 2011   > 20s.
6. exercise 11.06 okelly.ci 141 - Rxe7,  Computer Chess Test Suite 2011   > 20s.
7. Kholmov-Bronstein,K - Nc6,  Computer Chess Test Suite 2011   > 20s.
8. Glek-Lingnau,D - Rxf6,  Computer Chess Test Suite 2011   > 20s.
9. Schuster-Janosi,C - Qd1,Q,  Computer Chess Test Suite 2011   > 20s.
10. Winckelmann-Engel,C - Bxg6,  Computer Chess Test Suite 2011   > 20s.
11. Panow-Taimanow,M - Rxa6,  Computer Chess Test Suite 2011   > 20s.
12. Arnlind-Zagorovsky,C - Re3,  Computer Chess Test Suite 2011   > 20s.
13. Georgiev-Ionescu,C - Bxh7,  Computer Chess Test Suite 2011   > 20s.
14. Glek-Ulibin,W - Nxf5,  Computer Chess Test Suite 2011   > 20s.
15. Gaprindashvili-Bliss,C - e6,  Computer Chess Test Suite 2011   > 20s.
16. Trent - Deslandes Cap d'Agde  - Bxh7,  Computer Chess Test Suite 2011   > 20s.
17. test - Rxf6,  Computer Chess Test Suite 2011   Solved in 8.17s/16; Solved: 2
18. Wohl-Mikhalev,C - Bxh6,  Computer Chess Test Suite 2011   > 20s.
19. Ëîáàíîâ - NN - Rxf6,  Computer Chess Test Suite 2011   > 20s.
20. Spassky-Unzicker 1966 - Nf5,  Computer Chess Test Suite 2011   > 20s.
21. Fischer-Benko 1967 - Qh5,  Computer Chess Test Suite 2011   Solved in 1.06s/12; Solved: 3
22. Anand-Shirov 2000 - Nxg5,  Computer Chess Test Suite 2011   > 20s.
23. Karpov-Kortschnoj 1981 - Nf6,  Computer Chess Test Suite 2011   > 20s.
24. Topalov-Anand 2010 - Nf6,  Computer Chess Test Suite 2011   Solved in 7.15s/16; Solved: 4
25. King's attack - Ra7,  Computer Chess Test Suite 2011   > 20s.
26. King's attack - Nxf7,  Computer Chess Test Suite 2011   > 20s.
27. King's attack - Rxh2,  Computer Chess Test Suite 2011   Solved in 4.62s/15; Solved: 5
28. King's attack - Bh3,  Computer Chess Test Suite 2011   > 20s.
29. Attack the castled king - Rxg7,  Computer Chess Test Suite 2011   > 20s.
30. Position 3 - Nxg5,  Computer Chess Test Suite 2011   > 20s.
31. Position 5 - e5,  Computer Chess Test Suite 2011   > 20s.
32. Position 6 - axb5,  Computer Chess Test Suite 2011   > 20s.
33. Campora - Morovic,1 - Bxh7,  Computer Chess Test Suite 2011   > 20s.
34. Anand - Robatsch,1 - Rd8,  Computer Chess Test Suite 2011   > 20s.
35. Savchenko - Smagin,1 - Bf6,  Computer Chess Test Suite 2011   Solved in 0.67s/9; Solved: 6
36. Morella,J - Qh6!,  Computer Chess Test Suite 2011   > 20s.
37. Morozevich vs. Vachier-Lagrav - Qg6,  Computer Chess Test Suite 2011   > 20s.
38. Nigel Short vs Petar Velikov  - Qxh6,  Computer Chess Test Suite 2011   > 20s.
39. Kiev,1 - Nxg7,  Computer Chess Test Suite 2011   > 20s.
40. arasan6.49 - Bc4+,  Computer Chess Test Suite 2011   Solved in 18.94s/18; Solved: 7
41. arasan7.2 - Bxf7+,  Computer Chess Test Suite 2011   > 20s.
42. Quick-04 - Ra8,  Computer Chess Test Suite 2011   > 20s.
43. Stockfish - Rybka match,2 - Ne5!,  Computer Chess Test Suite 2011   > 20s.
44. P15 - 110 - g4,  Computer Chess Test Suite 2011   > 20s.
45. Short - Timman,1 - Kg3!,  Computer Chess Test Suite 2011   Solved in 0.66s/8; Solved: 8
46. Polgar - Knaak,1 - fxe5!,  Computer Chess Test Suite 2011   Solved in 17.10s/18; Solved: 9
47. Nikolic-Fischer (Vinkovci,1 - Kg7!!,  Computer Chess Test Suite 2011   > 20s.
48. composed 2010 - Bxh7!,  Computer Chess Test Suite 2011   > 20s.
49. Nezhmetdinov-Zagorovsky,U - Nxd5!,  Computer Chess Test Suite 2011   > 20s.
50. Riccio Eros 2477 - Wayne Lowr,F - h4!,  Computer Chess Test Suite 2011   > 20s.
51. Denkan - Asher Alperovich,1 - Nxf2,  Computer Chess Test Suite 2011   > 20s.
52. Erenburg,2 - Qe6,  Computer Chess Test Suite 2011   Solved in 0.59s/7; Solved: 10
53. Xaggard - Þõàí,c - Rxe5,  Computer Chess Test Suite 2011   > 20s.
54. Malachatko-Sutovsky,Z - 0-0-0!,  Computer Chess Test Suite 2011   > 20s.
55. Der brillante Schachzug 065 –,V - Bxc5!,  Computer Chess Test Suite 2011   > 20s.
56. http://www.talkchess.com/foru - Bxh6,  Computer Chess Test Suite 2011   Solved in 0.48s/9; Solved: 11
57. arasan2.225 - Qh4,  Computer Chess Test Suite 2011   > 20s.
58. http://immortalchess.net/foru - Rg5!,  Computer Chess Test Suite 2011   > 20s.
59. Aaron Summerscale - Gawain Jo,B - Rxh2!,  Computer Chess Test Suite 2011   > 20s.
60. http://www.open-chess.org/vie - Rxg7,  Computer Chess Test Suite 2011   > 20s.
61. Naum 3.1 - Rybka 3,p - Re3,g,  Computer Chess Test Suite 2011   > 20s.
62. Gnutov's corr game - g4!,  Computer Chess Test Suite 2011   > 20s.
63. Blackborn - Darkraider,p - Rd1,  Computer Chess Test Suite 2011   > 20s.
64. Voll - Lelenko,I - Ng5!,  Computer Chess Test Suite 2011   Solved in 0.58s/8; Solved: 12
65. Wilczek - Leupold,8 - Bxh7!,  Computer Chess Test Suite 2011   > 20s.
66. Sanchez Romero - Panelo Munoz,B - Bxf7!,  Computer Chess Test Suite 2011   > 20s.
67. Keres - Petrovs,M - g4,  Computer Chess Test Suite 2011   Solved in 2.57s/15; Solved: 13
68. Tal - NN,s - Nxf7!,  Computer Chess Test Suite 2011   > 20s.
69. Bareev - Renet,Y - f5,  Computer Chess Test Suite 2011   Solved in 0.41s/8; Solved: 14
70. Barnett - Trauner,W - Bxf7!,  Computer Chess Test Suite 2011   > 20s.
71. Sveshnikov - Ibragimov,L - Rxf5!,  Computer Chess Test Suite 2011   Solved in 1.42s/13; Solved: 15
72. Turgut - Latas,W - g4,  Computer Chess Test Suite 2011   Solved in 0.41s/8; Solved: 16
73. Shirov - Vorobiov,1 - Bxh6,  Computer Chess Test Suite 2011   Solved in 0.47s/10; Solved: 17
74. Ciraev - Fallein,1 - Bxh7,  Computer Chess Test Suite 2011   > 20s.
75. http://rybkaforum.net/cgi-bin - Rxf5,  Computer Chess Test Suite 2011   > 20s.
76. Bronstein vs Keres,G - Bxh6,  Computer Chess Test Suite 2011   Solved in 17.85s/18; Solved: 18
77. Brilliant.21 - Rc5,  Computer Chess Test Suite 2011   > 20s.
78. http://www.talkchess.com/foru - Qg3!,  Computer Chess Test Suite 2011   > 20s.
79. Covax 1.13 - Bxf7,  Computer Chess Test Suite 2011   Solved in 5.46s/16; Solved: 19
80. Junior - Chess Tiger,W - Rxc6!,  Computer Chess Test Suite 2011   > 20s.
81. Topalov vs Shirov,2 - Nd4!,  Computer Chess Test Suite 2011   > 20s.
82. Portisch - Johannessen,H - Bxh6,  Computer Chess Test Suite 2011   > 20s.
83. Sax,G - Rxa3,  Computer Chess Test Suite 2011   > 20s.
84. http://rybkaforum.net/cgi-bin - Nxh6,  Computer Chess Test Suite 2011   > 20s.
85. Marjanovic,S - Nf6!,  Computer Chess Test Suite 2011   > 20s.
86. http://rybkaforum.net/cgi-bin - Qxe5!!,  Computer Chess Test Suite 2011   > 20s.
87. http://rybkaforum.net/cgi-bin - Re6,  Computer Chess Test Suite 2011   > 20s.
88. http://rybkaforum.net/cgi-bin - Qf6+!!,  Computer Chess Test Suite 2011   > 20s.
89. http://rybkaforum.net/cgi-bin - Rxa3!,  Computer Chess Test Suite 2011   > 20s.
90. Pillsbury-Lasker,S - Ra3,  Computer Chess Test Suite 2011   > 20s.
91. giri-grandelius,h - e5!,  Computer Chess Test Suite 2011   Solved in 2.12s/14; Solved: 20
92. Rybka 4 vs Houdini 1.02,2 - Nf3!,  Computer Chess Test Suite 2011   > 20s.
93. Houdini 1.5 x64 - Deep Rybka ,I - g6!,  Computer Chess Test Suite 2011   > 20s.
94. Shirov-Eljanov analysis - h5,  Computer Chess Test Suite 2011   Solved in 0.50s/8; Solved: 21
95. http://www.talkchess.com/foru - Nf4!!,  Computer Chess Test Suite 2011   > 20s.
96. http://www.talkchess.com/foru - Nxg2,  Computer Chess Test Suite 2011   > 20s.
97. http://www.talkchess.com/foru - Nb3!,  Computer Chess Test Suite 2011   > 20s.
98. Sandipan-Tiviakov,O - Bf6!,  Computer Chess Test Suite 2011   > 20s.
99. 14. Ostapenko-Kurkin (USSR) 1 - e6,  Computer Chess Test Suite 2011   Solved in 2.59s/14; Solved: 22
100. arasan12.188 - Nxd4,  Computer Chess Test Suite 2011   Solved in 7.30s/16; Solved: 23
101. arasan12.150 - Nxh6+,  Computer Chess Test Suite 2011   > 20s.
102. exercise 07.03 okelly.ci 77 - Bf6,  Computer Chess Test Suite 2011   Solved in 6.79s/17; Solved: 24
103. Moiseev-Simagin,M - f3,  Computer Chess Test Suite 2011   > 20s.
104. Tukmakov-Ovsejevitsch,N - a6,  Computer Chess Test Suite 2011   Solved in 11s/17; Solved: 25
105. Burmakin-Ziatdinov,M - Bxh7,  Computer Chess Test Suite 2011   > 20s.
106. NS_Serg - Glavnyi 2009 - Rxd7,  Computer Chess Test Suite 2011   > 20s.
107. Sánchez de Ybargüen Gutiérrez - Nxh7,  Computer Chess Test Suite 2011   Solved in 8.03s/16; Solved: 26
108. Ëîáàíîâ-Ãîðáà÷åâ 2010 corrgam - f4,  Computer Chess Test Suite 2011   Solved in 0.41s/7; Solved: 27
109. Khalifman-Kazimdzanov 2002 - e5,  Computer Chess Test Suite 2011   Solved in 17.08s/18; Solved: 28
110. Gillam-Macintosh,C - Rxe6,  Computer Chess Test Suite 2011   > 20s.
111. King's attack - Bd5,  Computer Chess Test Suite 2011   > 20s.
112. Kasimdzhanov-Topalov,S - Reg3,  Computer Chess Test Suite 2011   > 20s.
113. Position 8 - Bxh7+,  Computer Chess Test Suite 2011   > 20s.
114. BK.17 - h5,  Computer Chess Test Suite 2011   > 20s.
115. arasan11.201 - Rxh7,  Computer Chess Test Suite 2011   > 20s.
116. test from CCC - Nxh7!,  Computer Chess Test Suite 2011   > 20s.
117. arasan12.119 - Bf6,  Computer Chess Test Suite 2011   Solved in 15.52s/18; Solved: 29
118. arasan12.5 - Bxf7+,  Computer Chess Test Suite 2011   > 20s.
119. arasan12.35 - Rxg2,  Computer Chess Test Suite 2011   > 20s.
120. arasan12.65 - Ng5,  Computer Chess Test Suite 2011   Solved in 1.59s/14; Solved: 30
121. Rybka - Shredder,2 - Nd5!,  Computer Chess Test Suite 2011   > 20s.
122. Povah - Sisask,2 - Rxh6!,  Computer Chess Test Suite 2011   > 20s.
123. Deep Hiarcs 12 - Stockfish 1. - f5,  Computer Chess Test Suite 2011   > 20s.
124. Rybka Cluster game - Nh5!,  Computer Chess Test Suite 2011   > 20s.
125. Garcia 2000 - Na8!,  Computer Chess Test Suite 2011   > 20s.
126. Spraggett-Morovic,E - Bxe4!,  Computer Chess Test Suite 2011   Solved in 6.26s/15; Solved: 31
127. Miles-Beliavsky,T - f4!,  Computer Chess Test Suite 2011   Solved in 17.36s/18; Solved: 32
128. Leskiv - Edwards,C - Rxf7,  Computer Chess Test Suite 2011   > 20s.
129. http://immortalchess.net/foru - g6!,  Computer Chess Test Suite 2011   Solved in 0.42s/8; Solved: 33
130. Test Position: 1.Nd6+!! - Nd6,  Computer Chess Test Suite 2011   > 20s.
131. Bernard,C - Rxb7,  Computer Chess Test Suite 2011   > 20s.
132. http://www.talkchess.com/foru - Nxf7,  Computer Chess Test Suite 2011   > 20s.
133. Romanov Roman - Vertongen Wil,C - Bxh6!,  Computer Chess Test Suite 2011   Solved in 8.58s/17; Solved: 34
134. Sepultura - Sehnsucht,B - f6!,  Computer Chess Test Suite 2011   Solved in 0.50s/9; Solved: 35
135. test position - Bxe4,  Computer Chess Test Suite 2011   Solved in 0.73s/11; Solved: 36
136. 32. J.Polgar-Berkes (Budapest - g4,  Computer Chess Test Suite 2011   > 20s.
137. arasan12.212 - dxe6,  Computer Chess Test Suite 2011   Solved in 14.74s/18; Solved: 37
138. arasan12.202 - Bb5,  Computer Chess Test Suite 2011   Solved in 9.16s/16; Solved: 38
139. arasan12.179 - Ba5,  Computer Chess Test Suite 2011   > 20s.
140. arasan12.181 - Nh5,  Computer Chess Test Suite 2011   Solved in 1.76s/13; Solved: 39
141. arasan12.115 - Qh6,  Computer Chess Test Suite 2011   > 20s.
142. arasan12.84 - Rc1,  Computer Chess Test Suite 2011   Solved in 8.86s/16; Solved: 40
143. exercise 11.09 okelly.ci 144 - Nxg2,  Computer Chess Test Suite 2011   > 20s.
144. exercise 12.15 okelly.ci 165 - d4,  Computer Chess Test Suite 2011   > 20s.
145. Petrosian-Fischer,B - c5,  Computer Chess Test Suite 2011   > 20s.
146.  - Rxh7,  Computer Chess Test Suite 2011   > 20s.
147. BK.03 - f5,  Computer Chess Test Suite 2011   Solved in 17s/18; Solved: 41
148. 4.92 - Nd2,  Computer Chess Test Suite 2011   > 20s.
149. arasan7.14 - Nh4,  Computer Chess Test Suite 2011   > 20s.
150. Test Position - Rxd5,  Computer Chess Test Suite 2011   > 20s.
151. Fenes - Bocanegra Moreno,D - Rxf5!,  Computer Chess Test Suite 2011   > 20s.
152. Lyukmanov - Savin (Russian Ch,2 - Bxg5!,  Computer Chess Test Suite 2011   > 20s.
153. Houdini_1.5-Rybka_4,C - g5!,  Computer Chess Test Suite 2011   Solved in 0.36s/8; Solved: 42
154. Siffon - Vitamix - Nxg2!,  Computer Chess Test Suite 2011   > 20s.
155. _klf_ - bankuss [B66] KC~5f B,0 - Nxd5!,  Computer Chess Test Suite 2011   > 20s.
156. _klf_ - nucler,b - Rxf6!,  Computer Chess Test Suite 2011   > 20s.
157. _klf_ - Dijen [B20] KC~5f Bes,1 - f5!,  Computer Chess Test Suite 2011   Solved in 1.83s/14; Solved: 43
158. Van Assche - Boehme,F - f5!,  Computer Chess Test Suite 2011   > 20s.
159. Houdini 1.5 - Rybka 4,L - Rf6!,  Computer Chess Test Suite 2011   > 20s.
160. Handke - Graf,B - Nf6!,  Computer Chess Test Suite 2011   Solved in 10.28s/17; Solved: 44
161. Future Breeze(Naum 4.1)-Ultra,p - Bxh6,  Computer Chess Test Suite 2011   > 20s.
162. Houdini 1.5 v Rybka 4 at long,g - Nxf7!,  Computer Chess Test Suite 2011   > 20s.
163. Korobov - Vocaturo,A - Rd8!,  Computer Chess Test Suite 2011   > 20s.
164.  - Nf3+,  Computer Chess Test Suite 2011   > 20s.
165. http://www.talkchess.com/foru - Neg5!,  Computer Chess Test Suite 2011   > 20s.
166. Podezd - Gildar,b - g3!,  Computer Chess Test Suite 2011   Solved in 0.58s/9; Solved: 45
167. Nielsen-Malmdin,C - Nc4,  Computer Chess Test Suite 2011   > 20s.
168. Forssen-Eriksson,C - Ng5,  Computer Chess Test Suite 2011   > 20s.
169. Nunn-Lalic,L - Bc4,  Computer Chess Test Suite 2011   > 20s.
170. Karacsony-Dobrei,C - e5,  Computer Chess Test Suite 2011   > 20s.
171. Papenin - Henri,W - Nxe6!,  Computer Chess Test Suite 2011   Solved in 0.41s/8; Solved: 46
172. Dutra - Papenin,W - Bxh3!,  Computer Chess Test Suite 2011   Solved in 0.50s/8; Solved: 47
173. Tanis - Papenin,W - Rc4!,  Computer Chess Test Suite 2011   > 20s.
174. Papenin - LeBled,R - Nf3+!,  Computer Chess Test Suite 2011   > 20s.
175. Papenin - Bueken,W - f5!,  Computer Chess Test Suite 2011   Solved in 9.03s/16; Solved: 48
176. Papenin - Goze,8 - e5!,  Computer Chess Test Suite 2011   Solved in 1.76s/14; Solved: 49
177. Papenin - Zhak,I - g4!,  Computer Chess Test Suite 2011   > 20s.
178. Zhao Jun (2580) - Xiu Deshun ,C - Bxd6!!,  Computer Chess Test Suite 2011   > 20s.
179. YeJiangchuan-Lutz,B - c5,  Computer Chess Test Suite 2011   > 20s.
180. Ivanchuk-Alekseev,J - Nd5!,  Computer Chess Test Suite 2011   > 20s.
181. Brain twister,n - Bxh6!!,  Computer Chess Test Suite 2011   Solved in 1.33s/13; Solved: 50
182. http://vlasak.biz/evcnews.htm - c4!,  Computer Chess Test Suite 2011   > 20s.
183. Papenin - Plomp,C - Nh5!,  Computer Chess Test Suite 2011   > 20s.
184. Trofimov - Kurdyukov,I - g4!,  Computer Chess Test Suite 2011   Solved in 3.23s/15; Solved: 51
185. Loginov - Kruger,I - g4!,  Computer Chess Test Suite 2011   Solved in 0.87s/12; Solved: 52
186. devour-grandphish,L - Rde3!,  Computer Chess Test Suite 2011   > 20s.
187. rodog-acudata,2 - Rxh6!,  Computer Chess Test Suite 2011   Solved in 0.39s/9; Solved: 53
188. voronn009 - Bxb5!,  Computer Chess Test Suite 2011   > 20s.
189. Houdini 1.5 w32 - GullChess 1,s - Bxh7!,  Computer Chess Test Suite 2011   > 20s.
190. http://immortalchess.net/foru - f5!,  Computer Chess Test Suite 2011   > 20s.
191. from Dadi Jonson article - g4!,  Computer Chess Test Suite 2011   > 20s.
192. From Kevin - Ba4!,  Computer Chess Test Suite 2011   > 20s.
193. Hiarcs 13.2 4CPU-Rybka 4.1 64,C - Rxf6!,  Computer Chess Test Suite 2011   Solved in 15.15s/18; Solved: 54
194. Houdini 1.5a 64-bit 4CPU-Rybk,C - Bg5!,  Computer Chess Test Suite 2011   > 20s.
195. Aster,i - Ng5!,  Computer Chess Test Suite 2011   Solved in 1.06s/13; Solved: 55
196.  - Bxh7+,  Computer Chess Test Suite 2011   > 20s.
197.  - Nxh7,  Computer Chess Test Suite 2011   Solved in 1.28s/13; Solved: 56
198.  - Bxh7+,  Computer Chess Test Suite 2011   > 20s.
199. Voros,J - Ba3!,  Computer Chess Test Suite 2011   > 20s.
200. Ketola-Pechwitz,W - Nxf3,  Computer Chess Test Suite 2011   > 20s.

Result: 56 out of 200 = 28.0%. Average time = 5.27s / 13.16

[kpu3uc]

В дискорде обсуждают роллбэк, откатиться на более старую версию.