"Железо" для шахматных программ.

[Гудвин]

Тема по компьютерам и комплектующим, желательно в связи с шахматными программами.

[ChessMan]

Цитата: Сообщение от Переяслав

Может вообще отрубить эти виртуальные ядра в БИОСе? Я вот в ИДЕЕ сегодня смотрел, некоторые инстансы почему-то скорость намного ниже показывали, хотя я ставил число меньше чем физических ядер. Оно что все равно на виртуальных крутится?

Пока ничо не пойму...

Не поможет, наверное.
СиФиш всё-равно будет алоцироваться на первый процессор.

[ChessMan]

Cfish 120920 BMI2 no NUMA

https://pixeldrain.com/u/mPfrnFmr

[Переяслав]

Цитата: Сообщение от ChessMan

При однопоточном тесте - идеально.
При использовании всех потоков - не знаю точно... Возможно сама ОС справится с правильной алокацией потоков.

Сейчас соберу версию без НУМЫ - проверите

Т.е. я ставлю NUMA=none и запускаю на 40 одновременных партий?
А где оно возьмет тогда лишние 16 ядер?

[ChessMan]

Цитата: Сообщение от Переяслав

Т.е. я ставлю NUMA=none и запускаю на 40 одновременных партий?
А где оно возьмет тогда лишние 16 ядер?

А Вы уже отключили многопоточность?
Запускаете по количеству потоков, минус пару на систему. Всё как обычно.


Тот первый СиФиш (что был в тесте) - да, можно порпобовать поставить NUMA=none. Не знаю сработает ли.

Тот что я только-что скомпилировал - ничего менять не надо в настройках.

[Переяслав]

Games Completed = 101 of 200 (Avg game length = 43.936 sec)
Settings = Gauntlet/128MB/15000ms+150ms/M 699cp for 3 moves, D 119 moves/PGN:i:\Chess\cutechess\cutechess-win-64bit\cutechess-win-64bit-2020-07-27\openings\famous_openings_50.pgn(49)
Time = 140 sec elapsed, 137 sec remaining

 1.  Cfish 090920 all NUMA    	44.5/101	11-23-67  	(tpm=360.0 d=20.45 nps=747153)
 2.  Cfish 120920 no NUMA   	56.5/101	23-11-67  	(tpm=359.4 d=21.49 nps=958421)

Такое вот кино выходит на concurrency=40

[Переяслав]

Цитата: Сообщение от ChessMan

А Вы уже отключили многопоточность?

В смысле в БИОСЕ?

[ChessMan]

Цитата: Сообщение от Переяслав

В смысле в БИОСЕ?

Ну да.

[ChessMan]

Цитата: Сообщение от Переяслав

Games Completed = 101 of 200 (Avg game length = 43.936 sec)
Settings = Gauntlet/128MB/15000ms+150ms/M 699cp for 3 moves, D 119 moves/PGN:i:\Chess\cutechess\cutechess-win-64bit\cutechess-win-64bit-2020-07-27\openings\famous_openings_50.pgn(49)
Time = 140 sec elapsed, 137 sec remaining

 1.  Cfish 090920 all NUMA    	44.5/101	11-23-67  	(tpm=360.0 d=20.45 nps=747153)
 2.  CiChess 120920 no NUMA   	56.5/101	23-11-67  	(tpm=359.4 d=21.49 nps=958421)

Такое вот кино выходит на concurrency=40

CiChess???

[ChessMan]

Переяслав,
Попробуйте прогнать СиФиш "старый" от 090920 и новый от 120920 no_NUMA в Билд Тестере на 40-ка потоках (bench 128 40 15 default depth NNUE)
Интересно, будет ли no_NUMA работать корректно.

[Переяслав]

Games Completed = 101 of 200 (Avg game length = 42.823 sec)
Settings = Gauntlet/128MB/15000ms+150ms/M 699cp for 3 moves, D 119 moves/PGN:i:\Chess\cutechess\cutechess-win-64bit\cutechess-win-64bit-2020-07-27\openings\famous_openings_50.pgn(49)
Time = 228 sec elapsed, 224 sec remaining

 1.  Cfish 090920 all NUMA    	50.5/101	11-11-79  	(tpm=348.7 d=23.41 nps=1030890)
 2.  Cfish 120920 no NUMA   	50.5/101	11-11-79  	(tpm=344.4 d=24.18 nps=1128527)

Поставил 22, т.е. по идее на физ. ядрах играть должны но все равно один быстрее и глубже...

[Переяслав]

Цитата: Сообщение от ChessMan

CiChess???

Не это я забыл в Блитцере переименовать
сифиш конечно

[ChessMan]

Цитата: Сообщение от Переяслав

Games Completed = 101 of 200 (Avg game length = 42.823 sec)
Settings = Gauntlet/128MB/15000ms+150ms/M 699cp for 3 moves, D 119 moves/PGN:i:\Chess\cutechess\cutechess-win-64bit\cutechess-win-64bit-2020-07-27\openings\famous_openings_50.pgn(49)
Time = 228 sec elapsed, 224 sec remaining

 1.  Cfish 090920 all NUMA    	50.5/101	11-11-79  	(tpm=348.7 d=23.41 nps=1030890)
 2.  CiChess 120920 no NUMA   	50.5/101	11-11-79  	(tpm=344.4 d=24.18 nps=1128527)

Поставил 22, т.е. по идее на физ. ядрах играть должны но все равно один быстрее и глубже...

А поменяйте местами))

[Переяслав]

Цитата: Сообщение от ChessMan

Интересно, будет ли no_NUMA работать корректно.

Ну вроде сопоставимо

[ChessMan]

Да кстати, чтобы отключить НУМА в движке от 090920 - нужно в настройках поставить NUMA=off, а не NUMA=none

void read_numa_nodes(char *str)
{
  if (!numaAvail) {
    printf("info string NUMA not supported by OS.\n");
  }
  else if (strcmp(str, "off") == 0) {
    delayedSettings.numaEnabled = false;
    printf("info string NUMA disabled.\n");
  }
  else if (strcmp(str, "on") == 0 || strcmp(str, "all") == 0) {
    delayedSettings.numaEnabled = true;
    printf("info string NUMA enabled.\n");
  }

[ChessMan]

Цитата: Сообщение от Переяслав

Ну вроде сопоставимо

Ну и отлично!

Правда у меня в Билд Тестере, на однопотоке обычный (с НУМА) немного быстрее чем no_NUMA...

[Переяслав]

Цитата: Сообщение от ChessMan

А поменяйте местами))

А все равно not NUMA быстрее и глубже (concurrency=22)

Games Completed = 50 of 200 (Avg game length = 42.937 sec)
Settings = Gauntlet/128MB/15000ms+150ms/M 699cp for 3 moves, D 119 moves/PGN:i:\Chess\cutechess\cutechess-win-64bit\cutechess-win-64bit-2020-07-27\openings\famous_openings_50.pgn(49)
Time = 127 sec elapsed, 380 sec remaining

 1.  Cfish 120920 not NUMA    	26.0/50	8-6-36  	(tpm=369.0 d=21.94 nps=1222120)
 2.  Cfish 090920 all NUMA    	24.0/50	6-8-36 	(tpm=370.0 d=21.43 nps=1033484)

[Переяслав]

Цитата: Сообщение от ChessMan

Ну и отлично!

Вообще ничо не понял пока. :(
Эта нума за что отвечает?

[ChessMan]

Цитата: Сообщение от Переяслав

А все равно not NUMA быстрее и глубже (concurrency=22)

Games Completed = 50 of 200 (Avg game length = 42.937 sec)
Settings = Gauntlet/128MB/15000ms+150ms/M 699cp for 3 moves, D 119 moves/PGN:i:\Chess\cutechess\cutechess-win-64bit\cutechess-win-64bit-2020-07-27\openings\famous_openings_50.pgn(49)
Time = 127 sec elapsed, 380 sec remaining

 1.  Cfish 120920 not NUMA    	26.0/50	8-6-36  	(tpm=369.0 d=21.94 nps=1222120)
 2.  Cfish 090920 all NUMA    	24.0/50	6-8-36 	(tpm=370.0 d=21.43 nps=1033484)

У Вас же два процессора?
Сколько физических ядер на каждом?

[Переяслав]

Цитата: Сообщение от ChessMan

Сколько физических ядер на каждом?

12+12

[ChessMan]

Цитата: Сообщение от Переяслав

12+12

Поэтому all NUMA медленнее - все его копии алоцируются на первом процессоре. То есть использует ядра и потоки первого процессора.

А no_NUMA - использует физические ядра обоих процессоров.

[Переяслав]

Цитата: Сообщение от ChessMan

Поэтому all NUMA медленнее - все его копии алоцируются на первом процессоре. То есть использует ядра и потоки первого процессора.

А no_NUMA - использует физические ядра обоих процессоров.

Походу да. Запустил один и тот же двиг, но в одном в настройках отрубил нуму. И он быстрее в целом.

Games Completed = 200 of 200 (Avg game length = 44.403 sec)
Settings = Gauntlet/128MB/15000ms+150ms/M 699cp for 3 moves, D 119 moves/PGN:i:\Chess\cutechess\cutechess-win-64bit\cutechess-win-64bit-2020-07-27\openings\famous_openings_50.pgn(49)
Time = 445 sec elapsed, 0 sec remaining

 1.  Cfish 090920 NUMA=off    	101.5/200	24-21-155  	(tpm=334.8 d=23.44 nps=1301935)
 2.  Cfish 090920 NUMA=all    	98.5/200	21-24-155  	(tpm=335.6 d=23.04 nps=1152360)

Concurrency=22

По итогу что выходит? На двухпроцессорных машинах NUMA нужно отключать?

[ChessMan]

Цитата: Сообщение от Переяслав

По итогу что выходит? На двухпроцессорных машинах NUMA нужно отключать?

Для одно-поточных тестов с concurrency>12 - да, нужно отключать.

[Переяслав]

Цитата: Сообщение от ChessMan

Для одно-поточных тестов с concurrency>12 - да, нужно отключать.

Спасибо. Наконец-то понятно стало!

[Переяслав]

Да уж, на concurrency=12 все стало в пределах погрешности. Т.е. как и должно быть!


Games Completed = 57 of 100 (Avg game length = 41.980 sec)
Settings = Gauntlet/128MB/15000ms+150ms/M 699cp for 3 moves, D 119 moves/PGN:i:\Chess\cutechess\cutechess-win-64bit\cutechess-win-64bit-2020-07-27\openings\Noomen4-moveTestsuite_2000.pgn(2000)
Time = 215 sec elapsed, 162 sec remaining

 1.  Cfish 090920 NUMA=off    	28.0/57	(tpm=342.5 d=23.07 nps=1375167)
 2.  Cfish 090920 NUMA=all    	29.0/57	(tpm=343.2 d=23.00 nps=1380082)

[ChessMan]

Цитата: Сообщение от Переяслав

Да уж, на concurrency=12 все стало в пределах погрешности. Т.е. как и должно быть!


Games Completed = 57 of 100 (Avg game length = 41.980 sec)
Settings = Gauntlet/128MB/15000ms+150ms/M 699cp for 3 moves, D 119 moves/PGN:i:\Chess\cutechess\cutechess-win-64bit\cutechess-win-64bit-2020-07-27\openings\Noomen4-moveTestsuite_2000.pgn(2000)
Time = 215 sec elapsed, 162 sec remaining
[CODE]

 1.  Cfish 090920 NUMA=off    	28.0/57	(tpm=342.5 d=23.07 nps=1375167)
 2.  Cfish 090920 NUMA=all    	29.0/57	(tpm=343.2 d=23.00 nps=1380082)

А на concurrency 40?

[Переяслав]

Цитата: Сообщение от ChessMan

А на concurrency 40?

Явный перевес у "обезнумленного"

Games Completed = 100 of 100 (Avg game length = 44.391 sec)
Settings = Gauntlet/128MB/15000ms+150ms/M 699cp for 3 moves, D 119 moves/PGN:i:\Chess\cutechess\cutechess-win-64bit\cutechess-win-64bit-2020-07-27\openings\Noomen4-moveTestsuite_2000.pgn(2000)
Time = 156 sec elapsed, 0 sec remaining

 1.  Cfish 090920 NUMA=off    	53.0/100	14-8-78	(tpm=345.5 d=21.67 nps=1053083)
 2.  Cfish 090920 NUMA=all    	47.0/100	8-14-78	(tpm=346.9 d=21.39 nps=970349)

[Переяслав]

А как быть с теми движками у кого нет настроек нумы?
А они есть только походу у сифиша и сичесса...

Получается их тестировать на concurrency>12 - это нерелевантно?
Или на них нума изначально не используется?

[ChessMan]

Цитата: Сообщение от Переяслав

А как быть с теми движками у кого нет настроек нумы?
А они есть только походу у сифиша и сичесса...

Получается их тестировать на concurrency>12 - это нерелевантно?

А остальные не имеют этого бага. Во всяком случае все дериваты Стокфиша.
На счёт Раубфиша не уверен - там изменён НУМА код, может и есть этот баг.

[ChessMan]

Можете смело тестировать Стокфиш с concurrency 24.
Можно и с concurrency 40, только имейте в виду то что ранее писал Aster про использование потоков (логических ядер)

[Переяслав]

Цитата: Сообщение от Aster

На десктопе в биосе можно тоже изменить поведение системы и настройки энергосбережения. Но вообще потока заведует операционная система, поэтому что решит Виндоус, с тем и будете жить.

Это имеется в виду?
Если да, то тогда опять все неясно становится

Ясно лишь что в БИОСЕ отрубить виртуальные и все ок