Chess.com Computer Chess Championship

[Alex_Zet]

Играют Лила - Сток . Идет вторая партия. Оценку совсем не показывают и Лила не берет слона а вместо этого отходит ладьей назад 31. Re4

1. e4 c5
2. Nf3 d6
3. d4 cxd4
4. Nxd4 Nf6
5. Nc3 a6
6. Be3 e5
7. Nb3 Be7
8. f3 Be6
9. Qd2 Nbd7
10. g4 O-O
11. g5 Nh5
12. O-O-O b5
13. Kb1 Nb6
14. Na5 Rc8
15. a3 g6
16. Rg1 Qc7
17. Nd5 Nxd5
18. exd5 Bd7
19. c4 Nf4
20. Rc1 Qd8
21. Nb7 Qc7
22. Na5 Qd8
23. Bxf4 exf4
24. h4 Qb6
25. Bd3 bxc4
26. Bxc4 Rc5
27. Rge1 Bxg5
28. hxg5 Rxa5
29. Ka2 Rb8
30. Re7 Ra4
31. Re4 Bf5

[Vizvezdenec]

Ну берёт она слона, дальше следует Rxc4 Rxc4 Qb3+ и Qxc4 с равной позицией (насчёт равной не уверен, движок не включал )
Стокфиш говорит, что не равной, а с перевесом чёрных

[Alex_Zet]

Да да, я внимательней посмотрел там хуже получилось. . Асмфиш показывает -1.12 почти сразу ((
Ладья оказывается отрезанной

[Vizvezdenec]

[Event "CCC 7: Blitz Bonanza Final (5|2)"]
[Site "?"]
[Date "2019.04.10"]
[Round "1"]
[White "Stockfish"]
[Black "Lc0"]
[Result "1-0"]
[ECO "B90"]
[GameDuration "00:11:56"]
[GameEndTime "2019-04-10T01:28:57.538 PDT"]
[GameStartTime "2019-04-10T01:17:01.076 PDT"]
[Opening "Sicilian"]
[PlyCount "121"]
[TimeControl "300+2"]
[Variation "Najdorf, Adams attack"]

1. e4 c5 2. Nf3 d6 3. d4 cxd4 4. Nxd4 Nf6 5. Nc3 a6 6. h3 e6 7. g4 b5 8. Bg2 Bb7
9. O-O b4 10. Nd5 exd5 11. exd5 Be7 12. g5 Nfd7 13. Nf5 O-O 14. Qd4 f6 15. Qxb4
Bc8 16. Re1 Rf7 17. Nxd6 Qf8 18. Rxe7 Qxe7 19. Bd2 Rf8 20. Re1 a5 21. Qa3 Qd8
22. Bc3 Ra6 23. Nf5 fxg5 24. Re7 Nf6 25. Rxg7+ Kh8 26. Rxg5 Bxf5 27. Rxf5 Qd6
28. Qxd6 Rxd6 29. Be5 Rb6 30. Bd4 Nd7 31. Bxb6 Nxb6 32. b3 Kg7 33. d6 a4 34. c4
Nfd7 35. Ra5 Rc8 36. h4 Kf6 37. Bh3 Rc6 38. Kh2 h6 39. f3 Kf7 40. Ra7 Ke8 41.
Rc7 Rxd6 42. c5 Nxc5 43. Rxc5 Rd2+ 44. Kg3 Rxa2 45. Re5+ Kf7 46. Rb5 Na8 47.
Rb7+ Kf6 48. bxa4 Rxa4 49. h5 Rc4 50. Bg4 Nc7 51. Rb6+ Kg7 52. Rg6+ Kh7 53. Bf5
Rc5 54. Bd3 Kh8 55. Rxh6+ Kg8 56. Rd6 Kh8 57. f4 Rd5 58. Rh6+ Kg7 59. Rh7+ Kf6
60. Bc4 Rc5 61. Rf7# 1-0

[Vizvezdenec]

А сейчас выиграл Модерн за обе стороны и уже 5-6 проигрывает в личных встречах.
Помните, я что-то говорил про небольшую выборку?
Уже чувствую перегрев

[alex1957]

Что то Лила совсем перегрелась, 2 раза один и тот же дебют слила Стоку.

[Maratka]

Цитата: Сообщение от Vizvezdenec

А сейчас выиграл Модерн за обе стороны

[alex1957]

Надо наверно что то подкрутить на сервере

[Maratka]

А Вы разве не догадались сами?
Сервер то уже несколько суток без перерыва молотит!
На видеоплатах соответственно радиаторы пылью поросли. Разбирать и чистить!
Да и вообще странно, что LZ показывает такую низкую производительность на четыре RTX 2080 Ti, наверное термопаста высохла, платам то ведь уже месяца три от роду!

[alex1957]

Цитата: Сообщение от Maratka

На видеоплатах соответственно радиаторы пылью поросли. Разбирать и чистить!

Срочно нужна бригада с пылесосами!

[sovaz1997]

Итак, какие выводы на данный момент можно сделать:

# PLAYER         :  RATING  ERROR  POINTS  PLAYED   (%)  CFS(%)    W    D    L  D(%)  OppAvg
1 Lc0            :  3500.0   ----    98.0     172    57      84   31  134    7    78  3449.5
2 Stockfish      :  3484.5   30.6    93.0     172    54      99   29  128   15    74  3455.1
3 Leelenstein    :  3446.5   31.1    80.5     171    47      97   14  133   24    78  3467.2
4 Antifish       :  3417.5   31.8    71.5     171    42     ---   13  117   41    68  3477.1

White advantage = 49.50 +/- 9.29
Draw rate (equal opponents) = 81.49 % +/- 2.53

1) Клоны явно слабее Лилы;
2) Сток и Лила играют +- на одном уровне, что и показывали тесты. Может, Лила даже и посильнее на CCC, но доказать это сложно, т. к. разница между ними все равно небольшая;
3) Я слышал про какой-то баг в версии Стока от 5 Апреля. Мог ли он сыграть роль? Если же нет, то это чисто свойство маленькой выборки и вряд ли перегрев имеет место быть.

[Neofelis]

Чесно говоря, турнир не показателен, поскольку почти каждый день играет новый Сток. Сегодня, например

Version
100419 64 BMI2

[Maratka]

Тот баг давно пофиксили, да и не эта версия уже играет (кстати, подача сторонникам LZ: SF ОБНОВИЛИ гады!, а LZ как играл с древней сетью 41800, так и продолжает). Т.е. SF'шу подарили сразу 2 ELO преимущества, вот он и сделал три победы над LZ, к гадалке не ходи!

[Maratka]

Цитата: Сообщение от Neofelis

Чесно говоря, турнир не показателен, поскольку почти каждый день играет новый Сток. Сегодня, например

Конечно, про что выше и пишу!
Виноваты конечно же организаторы, кто как не они должны провести матч между сетью 41800 и несколько более новых тысяч на пятьдесят партий, и выявить более лучшую сеть (если она есть конечно)!

[Vizvezdenec]

Цитата: Сообщение от sovaz1997

Итак, какие выводы на данный момент можно сделать:

# PLAYER         :  RATING  ERROR  POINTS  PLAYED   (%)  CFS(%)    W    D    L  D(%)  OppAvg
1 Lc0            :  3500.0   ----    98.0     172    57      84   31  134    7    78  3449.5
2 Stockfish      :  3484.5   30.6    93.0     172    54      99   29  128   15    74  3455.1
3 Leelenstein    :  3446.5   31.1    80.5     171    47      97   14  133   24    78  3467.2
4 Antifish       :  3417.5   31.8    71.5     171    42     ---   13  117   41    68  3477.1

White advantage = 49.50 +/- 9.29
Draw rate (equal opponents) = 81.49 % +/- 2.53

1) Клоны явно слабее Лилы;
2) Сток и Лила играют +- на одном уровне, что и показывали тесты. Может, Лила даже и посильнее на CCC, но доказать это сложно, т. к. разница между ними все равно небольшая;
3) Я слышал про какой-то баг в версии Стока от 5 Апреля. Мог ли он сыграть роль? Если же нет, то это чисто свойство маленькой выборки и вряд ли перегрев имеет место быть.

Я бы ещё добавил, хотя статистикой это и не подтверждено до конца, но...
Antifish против стокфиша играет лучше, чем должен бы - побеждает его чаще. Проигрывает тоже очень много, но всё-таки. Хотя выборка, повторюсь, мала. Может быть, ему с дебютами повезло...

[Neofelis]

Лила тоже умеет 3 подрят выигрывать, так что не расслабляйтесь ;)

[Neofelis]

Цитата: Сообщение от Maratka

Конечно, про что выше и пишу!
Виноваты конечно же организаторы, кто как не они должны провести матч между сетью 41800 и несколько более новых тысяч на пятьдесят партий, и выявить более лучшую сеть (если она есть конечно)!

Да я не жалуюсь на сток, но как же чистота эксперимента? Что мы получим, в итоге? Что сеть 41800 против 10-ти стоков набрала столько-то очков?

[Vizvezdenec]

Цитата: Сообщение от Neofelis

Да я не жалуюсь на сток, но как же чистота эксперимента? Что мы получим, в итоге? Что сеть 41800 против 10-ти стоков набрала столько-то очков?

Ну там разницы дай бог 1-2 эло есть.
Лилу, кстати, тоже обновляли в процессе турнира.
Просто тут как - у стокфиша все тесты проходят SPRT, у Лилы они не проходят ничего, кроме очень поверхностного тестирования стороннего. Поэтому обновляют её только тогда, когда разработчики скажут "вот эта сеть точно лучше".
А так обновят её автоматически после LR дропа, где она просаживается на 20-50 эло...

[Neofelis]

Цитата:

Ну там разницы дай бог 1-2 эло есть.

Это против самого себя. А против Лилы может быть и больше. Кто знает? Важно, что результаты турнира теперь статистически не значимы.

[sovaz1997]

Цитата: Сообщение от Neofelis

Да я не жалуюсь на сток, но как же чистота эксперимента? Что мы получим, в итоге? Что сеть 41800 против 10-ти стоков набрала столько-то очков?

2 пункта абсолютно не повлияют ни на что. А даже если так - сеть Лилы тоже можно обновить, но только после полной уверенности, что она сильнее.

[sovaz1997]

Кстати, как это все выглядит без нарушителя канонов Эло Antifish (который именно против Стока играет не в свою силу):

# PLAYER         :  RATING  ERROR  POINTS  PLAYED   (%)  CFS(%)    W    D    L  D(%)  OppAvg
1 Lc0            :  3500.0   ----    61.5     114    54      52   14   95    5    83  3471.6
2 Stockfish      :  3499.3   29.8    62.5     116    54     100   17   91    8    78  3471.4
3 Leelenstein    :  3442.8   31.2    48.0     114    42     ---    2   92   20    81  3499.7

White advantage = 47.96 +/- 11.07
Draw rate (equal opponents) = 89.55 % +/- 3.51

[Maratka]

Цитата: Сообщение от Neofelis

Да я не жалуюсь на сток, но как же чистота эксперимента? Что мы получим, в итоге? Что сеть 41800 против 10-ти стоков набрала столько-то очков?

Не переживайте, сеть у LZ тоже меняют, когда приходят достоверные данные, что такая-то лучше, чем та, что сейчас играет.
Просто у SF с этим проще: зеленый патч - это практически всегда усиление, причем вся работа по проверке уже сделана на FishTest.

[Vizvezdenec]

Цитата: Сообщение от sovaz1997

Кстати, как это все выглядит без нарушителя канонов Эло Antifish (который именно против Стока играет не в свою силу):

# PLAYER         :  RATING  ERROR  POINTS  PLAYED   (%)  CFS(%)    W    D    L  D(%)  OppAvg
1 Lc0            :  3500.0   ----    61.5     114    54      52   14   95    5    83  3471.6
2 Stockfish      :  3499.3   29.8    62.5     116    54     100   17   91    8    78  3471.4
3 Leelenstein    :  3442.8   31.2    48.0     114    42     ---    2   92   20    81  3499.7

White advantage = 47.96 +/- 11.07
Draw rate (equal opponents) = 89.55 % +/- 3.51

Лиленштайн ногами пинают тут.
Напоминает какой-то Fire от мира NN - играет плотно, но недостаточно плотно против топов, а выигрывать почти не может.

[Maratka]

Цитата: Сообщение от Neofelis

Важно, что результаты турнира теперь статистически не значимы.

Почему?

А насколько будут значимы результаты турнира, где одна версия месячной давности выиграет у второй, хотя на конец турнира вторая достоверно известно, что усилилась сильнее?

Вот чисто формально: запустили допустим в TCEC матч с двухчасовым контролем в 2015-м году тогдашнего Komodo и тогдашнего SF. На сегодня наиграли бы тысяч около десяти партий, с результатом +1000 - 700 = 8300 в пользу Komodo.
Вывод: Komodo сильнее на 10 ELO, причем партий у нас настолько много, что погрешность всего 5 ELO, т.е. Komodo не просто победил в матче, а доказал, что он сильнее.

Ну и что с этой информацией будем делать, какова ее ценность?

[Neofelis]

Цитата: Сообщение от Maratka

Не переживайте, сеть у LZ тоже меняют, когда приходят достоверные данные, что такая-то лучше, чем та, что сейчас играет.
Просто у SF с этим проще: зеленый патч - это практически всегда усиление, причем вся работа по проверке уже сделана на FishTest.

Вы не поняли. Я против того, чтобы по ходу турнира меняли. Между - пожалуйста. Давайте еще в финале TCEC будем менять. Что у нас выйдет? Какая-то каша.

[Maratka]

Цитата: Сообщение от Neofelis

Вы не поняли. Я против того, чтобы по ходу турнира меняли.

А я против того, чтобы три сети играли против одной a-b. Хотите равенство - завезите еще пару клонов SF.

Но не завезли, и не завезут, ибо такие правила придумали. Зачем - не знаю, может хотели в личных встречах одним махом посмотреть, на что способны клоны на фоне оригинала, а может расчет на то, что ни одна, так другая сеть выстрелит, и SF будет повержен.

Так или иначе, правила позволяют обновить любой движок по ходу турнира, LZ в этом плане ничуть не в худшей ситуации, чем SF: второй можно менять чаще, зато замена сети у LZ (ежели успеют прокачать заметно лучшую новую) даст не 2 ELO, а сразу 10-15.

[Алексей]

Разница уже в 15.5 эло

[Vizvezdenec]

Лила белыми проигрывает Leelenstein, я её сглазил, похоже.
Просчиталась где-то...

[Maratka]

Первая победа Leelenstein над LZ.
Надо обмыть!

[Maratka]

Цитата: Сообщение от Vizvezdenec

Лила белыми проигрывает Leelenstein, я её сглазил, похоже.
Просчиталась где-то...

И на перегрев не спишешь, сервер то один!