1) У нас нет аппаратного обеспечения, подходящего для lc0, на большинстве машин (более 80% машин - это noob-машины без графического процессора);2) тестирование на внешнем движке удвоит количество ошибок, что увеличит количество игр, необходимых для надежности, в 4 раза;3) вам нужно будет написать новую логику, так как вы a) не можете использовать SPRT, b) вам нужно нормализовать скорость leela / sf до некоторого значения (как мы делаем с TC в обычных тестах), поэтому вам потребуются ассиметричные регуляторы времени;4) есть 0 доказательств того, что патчи, которые работают в самостоятельной игре, не работают против leela. На самом деле существуют противоположные доказательства, такие как список 16 ядер fastgm, где sf 11 опережает sf10 на 50 elo, и это именно то, что мы измеряем, если сравнивать их друг с другом.Итак, tldr - это трудно или почти невозможно сделать, и выгоды от этого на самом деле не существует в любом случае.
1) We don't have hardware suitable for lc0 on most of the machines (80+% of machines are noob machines w/o GPU);2) testing against external engine will double error bars thus increase amount of games needing for test to be reliable by factor of 4;3) you will need to write new logic since you a) can't use SPRT,
Каждый раз, когда вяленая рыба не является номером один раз / 2 недели, люди говорят, что она должна проверять двигатель номер один.5 лет назад это было комодо, чем хоудини (sf8 +), сейчас Лила. Там могут быть патчи, которые являются elo нейтральными, но работают хорошо против leela. Может быть. Но мы хотим, чтобы вяленая рыба играла как можно сильнее, а не "играла хорошо против Лилы".И когда он начинает играть сильнее, он (сюрприз!) Начинает играть сильнее против движка номер 1. Stockfish не нужно было ничего тестировать против komodo, чтобы превзойти komodo между sf7 и sf8, stockfish не нужно было играть против houdini, чтобы превзойти его очень быстро, вяленой рыбе не нужно тестировать против leela, чтобы превзойти его (да, leela также развивается, но я дикий предположение, что разработчик stockfish выиграет матч против сети 30 gen leela намного лучше, чем +1 очко, что сделал в суфи они играли). И любой другой пункт стоит - это должна быть огромная разработка программного обеспечения, огромные аппаратные проблемы, чтобы даже запустить этот матч и т. Д.