Как работает n_points в skopt BayesSearchCV?

Question

Я не понимаю, как работают n_points в skopt BayesSearchCV. Как я понял, поиск Байеса последовательный. Но в skopt BayesSearchCV мы можем установить параметр n_point, который указывает количество настроек параметров для параллельной выборки. Как работает этот параллелизм? Выполняет ли он количество независимых байесовских поисков n_points или выполняет пакетную байесовскую оптимизацию?

Answer 1

На основе исходного кода, BayesSearchCVгенерирует и пробует пакет наборов параметров размером n_pointsна каждом этапе оптимизации. (видеть BayesSearchCV._stepа также optimzer.ask)

Таким образом, наборы параметров в пакете генерируются с одинаковым объемом «знаний» о пространстве параметров. Это компенсирует более быстрый поиск в пространстве параметров (при условии, что n_jobs> 1) с повышенным риском использования некачественных наборов параметров.

Обратите внимание, что размер партии будет вычтен из n_iterподсчитывается, поэтому появляется различие между количеством испробованных наборов параметров и количеством итераций байесовской оптимизации. Например, если n_iter=100а также n_points=5то будет 20 раундов оптимизации.