Как сообщить о результатах перекрестной проверки на бумаге: можно ли вручную выбрать лучшие результаты?
Доброе утро. Что касается интерпретации результатов N-кратной перекрестной проверки с передискретизацией (SMOTE), я поднимаю вопрос, чтобы написать статью.
В настоящее время я выполнил 5-кратную перекрестную проверку путем случайного перетасовки пациентов для модели, которая предсказывает прогноз пациента (хороший или плохой) и, таким образом, получил пять AUC.
Среднее значение AUC для этого было получено около 0,90, но меня беспокоит то, что всякий раз, когда я выполняю 5-кратную перекрестную проверку и избыточную выборку, субъект, используемый для обучения / тестирования, также изменяется случайным образом, со средним значением AUC от 0,85 до 0,96., В этом случае при написании статьи мне интересно, есть ли проблема в выборе случая, когда среднее значение AUC является лучшим. (В случае связанных с ними работ у меня есть обзор литературы, они просто прошли "перекрестная проверка показала стабильный результат (AUC ** - **)".)
Было бы очень полезно, если бы вы дали мне знать.