Функции, не находящие переменные или окружение, когда внутри цикла foreach
Я пытаюсь построить R package
который содержит функцию верхнего уровня внутри пары nested foreach
петли. Эта функция верхнего уровня затем вызывает набор дополнительных вложенных функций. У меня проблема с лексической областью видимости, функции более низкого уровня не могут найти ни среду, в которую я помещаю переменные, ни переменные. Я пытался использовать attach
В соответствии с этим примером присоединения, но более низкие функции могут все еще не видеть необходимые аргументы. Я знаю, что есть кое-что конкретное в doMPI с использованием метода разветвления. Это на Ubuntu Linux (16.04) с использованием doMPI (0.2.2) и foreach (1.4.3) и openmpi. Это модель гораздо большей модели, которая у меня есть. Пакет и скрипт для запуска / тестирования, который называется toymod4 package, доступны для скачивания.
#' Test function level 1
#' @param num.sim first variable for function 1
#' @param num.per second variable for function 1
#' @param num.day third variable for function 1
#' @param fun2.params parameters for function 2
#' @param fun31.params parameters for first call of function 3
#' @param fun32.params parameters for second call of funtion 3
#' @param fun4.params parameters for call to function 4
#' @export fun1
fun1 <- function (fun2.params, fun31.params, fun32.params, fun4.params,
num.sim=10, num.per=8, num.day=5, ...) {
final.results <- data.frame (foreach::`%dopar%`(
foreach::`%:%`(foreach::foreach(j = 1:num.sim,
.combine = cbind,
.packages= c("toymod4")),
foreach::foreach (i = 1:num.per,
.packages = c("toymod4"),
.combine=rbind)), {
e1 <- new.env()
e1 <- list2env(c(fun2.params, fun31.params, fun32.params,
fun4.params), e1)
out3 <- replicate(num.day, fun2(e1, var21, var22, fun22on))
out2 <- data.frame(mean(out3))
}
)
)
## save outputs for subsequent analyses if required
saveRDS(final.results, file = paste(num.day ,"_", num.per, "_", num.sim, "_",
format(Sys.time(), "%d_%m_%Y"),
".rds", sep=""))
return(final.results)
}
#' Test function level 2
#' @param var21 first variable for function 2
#' @param var22 second variable for function 2
#' @param fun22on turn this copy of fun3 on or off
#' @param env environment to get variables from
#' @export fun2
fun2 <- function (env, var21, var22, fun22on, ...) {
attach(env)
out21 <- ifelse (rpois(1, var21) > 0, var22 * fun3(e1, fun3on, var31), 0)
out22 <- ifelse (fun22on, fun3(e1, fun3on, var31), 0)
out2 <- out21 + out22
detach(env)
out2
}
#' Test function level 3
#' @param var31 first variable for function 3
#' @param fun3on turn the formula on or off
#' @export fun3
fun3 <- function (env, fun3on, var31, ...) {
attach(env)
out31 <- ifelse (fun3on, var31, 1)
out32 <- ifelse (fun3on, fun4(e1, fun4on, var41), 0)
out3 <- out31 + out32
detach(env)
out3
}
#' Test function level 4
#' @param var41 first variable for function 4
#' @param fun4on turn the formula on or off
#' @export fun4
fun4 <- function (env, fun4on, var41, ...) {
attach(env)
out4 <- ifelse (fun4on, var41, 1)
detach(env)
out4
}
1 ответ
Мне удалось найти решение этой проблемы, благодаря щедрой помощи Стива Уэстона. Вместо того, чтобы пытаться объяснить все это, я разместил его на github по этому адресу https://github.com/jamaas/VarPasMpiExamp.git Это один из способов передачи значений переменных в функции, содержащиеся в цикле foreach. Теоретически, он должен работать для R, foreach в любой операционной системе, используя любой параллельный бэкэнд, однако еще не был протестирован на всех. Разработка и тестирование этой версии проводились на Ubuntu 16.04 (Debian) Linux. Дайте мне знать, если этот метод работает для вас, или, особенно, если у вас есть более простое, более элегантное решение.