Описание тега snowfall

Вопросы с тегом
Обертка для удобства использования вокруг снега для упрощения разработки параллельных программ R.
1 ответ

Инициализация кластера MPI со снегопадом R

Я пытался бежать Rmpi а также snowfall в кластерах моего университета, но по какой-то причине, независимо от того, сколько вычислительных узлов я выделил, мой snowfall инициализация продолжается только на одном узле. Вот как я его инициализирую: sfI…
27 июл '13 в 16:02
1 ответ

Проблемы с $ при использовании snowFall

Я пытаюсь использовать SnowFall для ускорения моего кода с помощью кластера. Я бы упростила версию моего кода library(snowfall) pbsnodefile = Sys.getenv("PBS_NODEFILE") machines <- scan(pbsnodefile, what="") machines nmach = length(machines) nmac…
06 дек '13 в 20:32
0 ответов

Анимация снегопада + эффекты ветра

Я хочу реализовать анимацию снегопада, и пользователи могут нажать кнопку, чтобы добавить эффекты ветра к падающему снегу. У меня есть следующие коды, которые могут заставить снег падать, но при добавлении эффектов ветра, следующие снега замедляются…
27 фев '13 в 14:56
1 ответ

R подключается к экземпляру EC2 для параллельной обработки

У меня проблемы с инициализацией соединения с экземпляром AWS EC2 от R, поскольку кажется, что я получаю сообщение об ошибке: Permission denied (publickey) В настоящее время я использую Mac OS X 10.6.8 в качестве моей ОС Код, который я пытаюсь запус…
22 ноя '12 в 22:42
2 ответа

Как управлять параллельной обработкой с помощью анимированного ggplot2-plot?

Я пытаюсь построить анимированный барплот с ggplot2 а также magick это растет на основе "день в день". К сожалению, у меня есть десятки тысяч записей в моем наборе данных (даты для каждого дня в течение нескольких лет и разных категорий), что делает…
05 июн '18 в 10:12
3 ответа

Создавать частицы без opengl и cocos2D. применение снегопада

Ну, я хотел создать частицы, такие как (снег) без openGL или cocs2D, и я нашел этот пример кода под названием snowfall и в этом коде есть это: flakeImage = [UIImage imageNamed:@"flake.png"]; // start a timet that will fire 20 times per second [NSTim…
29 ноя '11 в 15:10
1 ответ

Использование пакета снегопада в R для моделирования

Я начинаю работу с пакетом снегопада следующим образом: library(snowfall) sfInit(parallel=TRUE, cpus=6, type="SOCK") #loading packages sfLibrary(package = lars) sfLibrary(package=covTest) Функция, которую я хочу вычислить несколько раз, используя sf…
07 июн '18 в 18:15
0 ответов

Ускорение ggplot2-заговора для анимированных графиков в большом наборе данных

Я построил анимированный сюжет, используя ggplot2 а также magick из большого набора данных, содержащего десятки тысяч записей. На основании моего поста Как управлять параллельной обработкой с помощью анимированного ggplot2-plot? Теперь меня больше н…
05 июн '18 в 14:50
0 ответов

R Производительность обработки данных (пакет снегопада и объем функций)

Я немного новичок в мире программирования на R и имею дело с некоторыми проблемами, связанными с распараллеливанием обработки (не так много) больших данных. Для этого я использую пакет data.table для хранения и обработки данных, а пакет snowfall - в…
23 фев '16 в 16:44
0 ответов

Как использовать sfInit и makeCluster типа "MPI" / передача сообщений в R / распараллеливании на кластере

Я пытаюсь адаптировать этот скрипт R для теста скорости для работы на кластере. При использовании sfInit а также makecluster функции с типом "SOCK"затем сценарий запускается на кластере успешно, но без повышения скорости - в отличие от моего компьют…
11 авг '18 в 05:40
3 ответа

Как рассчитать количество вхождений в минуту для большого набора данных

У меня есть набор данных с 500k встреч продолжительностью от 5 до 60 минут. tdata <- structure(list(Start = structure(c(1325493000, 1325493600, 1325494200, 1325494800, 1325494800, 1325495400, 1325495400, 1325496000, 1325496000, 1325496600, 132549…
18 июн '13 в 12:15
1 ответ

Когда мне нужно использовать sfExport (пакет R Snowfall)

Я использую снегопад для параллельных вычислений. Я всегда на одной машине с несколькими процессорами (>20 ядер). Я обрабатываю большое количество данных (>20 ГБ). sfExport() занимает очень много времени. Когда я запускаю свои тестовые коды на своем…
23 май '14 в 11:14
2 ответа

Быстрая корреляция в R с использованием C и распараллеливания

Мой проект на сегодня заключался в том, чтобы написать процедуру быстрой корреляции на R с использованием базового набора навыков, который у меня есть. Я должен найти корреляцию между почти 400 переменными, каждая из которых имеет почти миллион набл…
23 сен '13 в 16:59
1 ответ

sfLapply & apply.rolling для объекта xts - Результирующая ошибка: индекс за пределами границ

Моя цель состоит в том, чтобы сопоставить ежедневный возврат 5 акций (объект xts) со скользящим стандартным отклонением периода возврата 90 дней (вычисление SD возврата последних 90 дней) с той же структурой данных и с быстрой скоростью, Подход с ис…
14 сен '15 в 10:25
1 ответ

Создайте линейную плотность для каждого многоугольника, используя tidyverse + sf R

У меня есть вопрос ГИС, который озадачивает меня уже некоторое время. Конечной целью было бы извлечь плотность линий на пиксель / воксель / полигон, используя пакеты tidyverse / sf. На данный момент у меня есть функция, которая работает, когда я вып…
15 мар '18 в 04:28
1 ответ

Ошибка при запуске sfLapply в R

Мой кусок кода выглядит так: x<- c(1,2,3,4,5) library(snowfall) f1<- function(a,list){ f2<-function(b,num){ return(abs(num-b))} l1<-sfLapply(list, f2, num=a) l1<-sum(unlist(l1)) return(l1) } sfInit(parallel=TRUE,cpus=4) l2<-(sfLapp…
14 дек '12 в 09:49
2 ответа

Использование снега (и снегопада) с AWS для параллельной обработки в R

Что касается моего ранее подобного вопроса SO, я попытался использовать снег / снегопад на AWS для параллельных вычислений. То, что я сделал, было: в sfInit() функция, я предоставил публичный DNS для socketHosts параметр вроде так sfInit(parallel=TR…
07 сен '11 в 12:20
1 ответ

Почему бы не балансировать нагрузку при параллельных вычислениях с использованием снегопада?

В течение долгого времени я использовал sfLapply для многих моих параллельных скриптов. Однако, недавно, когда я углубился в параллельные вычисления, я использовал sfClusterApplyLB, который может сэкономить много времени, если отдельным экземплярам …
03 фев '14 в 18:32
2 ответа

Использование -snowfall- (или других пакетов) для параллельного повторения пользовательской функции

Этот вопрос связан с этим, где я спрашивал, как скопировать пользовательскую функцию. Теперь я хотел бы распараллелить операции, чтобы сэкономить время. То, что я предварительно сделал, это: Я определил пользовательскую функцию my.fun(), который воз…
28 янв '13 в 18:04
0 ответов

Возвращает отдельную матрицу для каждого элемента вектора, переданного "apply()"

Немного искал, и еще не нашел элегантного решения этой проблемы. Я пытаюсь использовать пакет "снегопад" для запуска симуляции на нескольких ядрах. Это использует sfApply(), sfSapply или sfLapply(). Чтобы обойти сложности использования "снегопада", …
26 июн '12 в 16:56