Вопросы по теме 'mclapply'

Как я могу заставить R's lapply (и mclapply) восстановить состояние генератора случайных чисел?
R игнорирует настройку .Random.seed внутри лапши. Однако использование set.seed работает нормально. Некоторый код: # I can save the state of the RNG for a few seeds seed.list <- lapply( 1:5, function(x) {...
1008 просмотров
schedule 16.03.2023

При использовании mclapply каждое отдельное ядро ​​работает медленнее, чем его непараллельная версия.
Я изучаю параллельные вычисления в R и обнаружил, что это происходит в моих экспериментах. Вкратце, почему в следующем примере большинство значений user в t меньше, чем в mc_t ? Моя машина имеет 32 ГБ памяти, 2 процессора с 4 ядрами и всего 8...
1317 просмотров
schedule 31.08.2022

Распараллеливание: параллельный пакет вместо mclapply
Я пытаюсь преобразовать этот код в тот, который можно выполнить в Windows: numCores <- detectCores() results <- mclapply(seq(1, 500), function(file, fID){ myData <- fread(file.path(dirPath, fID, paste0(file, ".csv")))...
299 просмотров
schedule 25.02.2023

Маклаппли и spark_read_parquet
Я относительно новичок в качестве активного пользователя форума, но сначала должен поблагодарить всех вас за ваш вклад, потому что я много лет искал ответы... Сегодня у меня вопрос, который никто не решил или я не могу найти... Я пытаюсь читать...
154 просмотров
schedule 02.03.2023

Версии lapply() и mclapply(), которые избегают избыточной обработки
Я ищу версии lapply() и mclapply() , которые обрабатывают только уникальные элементы списка аргументов X . Что-то подобное уже существует? EDIT : Другими словами, я хочу, чтобы lapply() не беспокоила обработка дубликатов, но я хочу, чтобы...
161 просмотров
schedule 08.02.2023

Как написать эффективные вложенные функции для распараллеливания?
У меня есть кадр данных с двумя переменными группировки class и group . Для каждого класса у меня есть задание на график для каждой группы. В основном у меня 2 уровня на class и 500 уровней на group . Я использую пакет parallel для...
103 просмотров
schedule 03.08.2023

Почему параллельные задания не печатаются в RStudio?
Почему сценарии, распараллеленные с помощью mclapply , печатаются в кластере, а не в RStudio? Просто из любопытства спрашиваю. mclapply(1:10, function(x) { print("Hello!") return(TRUE) }, mc.cores = 2) # Hello prints in slurm but not RStudio
299 просмотров
schedule 13.08.2022

mclapply() использует только 2 ядра в 32-ядерной системе
Я пытаюсь сократить время вычислений, связанное с несоответствием раупа и крика, как рассчитано Chase et al. 2011 . Для этого я пытаюсь использовать параллельные вычисления на 32-ядерной машине на базе Ubuntu, на которой работает сервер Rstudio....
65 просмотров