Вопросы по теме 'mclapply'
Как я могу заставить R's lapply (и mclapply) восстановить состояние генератора случайных чисел?
R игнорирует настройку .Random.seed внутри лапши. Однако использование set.seed работает нормально.
Некоторый код:
# I can save the state of the RNG for a few seeds
seed.list <- lapply( 1:5, function(x) {...
1008 просмотров
schedule
16.03.2023
При использовании mclapply каждое отдельное ядро работает медленнее, чем его непараллельная версия.
Я изучаю параллельные вычисления в R и обнаружил, что это происходит в моих экспериментах.
Вкратце, почему в следующем примере большинство значений user в t меньше, чем в mc_t ? Моя машина имеет 32 ГБ памяти, 2 процессора с 4 ядрами и всего 8...
1317 просмотров
schedule
31.08.2022
Распараллеливание: параллельный пакет вместо mclapply
Я пытаюсь преобразовать этот код в тот, который можно выполнить в Windows:
numCores <- detectCores()
results <- mclapply(seq(1, 500), function(file, fID){
myData <- fread(file.path(dirPath, fID, paste0(file, ".csv")))...
299 просмотров
schedule
25.02.2023
Маклаппли и spark_read_parquet
Я относительно новичок в качестве активного пользователя форума, но сначала должен поблагодарить всех вас за ваш вклад, потому что я много лет искал ответы...
Сегодня у меня вопрос, который никто не решил или я не могу найти...
Я пытаюсь читать...
154 просмотров
schedule
02.03.2023
Версии lapply() и mclapply(), которые избегают избыточной обработки
Я ищу версии lapply() и mclapply() , которые обрабатывают только уникальные элементы списка аргументов X . Что-то подобное уже существует?
EDIT : Другими словами, я хочу, чтобы lapply() не беспокоила обработка дубликатов, но я хочу, чтобы...
161 просмотров
schedule
08.02.2023
Как написать эффективные вложенные функции для распараллеливания?
У меня есть кадр данных с двумя переменными группировки class и group . Для каждого класса у меня есть задание на график для каждой группы. В основном у меня 2 уровня на class и 500 уровней на group .
Я использую пакет parallel для...
103 просмотров
schedule
03.08.2023
Почему параллельные задания не печатаются в RStudio?
Почему сценарии, распараллеленные с помощью mclapply , печатаются в кластере, а не в RStudio? Просто из любопытства спрашиваю.
mclapply(1:10, function(x) {
print("Hello!")
return(TRUE)
}, mc.cores = 2)
# Hello prints in slurm but not RStudio
299 просмотров
schedule
13.08.2022
mclapply() использует только 2 ядра в 32-ядерной системе
Я пытаюсь сократить время вычислений, связанное с несоответствием раупа и крика, как рассчитано Chase et al. 2011 . Для этого я пытаюсь использовать параллельные вычисления на 32-ядерной машине на базе Ubuntu, на которой работает сервер Rstudio....
65 просмотров
schedule
31.05.2022