Вопросы по теме 'parallel-foreach'

Максимальное количество рабочих/рабов для параллельной работы Snow
Я запускаю цикл foreach со снежным бэкэндом на машине с Windows. У меня есть 8 ядер для работы. Rscript выполняется через системный вызов, встроенный в скрипт Python, поэтому также будет активный экземпляр Python. Есть ли какая-то польза от...
121 просмотров

параллельные вычисления в R, реализация начальной загрузки
В настоящее время я пытаюсь вычислить оценки модели с помощью начальной загрузки BLB и хотел бы сделать это параллельно. мой код отлично работает, когда я не делаю его параллельно. проблема, когда я выполняю параллельные вычисления, заключается в...
390 просмотров

doParallel (пакет) foreach не работает для больших итераций в R
Я запускаю следующий код (извлеченный из виньетки doParallel ) на ПК (ОС Linux) с 4 и 8 физическими и логическими ядрами соответственно. Запустив код с iter=1e+6 или меньше, все в порядке, и я вижу по загрузке ЦП, что все ядра используются для...
6645 просмотров

Как я могу перечислить только функции и те, которые приходят из пакета
Я использую пакет foreach для распараллеливания некоторых вещей, и я устал указывать 5 функций в .export каждый раз, когда мне нужно его использовать. Я знаю, что могу сделать foreach(...,.export=ls(.GlobalEnv)) , но это передает много данных...
49 просмотров
schedule 14.01.2023

Сохраняет ли параллельный foreach в R объекты для дополнительных итераций в рамках одной и той же дочерней операции?
Я запускаю процесс параллельно, используя бэкэнд doParallel / Foreach в R. Я регистрирую набор из 20 ядер как кластер и запускаю процесс примерно 100 раз. Я передаю матрицу каждой итерации параллельных процессов, а в подпроцессе заменяю матрицу...
173 просмотров
schedule 07.05.2023

Стандартный вывод не получен внутри цикла foreach
Я использую doParallel для довольно долгой параллельной обработки с foreach . В отличие от большинства примеров, которые я вижу, где в цикл подается код с интенсивными вычислениями, но легкий ввод, я использую foreach для координации...
814 просмотров
schedule 12.11.2022

Оценка случайной модели леса, созданной в результате параллельной обработки
Я пытаюсь запустить случайный лес, используя пакет foreach для параллельной обработки. Вот код, который я запускаю. library(doParallel) library(doMC) library(foreach) library(randomForest) Train <- read.csv("Train_Parallel.csv") Test <-...
467 просмотров
schedule 10.04.2022

FBM() из bigstatsr неправильно вычисляет матрицу при использовании параллельного foreach, как это происходит, когда код выполняется в простом цикле for.
Мне нужно оценить Матрицу перехода. Поскольку у меня много данных, я попытался запустить их параллельно, используя foreach , и я попробовал функцию общей памяти FBM() из bigstatsr . И похоже, что функция не всегда возвращает правильный...
191 просмотров

doParallel аварийно завершает работу на компьютере с Windows10 с ошибкой unserialize(socklist[[n]])
Я пытаюсь прочитать NetCDF, а затем выполнить растровую обработку и преобразовать их в определенный формат с помощью пакета R doParallel. Я привожу здесь только короткую воспроизводимую версию с использованием данных из растрового пакета. Этот...
242 просмотров
schedule 15.05.2022