Вопросы по теме 'parallel-foreach'
Максимальное количество рабочих/рабов для параллельной работы Snow
Я запускаю цикл foreach со снежным бэкэндом на машине с Windows. У меня есть 8 ядер для работы. Rscript выполняется через системный вызов, встроенный в скрипт Python, поэтому также будет активный экземпляр Python.
Есть ли какая-то польза от...
121 просмотров
schedule
03.03.2023
параллельные вычисления в R, реализация начальной загрузки
В настоящее время я пытаюсь вычислить оценки модели с помощью начальной загрузки BLB и хотел бы сделать это параллельно. мой код отлично работает, когда я не делаю его параллельно. проблема, когда я выполняю параллельные вычисления, заключается в...
390 просмотров
schedule
15.01.2023
doParallel (пакет) foreach не работает для больших итераций в R
Я запускаю следующий код (извлеченный из виньетки doParallel ) на ПК (ОС Linux) с 4 и 8 физическими и логическими ядрами соответственно.
Запустив код с iter=1e+6 или меньше, все в порядке, и я вижу по загрузке ЦП, что все ядра используются для...
6645 просмотров
schedule
17.03.2024
Как я могу перечислить только функции и те, которые приходят из пакета
Я использую пакет foreach для распараллеливания некоторых вещей, и я устал указывать 5 функций в .export каждый раз, когда мне нужно его использовать.
Я знаю, что могу сделать foreach(...,.export=ls(.GlobalEnv)) , но это передает много данных...
49 просмотров
schedule
14.01.2023
Сохраняет ли параллельный foreach в R объекты для дополнительных итераций в рамках одной и той же дочерней операции?
Я запускаю процесс параллельно, используя бэкэнд doParallel / Foreach в R. Я регистрирую набор из 20 ядер как кластер и запускаю процесс примерно 100 раз. Я передаю матрицу каждой итерации параллельных процессов, а в подпроцессе заменяю матрицу...
173 просмотров
schedule
07.05.2023
Стандартный вывод не получен внутри цикла foreach
Я использую doParallel для довольно долгой параллельной обработки с foreach . В отличие от большинства примеров, которые я вижу, где в цикл подается код с интенсивными вычислениями, но легкий ввод, я использую foreach для координации...
814 просмотров
schedule
12.11.2022
Оценка случайной модели леса, созданной в результате параллельной обработки
Я пытаюсь запустить случайный лес, используя пакет foreach для параллельной обработки. Вот код, который я запускаю.
library(doParallel)
library(doMC)
library(foreach)
library(randomForest)
Train <- read.csv("Train_Parallel.csv")
Test <-...
467 просмотров
schedule
10.04.2022
FBM() из bigstatsr неправильно вычисляет матрицу при использовании параллельного foreach, как это происходит, когда код выполняется в простом цикле for.
Мне нужно оценить Матрицу перехода. Поскольку у меня много данных, я попытался запустить их параллельно, используя foreach , и я попробовал функцию общей памяти FBM() из bigstatsr . И похоже, что функция не всегда возвращает правильный...
191 просмотров
schedule
01.10.2022
doParallel аварийно завершает работу на компьютере с Windows10 с ошибкой unserialize(socklist[[n]])
Я пытаюсь прочитать NetCDF, а затем выполнить растровую обработку и преобразовать их в определенный формат с помощью пакета R doParallel. Я привожу здесь только короткую воспроизводимую версию с использованием данных из растрового пакета. Этот...
242 просмотров
schedule
15.05.2022