Я заинтересован в использовании библиотеки tune для обучения с подкреплением, и я хотел бы использовать встроенную возможность tensorboard. Однако метрика, которую я использую для настройки своих гиперпараметров, основана на длительной процедуре...

В учебнике по лучам объясняется, что для того, чтобы иметь метод для объекта, который возвращает несколько object_id, можно использовать декоратор @ray.method() см. здесь . Но в примере «Учимся играть в понг» метод вычислить градиент на самом деле...

Я пытаюсь распечатать распределения действий в конце каждого эпизода, чтобы увидеть, что делает мой агент. Я попытался поставить это rock_paper_scissors_multiagent.py, включив следующий метод def on_episode_end(info): episode =...

Я создал учащегося (удаленный объект, украшенный @ray.remote ) в одном процессе Python, и теперь я хочу создать рабочего в новом процессе (запущенном python new_file.py либо на той же машине, либо на другой машине) и подключить его к тот ученик....

У меня есть рабочая станция с 72 ядрами (на самом деле 36 многопоточных процессоров, показанные multiprocessing.cpu_count() как 72 ядра). Я пробовал как multiprocessing , так и ray для параллельной обработки, в пакетах из миллионов небольших...

Есть ли способ использовать луч с сельдереем. Какой исполнитель использовать. Я попробовал игрушечную реализацию и столкнулся со следующей ошибкой: [2020-05-25 00:21:07,473: ERROR/ForkPoolWorker-5] Task...

Я пытаюсь сначала обучить PPOTrainer на 250 итераций в простой среде, а затем закончить обучение в модифицированной среде. (Единственная разница между средами - это изменение одного из параметров конфигурации среды). До сих пор я пробовал...

Я пытаюсь включить ray в свой пакет. Однако для использования ray необходимы некоторые зависимости, которые следует установить через pip install ray[all] . Если я просто добавлю ray[all] в install_requires из setup.py , например: setup(...

Возможно, это глупый вопрос, так как я новичок в ray , но мой тест настройки гиперпараметров (на одной машине) проходит несколько ERROR ed испытаний, и я вижу следующие сообщения, предлагающие мне найти журналы рабочих, чтобы увидеть трассировку...

Я кратко опишу свой вариант использования: предположим, что я хотел развернуть кластер с 10 рабочими на AWS: в прошлом я всегда использовал параметры initial_workers: 10 , min_workers: 0 , max_workers: 10 ( cluster.yaml ), чтобы сначала развернуть...