Вопросы по теме 'google-cloud-tpu'

Перепишите tf.Session в tf.Estimator API.
У меня есть некоторый код, который был написан с помощью низкоуровневого API tf.Session, и, поскольку я хочу использовать его на TPU, я должен лучше всего переписать его в API tf.Estimator, поскольку для ускорения TPU существует класс TPUEstimator....
232 просмотров
schedule 23.05.2023

GCE Как использовать ImageDataGenerator в google TPU
У меня есть модель Keras, но она слишком велика для моего локального ПК, и я пытаюсь перейти в облако Google, чтобы использовать TPU. Примеры, которые я видел, используются в изображениях памяти для обучения модели с помощью функции подгонки. У...
1742 просмотров

Хранилище Google Colab
Кто-нибудь знает пределы хранилища для запуска Google Colab? Кажется, у меня заканчивается место после загрузки zip-файла 22 ГБ, а затем попытки его распаковать, предполагая, что доступно
12142 просмотров

Google colab TPU и чтение с диска во время обучения
У меня 100к фоток, и в барабан не влезает, так что надо читать с диска во время тренировки. dataset = tf.data.Dataset.from_tensor_slices(in_pics) dataset = dataset.map(extract_fn) def extract_fn(x): x = tf.read_file(x) x =...
529 просмотров

Google Colab TPU занимает больше времени, чем графический процессор
Ниже приведен код, который я использую. Я закомментировал строку, чтобы преобразовать мою модель в модель TPU. С графическим процессором для того же объема данных требуется 7 секунд для эпохи, а с использованием TPU - 90 секунд. Inp =...
2268 просмотров

Как сохранить модель Кераса, обученную на ТПУ?
Я использую среду Colab для экспериментов с моделью lstm. Но не может спасти обученную модель. sess = tf.keras.backend.get_session() training_model = lstm_model(seq_len=100, batch_size=128, stateful=False) tpu_model =...
1785 просмотров

Есть ли способ использовать несколько правильных показателей для обучения keras на TPU?
Я сделал небольшую модель с помощью Keras в лаборатории Google. И я вижу неправильные показатели, когда запускаю обучение на TPU. Когда я запускаю обучение на CPU / GPU, конечно, метрики m1 и m2 показывают правильное число. (см. код ниже) Но...
277 просмотров

Ошибка Colab TPU - InvalidArgumentError: неподдерживаемый тип данных для TPU: double, вызванный выходом cond_8 / Merge: 0
Я пытаюсь выполнить базовую классификацию символов в Google Colab с помощью TPU. Я получаю следующую ошибку: InvalidArgumentError: Unsupported data type for TPU: double, caused by output cond_8/Merge:0 Я не знаю, в чем проблема, поскольку я...
990 просмотров

Подключите Colab к платному ТПУ
Я хочу подключить Colab к ПЛАТНОМУ TPU (обновление с бесплатного TPU). Я создал ключ JSON с помощью этого руководства: https://cloud.google.com/docs/authentication/production#auth-cloud-explicit-python , а затем загрузил его в Colab. Я могу...
696 просмотров

Почему Google colab TPU медленный?
Я использую Talos для настройки гиперпараметров модели Keras . Запуск этого короткого кода в Google colab TPU выполняется очень медленно. Я думаю, это как-то связано с типом данных. Должен ли я преобразовать его в тензоры, чтобы ускорить TPU...
1138 просмотров

Вывод по TPU для модели, обученной на GPU (API Tensorflow Object Detection)
Я пытаюсь следовать приведенному ниже руководству по экспорту некоторой модели обнаружения объектов (на основе API обнаружения объектов Tensorflow), обученной с помощью графического процессора для использования в TPU для вывода,...
244 просмотров
schedule 09.07.2022

Google Cloud VM по-прежнему использует CPU вместо TPU для выполнения скрипта Python/Tensorflow
Я настроил машину TPU в Google Cloud и думаю, что сделал это правильно, потому что когда я запускаю ctpu status , он возвращает RUNNING . Однако у меня есть скрипт Python, который я пытаюсь запустить, и я хочу, чтобы он использовал TPU. Однако...
56 просмотров

Невозможно создать узлы TPU: RESOURCE_EXHAUSTED
Я использую бесплатную пробную учетную запись для обучения TPU моим моделям глубокого обучения с включенной учетной записью для выставления счетов, и в моей учетной записи все еще есть промокупоны на сумму более 100 долларов США. 2 дня назад мой...
346 просмотров
schedule 07.08.2023

Зона Google Colab
Мне нужно разместить свой набор данных в GCS в той же зоне, чтобы не платить за обучение на TPU и чтение больших наборов данных из GCS. Кто-нибудь знает, как узнать текущую зону инстанса Google Colab?
254 просмотров

Как найти название и зону TPU в Google Colab?
Я пытаюсь запустить код, для которого требуется имя TPU и зона в config. Как я могу найти имя и зону TPU в Google Colab, используя среду выполнения TPU?
63 просмотров