Публикации по теме 'aws-batch'


ML Tale: создание автоматизированного конвейера обучения машинному обучению и масштабирование сервиса
В Onfido мы используем самые современные методы компьютерного зрения и машинного обучения для решения сложной проблемы проверки личности пользователей по всему миру. В этой статье мы расскажем, как мы увеличили масштаб одной из наших услуг от экспериментальной до рабочей, обслуживая тысячи запросов в день. Для этой услуги мы создали автоматизированный конвейер обучения машинному обучению с использованием AWS Batch для создания новых моделей и расширения охвата этой услуги. Этот..

Как мы используем AWS Batch в Zendesk для построения всех моделей машинного обучения
В первой части этой эпической трилогии Вай Чи Яу рассказал, почему мы выбрали AWS Batch в качестве решения нашей проблемы: масштабирование построения моделей машинного обучения для нашего продукта Content Cues . возможность одновременного выполнения 50k заданий. В этой статье я более подробно опишу точное техническое решение, которое мы разработали, включая: наш конвейер развертывания как мы отправляем задания AWS Batch и варианты конфигурации Надеюсь, это даст некоторое..

Вопросы по теме 'aws-batch'

Почему python tesserocr не использует 4 ядра ЦП в AWS Batch?
Я пытаюсь запустить библиотеку python tesserocr на 4 ядрах. Согласно документации tesseract, я понимаю, что он поддерживает до 4 ядер. У меня есть задание tesserocr python3.x, выполняющееся внутри AWS Batch (контейнер докеров на основе amazonlinux:...
299 просмотров

Как сделать AWS Batch Volume постоянным?
У меня есть два докер-контейнера: первый извлекает файл из S3 и сохраняет его в томе, а второй читает и печатает файл. Чтобы поделиться файлами, я использую Docker Volume. Теперь, когда я хочу запустить это в AWS Batch, я определяю том и точки...
729 просмотров

AWS Batch, AWS ECR: запуск Docker выдает ошибку x509: сертификат подписан неизвестным органом
Чтобы создать задание AWS Batch, я пытаюсь создать образ Docker, используя базовый образ Ubuntu Linux. Из контейнера Docker я хочу записать несколько записей в AWS DynamoDB и загрузить некоторые файлы в S3. Эти шаги выполняются программой...
882 просмотров

Обрабатывает ли облачная задача Spring автоматическое закрытие модулей Kubernetes после завершения рабочего узла
Я пишу пакетное приложение Spring в облаке AWS, и для обеспечения эффективного использования ресурсов у меня возник вопрос: обрабатывает ли облачная задача Spring автоматическое закрытие модулей Kubernetes после завершения рабочего узла. Если...
30 просмотров