Публикации по теме 'aws'


Моделирование моделей непрерывного обучения с помощью воздушного потока
Настройте инструмент управления рабочим процессом для воссоздания моделей через равные промежутки времени в течение 13 минут. Непрерывное обучение - это процесс, с помощью которого система адаптивно узнает о внешнем мире. В контексте машинного обучения модель постоянно узнает больше о предметной области, в которой она обучается, посредством автономной и поэтапной разработки. Это позволяет модели изучать более сложную логику, знания и функции, которые могут помочь делать более точные..

Использование пользовательской модели для логического вывода машинного обучения с помощью Amazon SageMaker
Недавно мы начали работать над проектом в trivago, который требует использования CNN (сверточных нейронных сетей) для прогнозирования изображений. Поскольку уже имеющиеся модели не дают приемлемых результатов, мы использовали модифицированную версию VGG16 , чтобы преодолеть это. В этой статье я объясню, как мы развернули Amazon SageMaker для использования пользовательской модели и созданного нами пользовательского кода логического вывода. Которые мы не будем здесь обсуждать:..

5 соображений перед написанием интеграционных тестов для бессерверных приложений
Ранние решения, чтобы свести к минимуму ваши будущие сожаления Подобно модульным тестам, написание интеграционных тестов требует принятия многих решений вне самого кода. Сегодня я хотел бы поделиться тем, о чем мы сожалеем, о чем хотели бы подумать перед написанием тестов. У всех разные определения «интеграционного тестирования». Другие проблемы по сравнению с модульным тестированием Принятие компромиссных решений относительно зависимостей Что обычно ломается в бессерверных..

Ansible для настройки балансировщика нагрузки HAProxy и веб-серверов на AWS (динамическая инвентаризация)
В этом блоге я продемонстрирую, как я создал Ansible Playbook, который может выполнять следующие операции: Настройте веб-серверы на инстансах AWS EC2 . 2. Настройте балансировщик нагрузки на экземпляре AWS. 3. Получите IP-адреса экземпляров, используя концепцию динамической инвентаризации. 4. Целевые узлы балансировщика нагрузки должны автоматически обновляться в соответствии со статусом веб-серверов. Требования: Ansible настроен на узле управления. Экземпляры..

4 способа запуска заданий Cron в AWS
Есть несколько способов запускать периодические задания в AWS. В этом посте я поделюсь несколькими вариантами, которые я успешно использовал в прошлом. Ни для одного из них не требуется долгосрочная инфраструктура, и вы будете платить только за ресурсы, которые используете во время выполнения заданий. Моя цель - поделиться несколькими вариантами, чтобы вы могли выбрать тот, который лучше всего соответствует вашим потребностям. События CloudWatch + Lambda Это, вероятно, самый..

Создайте конвейер Jenkins CICD для создания образа Docker
В этой статье я поделюсь пошаговым руководством по созданию конвейера непрерывной интеграции и непрерывной доставки (CI / CD) с помощью Jenkins. И как этот конвейер настроен для создания образов Docker. Кроме того, я интегрировал Jenkins со Splunk, чтобы обеспечить возможность отслеживать и оценивать их операционные характеристики. Освежение некоторых важных концепций Непрерывная интеграция направлена ​​на объединение рабочих продуктов отдельных разработчиков в репозиторий. Часто..

Apache Spark и Hadoop в кластере AWS с Flintrock: часть 4
Apache Spark и Hadoop в кластере AWS с Flintrock: часть 4 Локальная загрузка Spark и развертывание проекта Spark в EC2 Первый раздел в серии «Наука о данных и расширенная аналитика в Spark, Scala, AWS и машинном обучении». Локальная загрузка Spark и развертывание проекта Spark в EC2 В этой части вы разрабатываете приложение Spark в своей обычной среде разработки, и когда вы будете готовы, вы отправите это задание для запуска в кластере Spark, работающем на EC2. Для этого нам..