Публикации по теме 'mesos'


Ввод в эксплуатацию конвейеров машинного обучения на Apache Mesos и Hadoop с помощью Airflow
Архитектура для внедрения моделей машинного обучения в производство в NEW YORKER Это сообщение изначально появилось в Техническом блоге NEW YORKER . Один из наиболее эффективных вариантов использования машинного обучения в розничных компаниях - это уценка. NEW YORKER, один из крупнейших розничных продавцов модной одежды в Европе, устанавливает начальную цену для каждого товара, продаваемого в наших 1100 магазинах в 45 странах. Цена постепенно снижается в серии снижений цен до..

Вопросы по теме 'mesos'

Запуск mesos-local для тестирования фреймворка завершается с ошибкой с отказом в доступе
Я делюсь Linux-боксом с некоторыми коллегами, все они работают в мезосфере. Самый удобный способ протестировать фреймворк, с которым я обычно работаю, — это запустить mesos-local.sh (сочетая в одном и главный, и подчиненный серверы). Это...
1200 просмотров
schedule 30.11.2022

Регистрация нескольких подчиненных устройств Mesos с разных компьютеров
Я пытаюсь настроить Mesos с 1 ведущим и 3 подчиненными устройствами, работающими на нескольких компьютерах на одном коммутаторе. Каждый компьютер представляет собой 4-процессорный двухъядерный компьютер, работающий под управлением Ubuntu 13.04 . Я...
1619 просмотров
schedule 05.08.2022

Deimos Ожидается «MESOS_SLAVE_PID» в переменных окружения
Я запускаю кластер Mesos/Deimos, используя привязки Python, и получаю следующую ошибку: F0719 03:26:17.994248 7 os.hpp:131] Expecting 'MESOS_SLAVE_PID' in environment variables Эта ошибка появляется в пайлере исполнителя в веб-интерфейсе...
832 просмотров
schedule 12.07.2023

Могут ли «главные» и «подчиненные» узлы Mesos быть развернуты на одних и тех же машинах?
Могут ли «главные» узлы Apache Mesos размещаться на том же компьютере, что и «подчиненные» узлы Mesos? Точно так же (для развертывания с высокой доступностью (HA)) могут ли узлы Apache Zookeeper, используемые при выборе «главного» Mesos, быть...
5240 просмотров
schedule 24.03.2024

MESOS / MARATHON / DOCKER - Неправильный запуск Docker и переадресация портов
Я немного новичок в Mesos/Marathon и пытаюсь интегрировать его со своими образами Docker. На данный момент: Mesos 0.21 для slave & master / Marathon 0.7.5 и, конечно же, Zookeeper. Мне удалось добавить с помощью curl мои образы докеров, но, к...
839 просмотров
schedule 12.04.2023

искра с Hadoop 2.3.0 на Mesos 0.21.0 с ошибкой sh:1: hadoop: not found на ведомом
Я настраиваю искру с помощью Hadoop 2.3.0 на Mesos 0.21.0. когда я пробую искру на ведущем, я получаю эти сообщения об ошибках для stderr ведомого mesos: ВНИМАНИЕ: ведение журнала до того, как InitGoogleLogging() будет записано в STDERR....
777 просмотров
schedule 24.07.2022

Как проверить Месос Мастер?
Я новичок в Месосе. Я хотел бы знать, как узнать, правильно ли настроен мастер Mesos в узле? Я следую настройке, предоставленной http://mesos.apache.org/gettingstarted/ . Я не могу запустить следующую команду: Комментарий: Запустите мастер...
1512 просмотров
schedule 08.06.2022

Нужно установить Mesos, чтобы получить Mesos Slave?
Я пытаюсь решить этот вопрос, Чтобы получить mesos slave, нам нужно установить Mesos и начать настройку mesos slave или? А также у меня проблема с мастером мезоса, который я запускаю командой ./bin/mesos-master.sh --ip=***...
1257 просмотров
schedule 15.08.2022

Ошибка Jenkins Mesos: невозможно получить доступ к jarfile
Я пытаюсь запустить Jenkins, используя динамически генерируемые контейнеры Docker через mesos. WARNING: Logging before InitGoogleLogging() is written to STDERR I0120 12:03:47.100700 26501 fetcher.cpp:76] Fetching URI...
2893 просмотров
schedule 04.04.2023

Накладные расходы на производительность Mesos
Я работаю над разработкой некоторых контейнеров Docker для работы в кластере Mesos. Мы отправляем заказы через Chronos, которым управляет Marathon. Однако я заметил значительное снижение производительности при запуске моих контейнеров в Mesos по...
683 просмотров
schedule 21.09.2022

Контейнер Docker с запуском кластера Mesos и запуском других контейнеров Docker в кластере (с использованием Marathon)
Я только начинаю с Mesos, Docker и Marathon, но нигде не могу найти ответ на этот конкретный вопрос. Я хочу настроить кластер Mesos, работающий на Docker — для этого есть несколько интернет-ресурсов, но затем я хочу запустить контейнеры Docker поверх...
915 просмотров

Mesos Framework для оптимального распределения коротких (2-10 секунд) задач
Мне нужно выполнять короткие задачи в реальном времени (т.е. у каждой задачи есть крайний срок — обычно 1-10 секунд) различных типов. Учитывая запланированную задачу типа A, я хочу, чтобы Mesos отправил задание подчиненному устройству, которое...
514 просмотров

Не удается запустить spark-submit с jar-файлом приложения в кластере Mesos.
Mesosphere проделала большую работу по упрощению процесса запуска Spark на Mesos. Я использую это руководство для настройки кластера Mesos для разработки в Google Cloud Compute. https://mesosphere.com/docs/tutorials/run-spark-on-mesos/ Я могу...
4259 просмотров
schedule 07.03.2023

Стром на Месосе в AWS
Я запускаю штормовой кластер на AWS. Но я хочу, чтобы штормовой кластер расширялся автоматически, когда в этом возникнет необходимость. Я понял, что мезос - это что-то вроде этого. Но у меня мало знаний о мезосе и его развертывании на AWS. Может...
247 просмотров

Есть ли у Apache Aurora API?
Является ли клиент командной строки единственным способом отправки заданий? Есть ли REST или API для конкретного языка?
749 просмотров
schedule 02.11.2022

Ошибка запуска docker с параметрами -v в CentOS6.5
Резюме Я пытаюсь настроить кластер Mesos с помощью контейнеров Docker. Но команда docker run не работает с параметрами тома -v и успешно выполняется без параметров тома. Сообщение выглядит следующим образом, FATA[0008] Error response...
115 просмотров
schedule 04.01.2023

Выборы лидера в кластере Mesos, кажется, не работают
Я настраиваю кластер Mesos (ZooKeeper+Mesos) с помощью докера, с тремя узлами (A, B, C), на каждом из которых запущены контейнеры zookeeper, master и slave. узлы B и C перенаправляют друг друга (кворум=2) Когда я запускаю контейнер...
1894 просмотров
schedule 17.10.2022

Контейнер мезосферы/хроноса Docker выходит из строя сразу после запуска
Я пытаюсь запустить Chronos в Docker, используя образ mesosphere/chronos . Из командной строки Выполнение следующей команды для запуска образа не работает нормально. docker run -p 8081:8081 -t mesosphere/chronos:latest /usr/bin/chronos...
691 просмотров
schedule 24.05.2023

Запуск нескольких брокеров Kafka на Mesos в качестве заданий Marathon
Я хочу запустить несколько брокеров Kafka на Mesos в качестве заданий Marathon. Думаю что использовать в качестве ID брокера. Я знаю, что некоторые люди используют идентификатор брокера на основе IP, но я читал, что этот подход не оптимален для...
578 просмотров
schedule 20.07.2023

Запустите Spark через Mesos
Я пытаюсь запустить Spark через кластер Mesos, я успешно запустил диспетчер искр через мастер mesos и зарегистрировал платформу искры. Но когда я пытаюсь запустить какое-либо задание (spark-submit или spark-shell), инициализация останавливается и...
722 просмотров
schedule 12.12.2022