Публикации по теме 'mesos'
Ввод в эксплуатацию конвейеров машинного обучения на Apache Mesos и Hadoop с помощью Airflow
Архитектура для внедрения моделей машинного обучения в производство в NEW YORKER
Это сообщение изначально появилось в Техническом блоге NEW YORKER .
Один из наиболее эффективных вариантов использования машинного обучения в розничных компаниях - это уценка. NEW YORKER, один из крупнейших розничных продавцов модной одежды в Европе, устанавливает начальную цену для каждого товара, продаваемого в наших 1100 магазинах в 45 странах. Цена постепенно снижается в серии снижений цен до..
Вопросы по теме 'mesos'
Запуск mesos-local для тестирования фреймворка завершается с ошибкой с отказом в доступе
Я делюсь Linux-боксом с некоторыми коллегами, все они работают в мезосфере. Самый удобный способ протестировать фреймворк, с которым я обычно работаю, — это запустить mesos-local.sh (сочетая в одном и главный, и подчиненный серверы).
Это...
1200 просмотров
schedule
30.11.2022
Регистрация нескольких подчиненных устройств Mesos с разных компьютеров
Я пытаюсь настроить Mesos с 1 ведущим и 3 подчиненными устройствами, работающими на нескольких компьютерах на одном коммутаторе. Каждый компьютер представляет собой 4-процессорный двухъядерный компьютер, работающий под управлением Ubuntu 13.04 . Я...
1619 просмотров
schedule
05.08.2022
Deimos Ожидается «MESOS_SLAVE_PID» в переменных окружения
Я запускаю кластер Mesos/Deimos, используя привязки Python, и получаю следующую ошибку:
F0719 03:26:17.994248 7 os.hpp:131] Expecting 'MESOS_SLAVE_PID' in environment variables
Эта ошибка появляется в пайлере исполнителя в веб-интерфейсе...
832 просмотров
schedule
12.07.2023
Могут ли «главные» и «подчиненные» узлы Mesos быть развернуты на одних и тех же машинах?
Могут ли «главные» узлы Apache Mesos размещаться на том же компьютере, что и «подчиненные» узлы Mesos? Точно так же (для развертывания с высокой доступностью (HA)) могут ли узлы Apache Zookeeper, используемые при выборе «главного» Mesos, быть...
5240 просмотров
schedule
24.03.2024
MESOS / MARATHON / DOCKER - Неправильный запуск Docker и переадресация портов
Я немного новичок в Mesos/Marathon и пытаюсь интегрировать его со своими образами Docker.
На данный момент: Mesos 0.21 для slave & master / Marathon 0.7.5 и, конечно же, Zookeeper.
Мне удалось добавить с помощью curl мои образы докеров, но, к...
839 просмотров
schedule
12.04.2023
искра с Hadoop 2.3.0 на Mesos 0.21.0 с ошибкой sh:1: hadoop: not found на ведомом
Я настраиваю искру с помощью Hadoop 2.3.0 на Mesos 0.21.0. когда я пробую искру на ведущем, я получаю эти сообщения об ошибках для stderr ведомого mesos:
ВНИМАНИЕ: ведение журнала до того, как InitGoogleLogging() будет записано в STDERR....
777 просмотров
schedule
24.07.2022
Как проверить Месос Мастер?
Я новичок в Месосе. Я хотел бы знать, как узнать, правильно ли настроен мастер Mesos в узле?
Я следую настройке, предоставленной http://mesos.apache.org/gettingstarted/ .
Я не могу запустить следующую команду:
Комментарий: Запустите мастер...
1512 просмотров
schedule
08.06.2022
Нужно установить Mesos, чтобы получить Mesos Slave?
Я пытаюсь решить этот вопрос,
Чтобы получить mesos slave, нам нужно установить Mesos и начать настройку mesos slave или?
А также у меня проблема с мастером мезоса, который я запускаю командой
./bin/mesos-master.sh --ip=***...
1257 просмотров
schedule
15.08.2022
Ошибка Jenkins Mesos: невозможно получить доступ к jarfile
Я пытаюсь запустить Jenkins, используя динамически генерируемые контейнеры Docker через mesos.
WARNING: Logging before InitGoogleLogging() is written to STDERR
I0120 12:03:47.100700 26501 fetcher.cpp:76] Fetching URI...
2893 просмотров
schedule
04.04.2023
Накладные расходы на производительность Mesos
Я работаю над разработкой некоторых контейнеров Docker для работы в кластере Mesos. Мы отправляем заказы через Chronos, которым управляет Marathon. Однако я заметил значительное снижение производительности при запуске моих контейнеров в Mesos по...
683 просмотров
schedule
21.09.2022
Контейнер Docker с запуском кластера Mesos и запуском других контейнеров Docker в кластере (с использованием Marathon)
Я только начинаю с Mesos, Docker и Marathon, но нигде не могу найти ответ на этот конкретный вопрос. Я хочу настроить кластер Mesos, работающий на Docker — для этого есть несколько интернет-ресурсов, но затем я хочу запустить контейнеры Docker поверх...
915 просмотров
schedule
26.08.2022
Mesos Framework для оптимального распределения коротких (2-10 секунд) задач
Мне нужно выполнять короткие задачи в реальном времени (т.е. у каждой задачи есть крайний срок — обычно 1-10 секунд) различных типов.
Учитывая запланированную задачу типа A, я хочу, чтобы Mesos отправил задание подчиненному устройству, которое...
514 просмотров
schedule
26.04.2023
Не удается запустить spark-submit с jar-файлом приложения в кластере Mesos.
Mesosphere проделала большую работу по упрощению процесса запуска Spark на Mesos. Я использую это руководство для настройки кластера Mesos для разработки в Google Cloud Compute.
https://mesosphere.com/docs/tutorials/run-spark-on-mesos/
Я могу...
4259 просмотров
schedule
07.03.2023
Стром на Месосе в AWS
Я запускаю штормовой кластер на AWS. Но я хочу, чтобы штормовой кластер расширялся автоматически, когда в этом возникнет необходимость. Я понял, что мезос - это что-то вроде этого. Но у меня мало знаний о мезосе и его развертывании на AWS.
Может...
247 просмотров
schedule
31.03.2023
Есть ли у Apache Aurora API?
Является ли клиент командной строки единственным способом отправки заданий? Есть ли REST или API для конкретного языка?
749 просмотров
schedule
02.11.2022
Ошибка запуска docker с параметрами -v в CentOS6.5
Резюме
Я пытаюсь настроить кластер Mesos с помощью контейнеров Docker.
Но команда docker run не работает с параметрами тома -v и успешно выполняется без параметров тома.
Сообщение выглядит следующим образом,
FATA[0008] Error response...
115 просмотров
schedule
04.01.2023
Выборы лидера в кластере Mesos, кажется, не работают
Я настраиваю кластер Mesos (ZooKeeper+Mesos) с помощью докера, с тремя узлами (A, B, C), на каждом из которых запущены контейнеры zookeeper, master и slave.
узлы B и C перенаправляют друг друга (кворум=2)
Когда я запускаю контейнер...
1894 просмотров
schedule
17.10.2022
Контейнер мезосферы/хроноса Docker выходит из строя сразу после запуска
Я пытаюсь запустить Chronos в Docker, используя образ mesosphere/chronos .
Из командной строки
Выполнение следующей команды для запуска образа не работает нормально.
docker run -p 8081:8081 -t mesosphere/chronos:latest /usr/bin/chronos...
691 просмотров
schedule
24.05.2023
Запуск нескольких брокеров Kafka на Mesos в качестве заданий Marathon
Я хочу запустить несколько брокеров Kafka на Mesos в качестве заданий Marathon. Думаю что использовать в качестве ID брокера. Я знаю, что некоторые люди используют идентификатор брокера на основе IP, но я читал, что этот подход не оптимален для...
578 просмотров
schedule
20.07.2023
Запустите Spark через Mesos
Я пытаюсь запустить Spark через кластер Mesos, я успешно запустил диспетчер искр через мастер mesos и зарегистрировал платформу искры. Но когда я пытаюсь запустить какое-либо задание (spark-submit или spark-shell), инициализация останавливается и...
722 просмотров
schedule
12.12.2022