Вопросы по теме 'oozie-coordinator'
Не указывайте время окончания в Oozie Coordinator
В моем oozie coordinator.xml я не хочу указывать время окончания. Есть ли способ сделать это?
координатор.xml
<coordinator-app name="MY_APP" frequency="60" start="2009-02-01T00:00Z" end="2009-02-02T00:00Z" timezone="UTC"...
1246 просмотров
schedule
24.11.2022
эквивалентный способ запуска свиной UDF с внешним файлом элемента файла рабочего процесса oozie
У меня есть рабочий процесс oozie, в основном с работой со свиньями.
В workflow.xml есть одна строка <file>${hdfsPath}/hdfsLineItem.txt#LineItem.txt</file>
Этот файл используется в одной из UDF, которая косвенно используется...
158 просмотров
schedule
23.04.2022
Свойства конфигурации координатора Oozie
У меня есть координатор Oozie, который вызывает определенный рабочий процесс Oozie.
Чтобы вызвать этот координатор, мне нужно предоставить рабочему процессу все необходимые свойства конфигурации. Означает ли это, что я должен дублировать все...
845 просмотров
schedule
02.11.2022
Невозможно установить mapred.job.queue.name в java-действии Oozie.
У меня есть приложение, которое выполняет критические задания. Я пытаюсь настроить Oozie для запуска этого задания с помощью действия Java. Мои действия, как указано ниже,
<workflow-app name="Wworkflow" xmlns="uri:oozie:workflow:0.4">...
4840 просмотров
schedule
04.12.2022
Планирование рабочего процесса Oozie через Java API
Можно ли планировать рабочий процесс Oozie динамически ? То есть указывать параметры через Java API вместо конфигурационных файлов?
Например, я хотел бы иметь возможность планировать выполнение рабочего процесса каждый день в 22:00, но указывать...
860 просмотров
schedule
13.01.2023
как связать два рабочих процесса в одном координаторе
у меня есть два XML-файла рабочего процесса, такие как WF1 WF2. Могу ли я связать все эти рабочие процессы в одном координаторе для следующих действий? WF1 зависит от времени WF2 не зависит ни от чего. Я хочу выполнить после завершения одного...
615 просмотров
schedule
06.09.2022
Вложение действия электронной почты Oozie
Я пытаюсь получить местоположение hdfs и предоставить его в качестве вложения электронной почты для действия электронной почты oozie. Мое местоположение hdfs можно найти только с помощью действия оболочки. Теперь, как я могу передать вывод моего...
2887 просмотров
schedule
05.07.2022
ошибка при выполнении примера задания oozie
Я попытался выполнить свою первую работу с oozie, следуя сообщению в блоге.
Я использовал oozie-examples.tar.gz , после распаковки поместил примеры в hdfs.
Я попытался запустить в нем работу по уменьшению карты, но, к сожалению, получил...
2096 просмотров
schedule
18.09.2022
Получить трассировку стека исключений в качестве вывода Oozie Java Action
У меня есть действие Java, работающее на Oozie. Я хотел бы получить полное исключение Java в случае сбоя этого действия Java. Действие Java просто использует файл jar. Вот действие Java
<workflow-app name='proj-wf'...
689 просмотров
schedule
08.07.2022
Сокращение карты через Oozie
Если я использую Oozie для запуска задания MapReduce, есть ли конкретное число о том, сколько картографов будет запущено? Это:
один для Oozie и один для работы по уменьшению карты или
один для Oozie и один картограф для каждого блока 64 МБ...
354 просмотров
schedule
16.06.2022
Переместить файл из одного каталога HDFS в другой каталог HDFS с помощью OOZIE?
Я пытаюсь скопировать файл из одного каталога HDFS в другой каталог в HDFS с помощью сценария оболочки как части oozie Job, но я не могу скопировать его через oozie.
Можем ли мы скопировать файл из одного каталога HDFS в другой каталог HDFS,...
2154 просмотров
schedule
21.04.2022
Как динамически получить имя файла в узле решений в OOZIE?
я хочу проверить, существует ли файл или нет, в местоположении HDFS, используя пакет oozie.
в моем местоположении HDFS в ежедневной базе я буду получать файл типа «test_08_01_2016.csv», «test_08_02_2016.csv» каждый день в 23:00.
Итак, я хочу...
2116 просмотров
schedule
26.03.2023
как я могу написать работу oozie в зависимости от успеха другой работы?
Мой сценарий: у меня есть отправка искры, которая выполняется через сценарий оболочки, эта искровая задача доставит 7 таблиц из оракула в улей. у меня есть другой скрипт, который будет генерировать файлы .dat на основе импортированных данных из...
810 просмотров
schedule
14.08.2023
Получить идентификатор приложения порожденной работы oozie
Когда программа запуска oozie порождает другое задание Hadoop, есть ли способ получить идентификатор приложения или, что еще лучше, ссылку диспетчера ресурсов на это созданное приложение? Похоже, что пусковая установка oozie знает только о своем...
2356 просмотров
schedule
18.05.2022
Как настроить координатора Oozie с помощью простого события ввода?
Как настроить входное событие координатора Oozie, которое может либо быть там, либо нет? Пожалуйста, заполните ??? для следующих:
<coordinator-app name="${jobName}" frequency="${coord:days(1)}" start="${startTime}" end="${endTime}"...
1389 просмотров
schedule
17.04.2023
Повторное выполнение действия координатора Oozie из отказавших узлов
Я пытаюсь повторно запустить действие координатора oozie, используя приведенную ниже команду.
oozie job -rerun <co-ordinator id> -action <action id>
-Doozie.wf.rerun.fail.nodes=true
Но он выполняет действие с самого начала, а...
3961 просмотров
schedule
12.07.2022
Передача переменной на основе даты в действии электронной почты oozie для вложений
Я использую oozie для отправки электронных писем с вложениями. Я делаю, как показано ниже.
<workflow-app name="Email" xmlns="uri:oozie:workflow:0.5">
<start to="email-0fdf"/>
<kill name="Kill">...
1364 просмотров
schedule
09.12.2022
oozie-невозможно назвать какие-либо узлы действий или управления oozie цифрами.
У меня есть рабочий процесс oozie, в котором много узлов управления и действий. Чтобы упростить отслеживание действий в браузере Hue, я попытался пронумеровать узлы управления и действия, добавив префикс 1,2,3 и так далее к имени узла. Вот фрагмент...
84 просмотров
schedule
03.01.2023
oozie, передайте время планировщика координатора действию java
Мне нужно передать время планировщика действию oozie java.
Например, я установил время планировщика на 1 минуту. Текущее время 15:45, но возникает любая задержка или ошибка, поэтому текущее время выполнения действия Java составляет 15:40 (задержка...
117 просмотров
schedule
03.10.2022
Повторить успешные задания oozie
Есть ли способ полностью перезапустить успешные задания oozie. Предположим, что мы планируем создать таблицу и хотим перестроить ее по требованию — есть ли простой способ сделать это в oozie?
Я пробую команду oozie -rerun, но если каждое действие...
454 просмотров
schedule
08.07.2022
