Я создаю ETL, но не знаю, как это сделать.
При вводе таблицы я получаю свой поток данных, у этих данных могут быть проблемы с длиной, типом и т. д. Затем я просто хочу вставить правильные строки. Некорректные ошибки, которые я просто хочу создать, должны быть обнаружены шагами «Дженкинс»:
- Transformation: Obtain rows
- Table input
- Копировать строки в результат
- Transformation: Load rows (execute every input row)
- Get rows from result
- Валидатор данных
- Вывод таблицы (на самом деле это еще одно «копирование в строки для результата», эти данные нужны для другого ввода таблицы)
Как я могу это исправить?
Большое спасибо!