Публикации по теме 'spring-batch'
Spring Batch : особенности архитектуры и определения
Spring framework — один из самых популярных фреймворков в сообществе Java, способный практически на все, чтобы достичь цели программиста. Для обработки большого объема пружинных записей предусмотрите весенний режим пакетной обработки. Пакетная обработка, которая включает выполнение серии автоматизированных заданий без взаимодействия с пользователем. Пакетный процесс обрабатывает длинные данные.
Spring Batch — это легкая комплексная платформа, предназначенная для облегчения разработки..
Spring Batch - параллельная обработка нескольких файлов
Сегодня мы обсудим, как мы можем обрабатывать несколько файлов одновременно с помощью Spring Batch.
Предварительные требования Требуются базовые знания Spring и Spring Batch Framework.
Предпосылки Spring Batch - это облегченная комплексная пакетная среда, предназначенная для разработки надежных пакетных приложений, жизненно важных для повседневной работы корпоративных систем. Spring Batch основывается на ожидаемых людьми характеристиках Spring Framework (производительность,..
Вопросы по теме 'spring-batch'
Какие существуют альтернативы Spring Batch для обработки заданий в очереди?
Я искал Spring Batch, чтобы решить сценарий пакетной обработки с огромным объемом данных, задействованных в каждом задании. Есть ли другие решения, которые конкурируют со Spring Batch? Для использования в среде Java EE.
11155 просмотров
schedule
18.02.2023
Spring Batch без ресурсов JobRepository
Я использую Spring Batch для системы, которая выполняет множество пакетных операций. Я использую SimpleJobRepository с DAO в памяти. Я хотел бы знать, есть ли способ избежать использования JobRepository? что-то похожее на безресурсный менеджер...
3808 просмотров
schedule
29.08.2023
Spring-Batch для массовой ночной/ежечасной обработки данных Hive/MySQL
Я пытаюсь заменить кучу скриптов Python ETL, которые выполняют еженощную/ежечасную сводку данных и сбор статистики по огромному количеству данных.
Чего я хотел бы добиться, так это
Надежность — сбойное задание/шаг должен быть автоматически...
5542 просмотров
schedule
26.11.2023
Пакетная обработка в Oracle SOA
Я хочу реализовать пакетную обработку в приложении Oracle SOA. В нашем BPEL-процессе я получу огромный xml, буду анализировать xml и вызывать другие веб-службы в каждом элементе XML? Oracle SOA может это сделать? Или мне нужны фреймворки вроде...
1688 просмотров
schedule
07.05.2023
Spring Batch - разделить строку чтения FlatFileItemReader на несколько строк при записи
Spring Batch - Как я могу разделить строку чтения (FlatFileItemReader) на несколько строк при записи с помощью FlatFileItemWriter?
4983 просмотров
schedule
09.08.2022
Запустить Spring Batch Job программно?
У меня есть приложение Spring Batch, которое я запускаю с помощью файла CommandLineJobRunner . Но теперь мне нужно внедрить это приложение в нашу корпоративную среду. Там у нас есть собственное приложение Launcher, которое я должен использовать....
32769 просмотров
schedule
13.03.2023
весенний пакет - идентификатор выполнения задания?
У меня есть автономный тестовый пример для весеннего пакета для копирования данных из одной таблицы в другую, однако после каждого выполнения он увеличивает идентификатор выполнения задания и экземпляра задания на 1. Поскольку я не запланировал...
5431 просмотров
schedule
28.01.2023
Как получить доступ к параметрам задания из ItemReader в Spring Batch?
Это часть моего job.xml :
<job id="foo" job-repository="job-repository">
<step id="bar">
<tasklet transaction-manager="transaction-manager">
<chunk commit-interval="1"
reader="foo-reader"...
135619 просмотров
schedule
13.11.2022
Незавершенные двойные кавычки в Spring Batch
Я новичок в Spring Batch и столкнулся с проблемой.
Пакетное приложение, над которым я работаю, читает и обрабатывает строки из текстового файла с разделителями. Я настроил приложение на использование FlatFileReader для чтения текстового файла с...
8487 просмотров
schedule
30.04.2023
Прочитайте одну запись/элемент и запишите несколько записей/элементов, используя весенний пакет
Я немного поискал, но не смог найти ни одного образца/примера.
У меня есть требование, при котором географические координаты из одной таблицы (ввод) считываются, обрабатываются для создания POI, связанных с координатами. Таким образом, одна...
20987 просмотров
schedule
30.08.2022
Последовательная обработка нескольких файлов в Spring Batch
У меня такой вариант использования: мне нужно обработать большое количество файлов. Каждая обработка выглядит примерно так:
1) прочитать файл
2) выполнить операцию (а) над содержимым
3) выполнить операцию (б) над содержимым
4) выполнить...
6688 просмотров
schedule
12.09.2022
Может ли условное выполнение или другой метод управлять значениями параметров другого ItemReader в Spring Batch?
Я понимаю, что в Spring Batch есть условное выполнение, которое можно настроить, чтобы решить, какой шаг сделать следующим, на основе ExitStatus текущего шага, но...
что, если я хочу, чтобы мое задание Spring Batch выполняло запрос, который...
1173 просмотров
schedule
24.01.2023
Репозиторий Mongo для Spring Batch?
Есть ли репозиторий заданий на основе Mongo для Spring Batch? Если нет, нужно ли мне реализовать JobInstanceDao и его братья и сестры? Есть ли примеры или существующие работы, которые могли бы помочь в этом начинании?
3965 просмотров
schedule
24.03.2024
Обработка чанков в Spring Batch эффективно ограничивает вас одним шагом?
Я пишу приложение Spring Batch, чтобы сделать следующее: есть входная таблица (база данных PostgreSQL), в которую кто-то постоянно добавляет строки - это в основном добавляемые рабочие элементы. Для каждой из этих строк мне нужно получить больше...
2530 просмотров
schedule
12.12.2022
Шаг Spring Batch-Repeat для каждого элемента в списке данных
Это сложный вопрос, но я уверен, что это не редкость.
У меня есть два набора данных: страны и демография. Набор данных стран содержит название страны и идентификатор ее демографических данных.
Набор демографических данных представляет собой...
10166 просмотров
schedule
22.05.2022
Интеграция Apache Camel с Spring Batch
Поддерживает ли Apache Camel Spring Batch? Я использую свою партию, используя маршруты Camel. Теперь мы хотим перейти на Spring Batch, но не уверены, что мои верблюжьи маршруты могут интегрироваться с пакетом Spring.
6875 просмотров
schedule
16.05.2022
Транзакционность на уровне задания в Spring Batch
Я знаю, что сейчас в Spring-Batch нет такой вещи, как межэтапная транзакция. Я разрабатываю сложное пакетное задание, в котором многие шаги выполняют несколько действий в базе данных, и каждый из них связан с другими таким образом, что каждый из них...
3568 просмотров
schedule
17.01.2023
Spring Batch с поддержкой планировщика
Сценарий. Системе необходимо ЕЖЕДНЕВНО проверять таблицу Product в базе данных, чтобы проверить срок годности каждого продукта. Системе необходимо получить список товаров со сроками годности, совпадающими с текущей датой. Затем удаляет эти...
679 просмотров
schedule
01.04.2023
в Spring Batch можно настроить несколько JdbcBatchItemWriters для параллельной записи?
В моем весеннем пакетном задании мой обработчик элементов разбивает объект, который считывает средство чтения элементов, на семь списков переменной длины. Эти списки должны быть записаны в семь таблиц в БД, и любые ошибки (например, отклонение...
9619 просмотров
schedule
14.01.2023
Spring Batch: как перезапустить и повторно запустить только пропущенные элементы
Могу ли я перезапустить задание и обрабатывать только пропущенные элементы после исправления ошибок в файле? Я читаю документацию и не нахожу в настоящее время эту возможность. Вы можете перезапустить задание, если оно не удалось, но я думаю...
550 просмотров
schedule
13.10.2022
