Вопросы по теме 'checkpointing'
Проверка нескольких файловых потоков в моем контексте потоковой передачи искры
Я написал приложение Spark Streaming, которому нужно выполнить некоторые контрольные точки для различных Dstream, которые имеют базовое преобразование, как это предлагается в этом потоке ( Ошибка запуска контекста потоковой передачи Spark ), я...
589 просмотров
schedule
14.06.2023
Контрольная точка S3 со структурированной потоковой передачей
Я попробовал предложения, приведенные в Apache Spark (структурированная потоковая передача) : поддержка контрольных точек S3
Я все еще сталкиваюсь с этой проблемой. Ниже ошибка, которую я получаю
17/07/06 17:04:56 WARN FileSystem: "s3n" is...
1376 просмотров
schedule
30.07.2023