Создать файл паркета в java без сохранения на диск

Я работаю над Java-приложением, где мне нужно преобразовать мои объекты Java в формат parquet и отправить в AWS S3 с шифрованием на стороне клиента. В поиске нашел около Avro объектов записи. создать паркетные файлы в java Но для этого нужно записать на диск и снова прочитать файл .

pyarrow умеет преобразовывать данные в паркет без записи на диски, а arrow реализация java этого не имеет. Есть ли в Java другой вариант создания файла паркета без сохранения на диск?


person Shashika    schedule 11.06.2021    source источник
comment
Это может помочь? stackoverflow.com/questions/40089689 /   -  person roby    schedule 11.06.2021