Flink требует локального пути для каталога hive conf, но как указать этот путь, если мы отправляем задание flink на пряжу?

https://ci.apache.org/projects/flink/flink-docs-stable/dev/table/hive/#connecting-to-hive Согласно этой ссылке, Flink требует локального пути к папке conf hive, но мне нужно отправить Flink работа с пряжей, поэтому Flink попытается найти путь в контейнере пряжи, например /mnt/volume4/yarn/nm/usercache/akashkumar.patel/appcache/application_1594626939821_80078/container_e83_1594626939821_80078_01_000002/hdfs:/warehousestore/hive/warehouse/db/hive_conf/hive-site.xml

Как мы можем с этим справиться? Мне просто нужно создать раздел для таблицы улья. Есть ли способ указать расположение папки hdfs для папки hive-conf?


person patel akash    schedule 19.07.2020    source источник


Ответы (1)


Вы можете загрузить hive-site.xml из удаленного местоположения HDFS и поместить в контейнер локально.

person patel akash    schedule 22.07.2020