Экспорт данных из таблицы в гаечном ключе в облачное хранилище GCS

Мне нужно экспортировать данные из таблицы/получить данные из одной таблицы в гаечный ключ Google и загрузить их в мое локальное хранилище hdfs/relation. Как мне это сделать, я не могу найти ничего для экспорта здесь https://github.com/GoogleCloudPlatform/python-docs-samples/tree/master/spanner/cloud-client


google-cloud-storage airflow google-cloud-spanner
person Amit Kumar    schedule 11.02.2019    source источник

Ответы (1)


arrow_upward
2
arrow_downward

Экспорт Spanner поддерживается через Cloud Dataflow. См. https://cloud.google.com/spanner/docs/export.

Шаблон экспорта по умолчанию для всех таблиц базы данных. Похоже, вам нужны данные только из одной таблицы? Если это так, вам нужно будет создать собственный шаблон.

Вам необходимо изменить https://github.com/GoogleCloudPlatform/DataflowTemplates/blob/master/src/main/java/com/google/cloud/teleport/spanner/ExportPipeline.java

person Nithin Sujir    schedule 11.02.2019
comment
Я посмотрел API-интерфейс клиента spanner python, и кажется, что я могу просто сохранить набор результатов из SQL-запроса локально, используя github.com/GoogleCloudPlatform/python-docs-samples/blob/master/ - person Amit Kumar; 12.02.2019