Конфигурация источника данных Airbnb Superset для SparkSQL

Я использую Spark 1.6.2 (из Datastax Enterprise Edition => DSE 5.0.4) и Python 2.7

Когда я даю

from impala.dbapi import connect    
Conn = connect (host = '172.31.12.201', port = 7077, user = 'xxxx', password = 'xxxx1111', database = 'test_database', auth_mechanism = 'PLAIN') 

он просто зависает и никогда не выходит
spark master работает по адресу 172.31.12.201 через порт 7077

Моя конфигурация в суперсете следующая:

SQLAlchemy URI => impala://172.31.12.201:7077/test_database
Extra => {
"metadata_params": {},
"engine_params": {"connect_args": {"user": "xxxx", "password": "xxxx1111"}} }

person Santhavathi Sivakumaran    schedule 17.02.2017    source источник


Ответы (1)


Мне пришлось запустить сервер dse spark thrift, как показано ниже.

dse -u <username> -p <password> spark-sql-thriftserver start

Это запустит сервер куста в кластере DSE на порту 10000.

person Santhavathi Sivakumaran    schedule 20.02.2017