使用kerberos時
import pyhs2
class HiveClient:
# 初始化
def __init__(self, db_host, user, password, database, port=10000, authMechanism="PLAIN", configuration=None):
self.conn = pyhs2.connect(host=db_host,
port=port,
authMechanism=authMechanism,
user=user,
password=password,
database=database,
configuration=configuration,
)
# 查詢方法
def query(self, sql):
with self.conn.cursor() as cursor:
cursor.execute(sql)
return cursor.fetch()
def close(self):
self.conn.close()
def getHiveData(sql):
config = {"mapreduce.job.queuename": "default", 'krb_host': 'hiveserve2ip', 'krb_service': 'hive'}
hive_client = HiveClient(db_host='hiveserve2ip', port=10000, user='user@kdc.com', password='hive', database='dw.usee',
authMechanism='KERBEROS', configuration=config)
print sql
result = hive_client.query(sql)
return result
Could not start SASL: Error in sasl_client_start (-1) SASL(-1)
安裝
yum install cyrus-sasl-plain cyrus-sasl-devel cyrus-sasl-gssapi
pyhs2 安裝 sasl問題
yum install cyrus-sasl-devel yum install cyrus-sasl-lib yum install libgsasl-devel yum install saslwrapper
對接superset hive kerberos
SQLAlchemy URI
hive://herverser2ip:10000/db
擴展 連接參數
{
"metadata_params": {},
"engine_params": {
"connect_args": {
"auth": "KERBEROS",
"kerberos_service_name": "hive",
"username" : "user@KDC.COM"
}
}
}
以上這篇python 操作hive pyhs2方式就是小編分享給大家的全部內容了,希望能給大家一個參考,也希望大家多多支持億速云。
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。