QueryGrid Spark 目标连接器使用 Spark Execution Mechanism属性向 Spark 提交查询。根据此属性设置,可能需要其他配置。
- 根据您的配置执行以下操作之一:
配置 说明 Spark 应用程序 tdqg 用户必须能够模拟其他用户并启动 Spark 应用程序。在 core-site.xml 中添加以下条目以启用模拟: <property> <name>hadoop.proxyuser.tdqg.hosts</name> <value>*</value> </property> <property> <name>hadoop.proxyuser.tdqg.groups</name> <value>*</value> </property>
使用 Spark 时,对于非 Kerberos 环境,必须执行此步骤。无需为每个新用户更新 core-site.xml 文件。Spark Thrift 服务器 无需更改。