El conector de destino de Spark de QueryGrid usa la propiedad Spark Execution Mechanism para enviar consultas a Spark. Según esta configuración de propiedad, se necesita una configuración adicional.
- Haga una de las siguientes opciones en función de su configuración:
Configuración Descripción Aplicación Spark El usuario de tdqg debe ser capaz de suplantar a otros usuarios e iniciar la aplicación Spark. Agregue la siguiente entrada en core-site.xml para habilitar la suplantación: <property> <name>hadoop.proxyuser.tdqg.hosts</name> <value>*</value> </property> <property> <name>hadoop.proxyuser.tdqg.groups</name> <value>*</value> </property>
Este paso es obligatorio para entornos que no son de Kerberos cuando se utiliza Spark. No es necesario actualizar el archivo core-site.xml para cada usuario nuevo.Servidor de Spark Thrift No se necesitan cambios.