Limitaciones conocidas (de Teradata a conector de destino) - Teradata Fabric

• mapreduce.map.speculative=false
• mapreduce.reduce.speculative=false
• hive.mapred.reduce.tasks.speculative.execution=false
• tez.am.speculation.enabled=false

• Si las estadísticas de la tabla de Hive son inexactas (cosa que es poco común), habilitar esta propiedad puede dar lugar a una sobrecarga del rendimiento en la consulta de inserción.
• Si hay varias consultas de inserción simultáneas en la tabla de Hive, se puede mostrar un número inexacto de filas, lo que resulta en un resultado aproximado en lugar de un número preciso.

Tras exportar los datos y asignarlos a un sistema remoto, cualquier error o interrupción posterior en el sistema local no revierten la solicitud remota.

• Spark 2.1 y versiones posteriores: cuando se utiliza el iniciador de Spark, si el esquema de una tabla de destino cambia después de crear una tabla no nativa que representa dicha tabla de destino, ese tabla no nativa debe volver a crearse para reflejar el cambio de esquema.
• Spark 2.2 y versiones posteriores: al importar datos para el tipo DATE utilizando el conector de destino de Spark o al exportar datos del tipo DATE usando el iniciador de Spark, el valor de datos de Spark puede ser incorrecto.
• Spark 2.2 y versiones posteriores: Spark no admite Char/Varchar; por lo tanto, si utiliza el conector de destino de Spark para insertar datos desde Teradata Fabricy la tabla de destino contiene columnas char/varchar, los datos de Teradata Fabric pueden ser incorrectos. Para evitar posibles datos incorrectos, utilice String en lugar de Char/Varchar.
• Si se actualiza Spark o se cambia la ubicación de los archivos JAR de Spark estándar, se requiere un reinicio de tdqg-node.

Por ejemplo, al escribir en BigQuery, hay un tamaño de fila máximo de 10 MB y un máximo de 100 subprocesos simultáneos cuando no se usa una región múltiple.

Consulte la documentación sobre límites y cuotas de BigQuery.

select col1 from project_name.dataset_name.table_name@fs_name

Utilice la siguiente solución en su lugar:

select * from foreign table (select col1 from project_name.dataset_name.table_name)@fs_name ft;

Se admiten identificadores de tres (o más) partes poniendo entre comillas la parte catalog.schema. Ejemplo:

select * from "catalog.schema".table

Asegúrese de que el conector de Arrow Flight SQL en Teradata Viewpoint tenga el NVP Default Delimiter configurado en el delimitador adecuado para la base de datos de destino.

No se admiten todos los tipos de datos de Arrow. Consulte los tipos y asignaciones compatibles aquí:

Asignación de tipo Arrow a global

Si todos los valores binarios/VARCHAR son ≤ 64 KB, deshabilite la compatibilidad con BLOB/CLOB en el conector NVP para mejorar significativamente el rendimiento.