- HDFS APIインターフェースを使用する場合、HadoopHost値は、Hadoopクラスタのネームノードを参照している必要があります。
- TDCH-TPTインターフェースを使用する場合、HadoopHost値は、TPTを実行しているノードのホスト名またはIPアドレスを参照している必要があります。 このホスト名またはIPアドレスは、Hadoopクラスタのすべてのデータノードから到達可能である必要があります。
- HDFS APIインターフェースとTDCH-TPTインターフェースの両方とも、TPTを実行しているノードにHadoopクライアントJARをインストールしておく必要があり、HDFS APIはHadoopクラスタ構成ファイルのコピーも必要とします。
- HDFS APIインターフェースを使用する場合、HadoopクライアントJARのバージョンは、HadoopHost属性で定義されているHadoopクラスタのネームノードのHadoop JARのバージョンと一致する必要があります。
- HDFS APIでは、以下の環境変数を設定する必要があります。
- JAVA_HOME = Java JDKのルートの場所
- HDFS APIはJAVA JNIを使用します。
- 64ビット バージョンのJava。
- HADOOP_HOME = HadoopクライアントJARファイルおよびHadoop構成ファイルのルートの場所
- JAVA_HOME = Java JDKのルートの場所
- HDFS APIでは、以下の任意の環境変数を使用できます。
- LIBHDFS_OPTS = LIBHDFS_JVM_PATHに渡す追加オプション = jvm.dl (vm.so)のフルパス。
LIBHDFS_JVM_PATHが指定されていない場合は、JAVA_HOMEを使用してjvm.dllを検索します。
- LIBHDFS_CLASSPATH = jni jvmのクラスパス。
• LIBHDFS_CLASSPATHは、CLASSPATHよりも優先されます。
• CLASSPATHとLIBHDFS_CLASSPATHが両方とも指定されていない場合、HADOOP_HOMEまたはHADOOP_PREFIXを使用してCLASSPATHが作成されます。
• CLASSPATHまたはLIBHDFS_CLASSPATHに、JNI(例: “*")と互換性のない構文が含まれている場合、それらは破棄され、HADOOP_HOMEまたはHADOOP_PREFIXを使用してクラスパスが作成される。
- CLASSPATH = jni jvmのクラスパス。通常これはJNI用に正しく設定されないため、使用は賢明ではない。
- JAVA_LIBRARY_PATH = Javaのネイティブ メソッドをサポートするための、hadoop.dllのパス。
- LIBHDFS_OPTS = LIBHDFS_JVM_PATHに渡す追加オプション = jvm.dl (vm.so)のフルパス。
- TDCH-TPTインターフェースを使用する場合は、以下の環境変数を定義する必要があります。TDCHジョブを起動する前に、TDCH-TPTインターフェースはそれらの環境変数が設定されているかどうかを確認し、設定されていない場合、TDCH-TPTインターフェースは次のリストで定義されているデフォルト値を使用して環境変数をエクスポートします。TDCHに必要な環境の詳細については、<Teradata Connector for Hadoop tutorial>を参照してください。
- HADOOP_HOME - Hadoopライブラリの場所。この値のデフォルトは'/usr/lib/hadoop'です。
- HIVE_HOME - Hiveライブラリの場所。この値のデフォルトは'/usr/lib/hive'です。
- HCAT_HOME - HCatalogライブラリの場所。この値のデフォルトは'/usr/lib/hcatalog'です。
- HIVE_LIB_JARS - TDCHが必要とするJARファイルのカンマ区切りのリスト。これが設定されていない場合、TDCH-TPTインターフェースは、$HCAT_HOME/libおよび$HIVE_HOME/libで見つかったJARを使用してこのリストを構築します。
- HADOOP_CLASSPATH - TDCHが必要とするJARファイルとディレクトリの、セミコロン区切りのリスト。これが設定されていない場合、TDCH-TPTインターフェースは、$HCAT_HOME/lib、$HIVE_HOME/lib、および$HIVE_HOME/confで見つかったJARを使用してこのリストを構築します。