Hadoop管理者は、Spark SQLコネクタ(イニシエータまたはターゲット)を使用する前に、hdfs:///tdqg-spark/ディレクトリを作成する必要があります。このディレクトリの目的は、次のとおりです。
- Spark SQLコネクタによって作成されたダミー テキスト ファイルがないとSpark SQLコネクタが機能しない場合は、このファイルを初めて使用するときに格納します。
- Spark SQLイニシエータで使用されるユーザー定義の外部サーバー オブジェクトのキャッシュ ファイルを格納します。
- Spark Application Execution Mechanismを使用してターゲット コネクタを実行しているときに一時ファイルを格納します。
- 任意のHadoopノードにログオンします。
- 次のコマンドを使用してディレクトリを作成します。hdfs dfs -mkdir /tdqg-spark/
- 次の例のようにアクセス権を入力します。hdfs dfs -chmod 777 /tdqg-spark/アクセス権777は一例です。実際のアクセス権は、ディレクトリを作成するための要件が満たされている場合、Hadoop管理者によって決定されます。