READ_NOS構文要素 - Advanced SQL Engine - Teradata Database

connector

データが置かれている外部ストレージ システムのタイプを識別します。

Teradataでは、すべての外部ストレージの場所について、以下から始まるストレージの場所が必要です。

• Amazon S3のストレージの場所は、必ず/S3または/s3で始まる
• Azure BLOBストレージの場所(Blob相互運用モードのAzure Data Lake Storage Gen2を含む)は、/AZまたは/azで始まる必要があります。
• Google Cloud Storageの場所は、必ず/GSまたは/gsで始まる

storage-account

Azureによって使用されます。Azureストレージ アカウントには、Azureストレージ データ オブジェクトが含まれています。

endpoint

外部オブジェクト ストレージ システムのシステム固有のエントリー ポイントを識別するURL。

bucket (Amazon S3, GCS) or container (Azure Blob storage and Azure Data Lake Storage Gen2)

外部ストレージ システムに格納されているオブジェクトを論理的にグループ化するコンテナ。

key_prefix

バケット データの論理編成内の1つ以上のオブジェクトを識別します。これは実際のディレクトリ パスではなくキー接頭辞なので、このキー接頭辞は外部ストレージ内の1つ以上のオブジェクトと一致する場合があります。例えば、キー接頭辞'/fabrics/cotton/colors/b/'は、/fabrics/cotton/colors/blue、/fabrics/cotton/colors/brown、/fabrics/cotton/colors/blackと一致します。これらより下位の編成レベル(/fabrics/cotton/colors/blue/shirtsなど)がある場合は、同じキー接頭辞もそれらのオブジェクトを収集します。

Vantageは、場所のキー接頭辞から最初に検出されたファイルのみを検証します。

例えば、以下のLOCATION値は、2001年12月のAmazonクラウド ストレージ システム上のすべてのオブジェクトを指定できます。

LOCATION('/S3/YOUR-BUCKET.s3.amazonaws.com/csv/US-Crimes/csv-files/2001/Dec/')

以下のLOCATIONでは、個別のストレージ オブジェクト(またはファイル)、Day1.csvを指定できます。

LOCATION('/S3/YOUR-BUCKET.s3.amazonaws.com/csv/US-Crimes/csv-files/2001/Dec/Day1.csv')

以下のLOCATIONは、Azureの外部オブジェクト ストア(Azure BlobストレージまたはAzure Data Lake Storage Gen2)内のコンテナ全体を指定します。containerには複数のファイル オブジェクトが含まれる場合があります。

LOCATION('/AZ/YOUR-STORAGE-ACCOUNT.blob.core.windows.net/CONTAINER/nos-csv-data')

以下は、Google Cloud Storageの場所の例です。

LOCATION('/gs/storage.googleapis.com/YOUR-BUCKET/CSVDATA/RIVERS/rivers.csv')

• 入力テーブルとLOCATIONおよび空のテーブル。
• 各外部ファイルの行を持つ入力テーブル。

• 適切なデータ型を使用して、単一列、Payloadを含む入力テーブルを定義します。
  • JSON
  • CSV

  この列は、出力ペイロード列の戻りタイプを決定します。

  <例: NOSREAD_RECORD戻りタイプを含むREAD_NOSの使用>を参照してください。

• LOCATIONにはファイルパスを指定します。

• Location VARCHAR(2048) CHARACTER SET UNICODE
• ObjectVersionID VARCHAR(1024) CHARACTER SET UNICODE
• ObjectTimeStamp TIMESTAMP(6)
• OffsetIntoObject BIGINT
• ObjectLength BIGINT
• ペイロードJSON

このテーブルには、NOSREAD_KEYS戻り型の出力を使用して入力できます。

• Location
• ObjectVersionID
• ObjectTimeStamp
• ObjectLength、外部ファイルのサイズ。

<例: NOSREAD_KEYS戻りタイプを含むREAD_NOSの使用>を参照してください。

{
  "entries": [
     {"url":"s3://nos-core-us-east-1/UNICODE/JSON/mln-key/data-10/data-8_9_02-10.json"},
     {"url":"s3://nos-core-us-east-1/UNICODE/JSON/mln-key/data-10/data-8_9_02-101.json"},
     {"url":"s3://nos-core-us-east-1/UNICODE/JSON/mln-key/data-10/data-10-01/data-8_9_02-102.json"},
     {"url":"s3://nos-core-us-east-1/UNICODE/JSON/mln-key/data-10/data-10-01/data-8_9_02-103.json"}
  ]
}

field_delimiter

デフォルトは","(カンマ)です。カスタムのフィールド区切り記号(タブ"\t"など)を指定することもできます。

record_delimiter

改行記号: "\n"。改行(\n)は、唯一受け入れられるレコード区切り記号です。

character_set

"UTF8"または"LATIN"

ROWFORMAT列またはペイロード列を指定しない場合、VantageはUTF8ユニコードを前提とします。