Docs Menu
Docs Home
/ /
Atlas CLI
/ /

Atlas dataLake Pipelines create

項目一覧

  • 構文
  • Arguments
  • オプション
  • 継承されたオプション

新しい Data Lake パイプラインを作成します。

このコマンドを使用するには、プロジェクト オーナーのユーザー アカウントまたは API キーで認証する必要があります。

コマンド構文
atlas dataLakePipelines create <pipelineName> [options]
名前
タイプ
必須
説明

pipelineName

string

true

パイプラインを識別するラベル

名前
タイプ
必須
説明

-f, --file

string

false

使用する JSON データレイク パイプライン構成ファイルの名前。

--sinkType、-sinkMetadataProvider、-sinkMetadataRegion、-sinkPartitionField、--sourceType、--sourceClusterName、--sourceDatabaseName、--sourcePolicyItemId、--transform と相互に排他的です。

-h, --help

false

作成用ヘルプ

-o, --output

string

false

出力形式。 有効な値は、 JSON 、 JSON -path、go-template、または go-template-file です。 完全な出力を表示するには、 -o JSONオプションを使用します。

--projectId

string

false

使用するプロジェクトを識別する 16 進数の string。 このオプションは、構成ファイルまたは環境変数の 設定を上書きします。

--sinkMetadataProvider

string

false

この Data Lake パイプラインのターゲット クラウド プロバイダー。

--file と相互に排他的。

--sinkMetadataRegion

string

false

この Data Lake パイプラインのターゲット クラウドプロバイダー リージョン。

--file と相互に排他的。

--sinkPartitionField

string

false

宛先内のデータを物理的に整理するために使用される順序付きフィールド。

--file と相互に排他的。

--sinkType

string

false

この Data Lake パイプラインの取り込み先のタイプ。

--file と相互に排他的。

--sourceClusterName

string

false

ソースクラスターを識別する、人間が判読できるラベル。

--file と相互に排他的。

--sourceCollectionName

string

false

ソース コレクションを識別する、人間が判読可能なラベル。

--file と相互に排他的。

--sourceDatabaseName

string

false

ソース データベースを識別する、人間が判読可能なラベル。

--file と相互に排他的。

--sourcePolicyItemId

string

false

ポリシー 項目を識別する、人間が判読可能なラベル。

--file と相互に排他的。

--sourceType

string

false

この Data Lake パイプラインの取り込みソースのタイプ。

--file と相互に排他的。

--transform

string

false

この Data Lake パイプラインで除外するフィールド。

--file と相互に排他的。

名前
タイプ
必須
説明

-P, --profile

string

false

# create data lake pipeline:
atlas dataLakePipelines create Pipeline1 --sinkType CPS --sinkMetadataProvider AWS --sinkMetadataRegion us-east-1 --sinkPartitionField name:0,summary:1 --sourceType PERIODIC_CPS --sourceClusterName Cluster1 --sourceDatabaseName sample_airbnb --sourceCollectionName listingsAndReviews --sourcePolicyItemId 507f1f77bcf86cd799439011 --transform EXCLUDE:space,EXCLUDE:notes

戻る

list