Docs Menu
Docs Home
/ /
MongoDB
Atlas Data Lake
/

Atlas Data Lake パイプラインの表示 - プレビュー

Atlas UI 、 Data Lake パイプラインAPI 、Atlas CLI を使用して、すべての Data Lake パイプラインを表示し、プロジェクト内の指定された Data Lake パイプラインの詳細を表示できます。 また、完了した Data Lake パイプラインのデータ取り込みジョブを、 APIと Atlas CLI から検索することもできます。

Atlas CLI を使用してプロジェクト内のすべての Data Lake パイプラインを返すには、次のコマンドを実行します。

atlas dataLakePipelines list [options]

コマンド構文とパラメータの詳細については、 Atlas CLIドキュメントの Atlas dataLake Pipelines リスト を参照してください。

Tip

参照: 関連リンク

Atlas CLI を使用してプロジェクトの指定された Data Lake パイプラインの詳細を返すには、次のコマンドを実行します。

atlas dataLakePipelines describe <pipelineName> [options]

コマンドの構文やパラメーターについて詳しくは、 Atlas CLIドキュメントのAtlas dataLakepipelines describe を参照してください。

Atlas CLI を使用して、指定した Data Lake パイプラインで利用可能なすべてのスケジュールを返すには、次のコマンドを実行します。

atlas dataLakePipelines availableSchedules list [options]

コマンドの構文とパラメータの詳細については、 Atlas CLIドキュメントのAtlas dataLakepipelines availableSchedules list を参照してください。

Atlas CLI を使用して、指定した Data Lake パイプラインの利用可能なすべてのバックアップ スナップショットを返すには、次のコマンドを実行します。

atlas dataLakePipelines availableSnapshots list [options]

コマンドの構文とパラメータの詳細については、 Atlas CLIドキュメントのAtlas dataLake Pipelines availableSnapshots list を参照してください。

Atlas CLI を使用してプロジェクトのすべての Data Lake パイプラインの実行を返すには、次のコマンドを実行します。

atlas dataLakePipelines runs list [options]

コマンド構文とパラメーターの詳細については、 Atlas CLIドキュメントの「 Atlas dataLakeパイプライン実行リスト 」を参照してください。

Atlas CLI を使用してプロジェクトで実行された指定されたデータレイク パイプラインの詳細を返すには、次のコマンドを実行します。

atlas dataLakePipelines runs describe <pipelineRunId> [options]

コマンドの構文とパラメータの詳細については、 Atlas CLIドキュメントのAtlas dataLakepipelines run describe を参照してください。

APIを介してプロジェクトのすべての Data Lake パイプラインを取得するには、 Data Lake pipelinesエンドポイントに GETリクエストを送信します。 すべての Data Lake パイプラインを取得するためのpipelinesエンドポイントの構文とパラメータの詳細については、「 1 つのプロジェクトからすべての Data Lake パイプラインを返す 」を参照してください。

API経由で Data Lake パイプラインの 1 つを取得するには、取得対象の Data Lake パイプラインの名前を指定して、 Data Lake pipelinesエンドポイントにGETリクエストを送信します。 Data Lake パイプラインの 1 つを取得するためのpipelinesエンドポイントの構文とパラメータの詳細については、「 1 つの Data Lake パイプラインを返す 」を参照してください。

APIを介してプロジェクトの完了した Data Lake パイプラインのデータ取り込みジョブをすべて取得するには、 Data Lake runsエンドポイントにGETリクエストを送信します。 runsエンドポイントのAPI構文とオプションの詳細については、「 1 つのプロジェクトからすべての Data Lake パイプラインの実行を返す 」を参照してください。

API経由で完了した Data Lake パイプラインのデータ取り込みジョブの詳細を取得するには、完了した Data Lake パイプラインのデータ取り込みジョブの一意の識別子を使用して、 Data Lake runsエンドポイントにGETリクエストを送信します。検索します。 runsエンドポイントのAPI構文とオプションの詳細については、「 Data Lake パイプラインの実行を返す 」を参照してください。

1
2
  1. まだ表示されていない場合は、プロジェクトを含む組織を から選択します。ナビゲーション バーの [ Organizations ] メニューを参照してください。

  2. まだ表示されていない場合は、ナビゲーション バーの Projects メニューからプロジェクトを選択します。

  3. サイドバーで、 Deployment見出しの下のData Lakeをクリックします。

3

ページには、プロジェクト内のすべての Data Lake パイプラインが表示されます。 各 Data Lake パイプラインについて、次の情報も表示されます。

列名
説明
pipelineName
Data Lake パイプラインの名前。 各パイプラインは複数のデータセットを生成できます。 名前を展開すると、パイプライン内のデータセットが表示されます。
データソース
パイプライン データセット内のデータのソース。 Atlas クラスター上のコレクションのデータの場合、この列にはクラスター名、データベース名、コレクション名が|で区切られて表示されます。
dataSize
各データセットのデータのサイズ。
Last Run Time
パイプラインが各データセットのデータを取り込むために実行された日時。
Status

パイプラインのステータス。 パイプラインの場合、値は次のいずれかになります。

  • Active - パイプラインがアクティブであることを示します

  • Paused - パイプラインへのデータの取り込みが一時停止されていることを示します

Frequency
クエリのためにクラスター データが取り込まれ、保存される頻度。
Actions

各パイプラインに対して実行できるアクション。 次のいずれかをクリックできます。

  • || データの取り込みを一時停止するデータの取り込みを再開します。 オンデマンドのデータの取り込みを一時停止することはできません。

  • パイプラインのデータ取り込みスケジュールを編集する。

  • 必要に応じて、次の操作を実行します。

    • パイプラインを削除します。 このアクションを取り消すことはできません。 パイプラインを削除すると、Atlas Data Lake は データを含むデータセットを削除し、それらが参照されているフェデレーティッドデータベースインスタンスからデータセットを削除します。 パイプライン内のデータセットを削除すると、Atlas Data Lake は、データセットが参照されるフェデレーティッドデータベースインスタンスのストレージ構成からデータセットを削除します。

    • オンデマンド パイプラインの実行をtriggerします。

戻る

Data Lake パイプラインの管理