查看Atlas Data Lake管道 — 预览
您可以查看所有 Data Lake 管道,以及通过 Atlas 用户界面、Data Lake 管道API和 Atlas CLI 查看项目中指定 Data Lake 管道的详细信息。 您还可以从API和 Atlas CLI 检索所有已完成的 Data Lake 管道数据摄取作业。
步骤
要使用 Atlas CLI 返回您的项目的所有 Data Lake 管道,请运行以下命令:
atlas dataLakePipelines list [options]
要学习;了解有关命令语法和参数的更多信息,请参阅Atlas CLI AtlasdataLakePipelines 列表 的 文档。
查看 Atlas Data Lake 管道的详细信息
要使用 Atlas CLI 返回您的项目的指定 data lake 管道的详细信息,请运行以下命令:
atlas dataLakePipelines describe <pipelineName> [options]
要学习;了解有关命令语法和参数的更多信息,请参阅Atlas CLI文档中Atlas dataLakePipelines describe。
查看 Atlas Data Lake 管道的所有可用安排
要使用 Atlas CLI 返回指定 data lake 管道的所有可用安排,请运行以下命令:
atlas dataLakePipelines availableSchedules list [options]
要学习;了解有关命令语法和参数的更多信息,请参阅Atlas CLI文档中的Atlas DataLakePipelines availableSchedules 列表。
查看 Atlas Data Lake 管道的所有可用备份快照
要使用 Atlas CLI 返回指定数据湖管道的所有可用备份快照,请运行以下命令:
atlas dataLakePipelines availableSnapshots list [options]
要了解有关命令语法和参数的更多信息,请参阅 Atlas DataLakePipelines availableSnapshots 列表的 Atlas CLI 文档。
查看 Atlas Data Lake 管道运行情况
要使用 Atlas CLI 返回您的项目的所有 Data Lake 管道运行,请运行以下命令:
atlas dataLakePipelines runs list [options]
要了解有关命令语法和参数的更多信息,请参阅 Atlas DataLakePipelines 运行列表的 Atlas CLI 文档。
查看 Atlas Data Lake 管道运行的详细信息
要使用 Atlas CLI 返回您的项目的指定Data Lake管道运行的详细信息,请运行以下命令:
atlas dataLakePipelines runs describe <pipelineRunId> [options]
要学习;了解有关命令语法和参数的更多信息,请参阅Atlas CLI文档,了解Atlas DataLakePipelines 运行说明。
要通过API检索项目的所有Atlas 数据湖管道,请向Atlas 数据湖 pipelines
端点发送 GET
请求。 要学习;了解有关用于检索所有Atlas 数据湖管道的pipelines
端点语法和参数的更多信息,请参阅从一个项目返回所有Atlas 数据湖管道。
要通过API检索您的某一Atlas 数据湖管道,请向Atlas 数据湖 pipelines
端点发送GET
请求,其中包含要检索的 Data Atlas 数据湖管道的名称。 要学习;了解有关检索一个Atlas 数据湖管道的pipelines
端点语法和参数的更多信息,请参阅返回一个Atlas 数据湖管道。
查看 Atlas Data Lake 管道运行情况
要通过API检索项目的所有已完成的Atlas 数据湖管道数据摄取作业,请向Atlas 数据湖 runs
端点发送GET
请求。 要学习;了解有关runs
端点的API语法和选项的更多信息,请参阅从一个项目返回所有Atlas 数据湖管道运行。
要通过API检索已完成的Atlas 数据湖管道数据导入作业之一的详细信息,请向Atlas 数据湖 runs
端点发送GET
请求,其中包含您要检索的已完成的 Data Atlas 数据湖管道数据导入作业的唯一标识符。检索. 要学习;了解有关runs
端点的API语法和选项的更多信息,请参阅返回一个Atlas 数据湖管道运行。
登录 MongoDB Atlas 。
查看Atlas 数据湖管道。
该页面显示项目中的所有Atlas 数据湖管道。 对于每个Atlas 数据湖 管道,该服务还显示以下信息:
列名称 | 说明 |
---|---|
pipelineName | Atlas 数据湖管道的名称。 每个管道可以生成多个数据集。 您可以展开名称以查看管道中的数据集。 |
数据来源 | 管道数据集中的数据源。 对于来自 Atlas 集群上集合的数据,此列显示集群名称、数据库名称和集合名称,以 | 分隔。 |
数据大小 | 每个数据集的数据大小。 |
Last Run Time | 管道运行以获取每个数据集的数据的日期和时间。 |
Status | 管道的状态。 对于管道,值可以是以下值之一:
|
Frequency | 为查询而摄取和存储集群数据的频率。 |
Actions | 您可以对每个管道执行的操作。 您可以单击以下任一选项:
|