Editar um pipeline do Atlas Data Lake - Visualizar
Nesta página
Você pode fazer alterações nos pipelines de ingestão de dados por meio dainterface do usuário do Atlas , da API de ingestão de dados e da Atlas CLI, incluindo:
Editar o agendamento de extração de dados
Editar a política de retenção do conjunto de dados
Editar a região de armazenamento de dados
Altere o campo a serem excluídos dos seus conjuntos de dados da ingestão de dados
Procedimento
Para modificar os detalhes da ingestão de dados especificada para seu projeto utilizando a Atlas CLI, execute o seguinte comando:
atlas dataLakePipelines update <pipelineName> [options]
Para saber mais sobre a sintaxe e os parâmetros do comando, consulte a documentação do Atlas CLI paraa atualização do Atlas dataLakePipelinesdo .
Para editar um pipeline por meio da API, envie uma solicitação PATCH para o endpoint Data Lake pipelines com o nome do pipeline que você deseja editar. Para saber mais sobre a sintaxe e os parâmetros do endpoint pipelines para atualizar um pipeline, consulte Atualizar um pipeline do Data Lake.
Dica
Você pode enviar uma solicitação do GET para o endpoint availableSchedules para recuperar a lista de itens da política de agendamento do backup que você pode usar para alterar o agendamento dos pipelines do Data Lake do tipo PERIODIC_DPS.
Faça login no MongoDB Atlas.
Go na Atlas Data Lake Atlas UI do .
Se ainda não estiver exibido, selecione a organização que contém seu projeto no menu Organizations na barra de navegação.
Se ainda não estiver exibido, selecione seu projeto no menu Projects na barra de navegação.
Na barra lateral, clique em Data Lake sob o título Deployment.
(Opcional) Configure um Dataset Retention Policy.
Uma política de retenção de conjuntos de dados pode ajudar a gerenciar seu armazenamento do Data Lake excluindo automaticamente conjuntos de dados antigos após um período especificado.
Para configurar uma política de retenção de conjunto de dados para um pipeline, alterne Dataset Retention Policy para ON e insira um valor de tempo, em dias, semanas ou meses.
Importante
As alterações na política de retenção de conjuntos de dados do seu pipeline entram em vigor imediatamente. Se você reduzir a duração da retenção de um pipeline com conjuntos de dados existentes, os conjuntos de dados que estão além da nova duração expirarão imediatamente.
(Opcional) Faça alterações em seu agendamento de extração de dados.
Antes de fazer alterações em seu Basic Schedule, certifique-se de que a frequência de extração de dados desejada seja semelhante ao agendamento de backup atual. Por exemplo, se você deseja mudar para Daily, você deve ter um agendamento de backup Daily configurado em sua política. Ou, se quiser mudar para um agendamento de uma vez por semana, você deve ter um agendamento de backup Weekly configurado em sua política. Para saber mais, consulte Agendamento de backup. Você também pode enviar uma solicitação GET para o endpoint availableSchedules do Data Lake para recuperar a lista de itens da política de agendamento de backup que você pode usar para alterar o agendamento do pipeline do Data Lake.
(Opcional) Faça alterações na sua região de armazenamento de dados.
O Atlas Data Lake oferece armazenamento otimizado nas seguintes regiões da AWS:
Regiões do Data Lake | Regiões da AWS |
|---|---|
Virginia, USA | us-east-1 |
Oregon, EUA | us-west-2 |
São Paulo, Brasil | sa-east-1 |
Irlanda | eu-west-1 |
Londres, Inglaterra | eu-west-2 |
Frankfurt, Alemanha | eu-central-1 |
Mumbai, Índia | ap-south-1 |
Cingapura | ap-southeast-1 |
Sydney, Austrália | ap-southeast-2 |
(Opcional) Faça alterações nos campos excluídos dos seus conjuntos de dados do Data Lake.
Clique em Add Field e especifique Field Name para adicionar campos à lista de campos excluídos.
Clique em Delete All para remover todos os campos da lista de campos excluídos.
Clique em ao lado de um campo para removê-lo da lista de campos excluídos.