Documentação do Lumo
Buscar K

Aparência

Abrir no Claude Abrir no ChatGPT

Publicar e clonar um Dataflow ​

Tipo
Como fazer
Para
Engenharia de dados
Na tela
HorusETL › Data Flows

Publicar leva um Dataflow da Minha Mesa para uma Mesa de Dados, onde ele pode ser agendado e executado pela lista. Para mudar um Dataflow publicado sem mexer na carga que está rodando, você clona para a Minha Mesa, edita e republica por cima. O conceito de Mesa e publicação está em Mesas e publicação.

Antes de começar ​

  • Permissão para publicar na Mesa de Dados de destino. Sem ela, a publicação recusa com "Você não tem permissão para publicar nesta mesa de dados."
  • Se o Dataflow lê uma tabela do Lumo com Consultar Lakehouse ou Extrair Datalake, essa tabela precisa estar publicada antes.

Publicar pela primeira vez ​

  1. Em Data Flows, abra Minha Mesa.
  2. Na linha do Dataflow, clique em Publicar em uma mesa. Abre a janela Publicar «nome do Dataflow».
  3. Em Mesa de Dados:, escolha a Mesa.
  4. Clique em Publicar.

O Dataflow sai da Minha Mesa e vai para a Mesa escolhida, junto com a tabela de destino. A partir daí ele aparece na lista de agendamentos.

Editar um Dataflow publicado ​

Na Mesa de Dados o Dataflow abre só para leitura, em Visualizar. Para editar:

  1. Na linha do Dataflow, clique em Clonar para minha mesa e confirme "Deseja realmente clonar este Dataflow para sua mesa pessoal?".
  2. Abra a cópia na Minha Mesa, em Editar, mude o que precisar e teste com Executar Todos os Nós.

O clone grava numa tabela nova da Minha Mesa, criada com a mesma estrutura e sem dados. Seus testes não tocam a tabela publicada, e o agendamento segue rodando o Dataflow original.

Republicar por cima do original ​

  1. Na Minha Mesa, clique em Publicar em uma mesa na linha do clone.
  2. Escolha a mesma Mesa de Dados. Ela aparece marcada "(já possui uma cópia)".
  3. Escolha Substituir a cópia existente e clique em Publicar.

O Lumo guarda uma cópia do Dataflow publicado antes de substituir, atualiza o publicado com o conteúdo do clone e mantém o mesmo Dataflow, então os agendamentos continuam apontando para ele. A estrutura da tabela do clone é aplicada à tabela publicada, e a tabela de teste da Minha Mesa sai de cena.

Escolha Criar uma nova cópia quando quiser um segundo Dataflow publicado, independente do original. Ele começa sem agendamento.

Se der errado ​

O nó "Consultar Lakehouse" está usando a tabela "X", que não está publicada. O Dataflow lê uma tabela que ainda está numa Minha Mesa. Publique a tabela antes e tente de novo; o mesmo vale para Extrair Datalake.

A tabela destino "X" (ID n) foi excluída... A tabela de destino do Dataflow foi para a Lixeira. Restaure a tabela ou escolha outra no nó de destino; ver Lixeira.

Tabela "X" já publicada na mesa N... A tabela de destino já está publicada em outra Mesa. Publique o Dataflow nessa mesma Mesa, ou grave numa tabela nova.

Este dataflow veio do template e só muda pela instalação do template... O Dataflow publicado foi instalado por um template e não aceita Substituir a cópia existente. Publique o clone com Criar uma nova cópia na mesma Mesa.

Relacionado ​

Pelo Lumo CLI

Este recurso também pode ser criado e versionado em YAML. Veja a referência de flow.