Cadastrar base

Pipelines

Transformam o que o conector coletou na saída do dataset: validação, limpeza, mapeamento de campos e evidências de cada execução.

Pipelines
Clique no nome para abrir a ficha.
PipelineConector › DatasetÚltima execuçãoSituaçãoAgendaAção
Pipelines

Pipeline

Saída da última execução
Amostra gravada na última execução.
Qualidade
Schema detectado
Prévia transformada
Rejeitos
Execuções nos últimos 30 dias
Cadastro

* obrigatório

Agenda
Este pipeline roda depois de cada coleta que deu certo. A agenda abaixo fica guardada, mas não é usada enquanto a chave "Rodar pipeline depois da coleta" estiver ligada em Settings.
Este conector não tem agenda. O pipeline tem agenda, mas o conector não busca dados sozinho: execute o conector ou configure a agenda dele.
Sem execução dentro deste prazo, o pipeline aparece como Atrasado.
Publicação automática
Ligado: a base publicada recebe a carga nova depois de cada execução agendada. Desligado: a carga nova espera um clique na tela do dataset. Grava na hora.
Transformações
Use quando a fonte devolve as linhas dentro de um envelope (ex.: GraphQL). O caminho aponta para a lista de itens que viram linhas.
Mapeamento de campos de, para
Extração de campos destino a partir de um JSONPath
Ex.: alert_code a partir de $.alertCode. Vazio: o pipeline usa os campos como vieram.
Tipos do schema do dataset
Escolha o dataset de saída para ver os tipos.
Por padrão o pipeline usa os tipos do schema do dataset. Ligue só para forçar uma conversão diferente.
Registros sem estes campos são rejeitados na validação.
Transformações por campo
Aplicadas depois do mapeamento, no nome final do campo. Completar à esquerda serve para códigos com zeros (ex.: município com 7 dígitos).
Campo de data ou número que só cresce. Se o maior valor não mudou desde a última execução, o pipeline não regrava o dataset.
Clique em Editar nos campos para voltar.
Salve o cadastro. As transformações, execuções, impacto e versões aparecem depois que o pipeline existir.
Reprocessar intervalo
O pipeline roda no servidor, na fila, sobre a última coleta do conector. A janela fica gravada na execução. Para buscar de novo só o período na fonte, reprocesse o conector.
Execuções
As 20 mais recentes. Abra uma execução para ver as etapas.