Cleanup Studio
Analise um dataset, monte uma receita governada, valide todos os registros e aplique aos indicadores sem alterar a origem.
Abra Data+ → AI Cleanup Studio (/app/data-plus/cleanup-studio). O Cleanup Studio é o único fluxo de transformação do Data+. Uma receita aprovada muda os valores lidos pelos indicadores armazenados. Os registros da origem nunca são alterados.
Perfil
Selecione um dataset para inspecionar até 500 registros. O perfil mostra tipos inferidos, valores ausentes, contagens distintas, candidatos a chave, duplicatas e outliers. Contagens de amostra são marcadas como amostra e nunca são extrapoladas.
Verificar referências entre datasets compara um campo da amostra a uma chave em outro dataset armazenado que você pode ler. Se o dataset de referência tiver mais de 2.000 registros, a verificação informa não avaliado em vez de presumir chaves sem correspondência.
Monte uma receita
Uma receita tem até 100 regras aplicadas em ordem, e cada regra lê o resultado da anterior. Assim, um campo pode ter várias etapas.
| Grupo | Regras |
|---|---|
| Texto | Remover espaços, reduzir espaços repetidos, maiúsculas, minúsculas, normalizar identificador, manter dígitos |
| Identidade brasileira | CPF, CNPJ, CEP, telefone |
| Contato | |
| Valores | Mapear valores, tratar termos como vazio |
| Números e datas | Converter número, moeda ou percentual com separadores explícitos, converter data com formato explícito, valor em reais, data brasileira |
| Verificações | Validar padrão |
| Colunas | Dividir, unir, derivar |
A maioria das regras pode gravar em uma coluna nova em vez de substituir a original. Padrões precisam ser ancorados com ^ e $ e não aceitam grupos, alternância ou lookaround.
Se qualquer regra falhar em um registro, o registro inteiro fica em quarentena e mantém os valores originais.
As sugestões de IA usam somente nomes de campos e contagens agregadas, nunca valores da origem, e um curador aprova cada regra. Regras que mudam identidade, dinheiro, datas ou significado exigem uma justificativa escrita.
Valide e publique
- Prévia mostra os valores antes e depois na amostra.
- Validar agora confere todos os registros de um dataset armazenado em lotes de 200. Você pode pausar e retomar do mesmo ponto. Nenhuma linha transformada é gravada.
- A execução informa as contagens de alterados e em quarentena, os motivos da quarentena e a qualidade antes e depois.
- Aprovar e publicar cria uma versão imutável. A publicação é recusada se a origem ou as regras mudarem depois da validação.
Fontes Live não têm linhas armazenadas para validar. Por isso, são conferidas com uma leitura completa de até 10.000 registros sempre que um indicador é executado. Acima disso, a consulta é recusada.
Rollback mostra a prévia de uma versão anterior e a publica como nova versão, depois de validá-la da mesma forma. O histórico nunca é reescrito.
Acesso
As operações de curadoria exigem a capacidade de curadoria do Data+ e acesso de leitura à fonte. Fontes autorizadas com as credenciais pessoais de um usuário não podem ser usadas aqui.
API e MCP
Operações de curadoria próprias do produto:
GETePOST /api/app/data-plus/cleanup-studio: datasets, estado, prévia, sugestões, publicação e rollbackGETePOST /api/app/data-plus/cleanup-studio/validation: histórico,starteadvanceGET /api/app/data-plus/cleanup-studio/relationships: verificação de referências
Leituras governadas públicas: REST GET /api/v1/data-plus/cleanup-profile, POST /api/v1/data-plus/cleanup-preview, GET /api/v1/data-plus/dataset-profile?datasetId=<UUID> e MCP blocchi.get_cleanup_profile, blocchi.preview_cleanup_recipe e blocchi.get_dataset_profile. A prévia aceita todas as regras, exceto mapeamento de valores, e retorna somente contagens. A publicação continua no studio. Linhas brutas e exemplos de texto são omitidos.
Veja Prontidão das métricas e Curadoria.
Última atualização em