Novidades do Lakeflow Designer: Guardrails, joins múltiplos e Genie Code

Para que serve

Imagine que você precisa construir fluxos de preparação visual de dados e agora conta com novos recursos para validar qualidade, juntar várias fontes e automatizar tarefas. O Lakeflow Designer expande as capacidades do canvas visual.

• Validar dados contra regras de nulos, valores únicos e aceitos com o operador Guardrails.
• Combinar três ou mais tabelas em um único operador de Join.
• Criar operadores personalizados usando descrições em linguagem natural com o Genie Code.
• Importar múltiplos arquivos de uma só vez como operadores de origem.

Como usar

Para criar um novo fluxo de preparação visual de dados no Databricks com Unity Catalog:

1. Clique em New na barra lateral e selecione Visual data prep.
2. Adicione operadores de origem arrastando arquivos ou conectando tabelas.
3. Configure novos operadores como Guardrails ou Join diretamente no painel lateral.
4. Utilize o Genie Code na barra lateral para gerar funções Python e configurações descritas por texto.

Limitações e requisitos

• Requer um workspace Databricks com Unity Catalog habilitado.
• É necessário ter permissão CAN USE em pelo menos um recurso de computação de uso geral (serverless ou all-purpose).