Ingira logs de auditoria do Celigo no Databricks com o Lakeflow
O novo conector do Celigo no Lakeflow Connect permite ingerir eventos de auditoria diretamente no Databricks usando token de API.
O que mudou
Para que serve
Imagine que você precisa centralizar a auditoria de integrações e quer trazer eventos de criação, atualização e exclusão de recursos do Celigo (integrator.io) para o seu lakehouse.
- Ingerir eventos de log de auditoria do Celigo de forma incremental.
- Automatizar a evolução de esquema para colunas novas ou removidas.
Como usar
CREATE CONNECTION meu_conexao_celigo
TYPE CELIGO
OPTIONS (
api_token 'seu_token_api_aqui'
);
O que acontece nesse código:
- Cria uma conexão segura no Unity Catalog armazenando as credenciais de acesso.
- Configura a autenticação básica baseada em chave de API do Celigo.
Limitações e requisitos
- Recurso em estágio Beta.
- Exige que um administrador do workspace habilite o Lakeflow Connect para o Celigo na página de Previews.
- Autenticação restrita a API token de acesso total do Celigo integrator.io.
- Filtragem de linhas via API não é suportada.
- Mudanças de tipo de dados ou renomeação de colunas exigem um full refresh.
- lakeflow connect
- celigo
- unity catalog
- ingestion
- audit logs
Celigo connector (Beta)
Resumo e explicação gerados por IA a partir da release note oficial. Em caso de dúvida, a documentação oficial da plataforma prevalece.
Relacionadas
- DatabricksGA
Repositórios de pacotes em nível de workspace para Databricks Apps
Administradores de workspace podem configurar repositórios padrão de pacotes Python e npm para Databricks Apps.
databricks apps · workspace settings - DatabricksGA
Redimensione partições de stateful streaming sem perder o checkpoint no Databricks
Agora é possível alterar o número de partições de shuffle em queries Structured Streaming e pipelines Lakeflow sem descartar o estado do checkpoint.
structured streaming · lakeflow - DatabricksAtualização
Google Gemini 4 Argon disponível no Unity Gateway do Databricks
O modelo multimodal Google Gemini 4 Argon já pode ser acessado via Foundation Model APIs e Unity Gateway.
unity catalog · foundation model apis