Conector do GitLab disponível no Lakeflow Connect
Ingira dados de repositórios, projetos, grupos e CI/CD do GitLab diretamente para o Databricks com o novo conector gerenciado.
O que mudou
Para que serve
Imagine que você precisa centralizar métricas de desenvolvimento, dados de pipelines de CI/CD e informações de segurança do GitLab junto com seus dados analíticos. Com o conector gerenciado do GitLab no Lakeflow Connect, você consegue:
- Trazer dados de repositórios, grupos, projetos, CI/CD e segurança para o Databricks.
- Realizar ingestão incremental de forma automatizada.
- Governar os dados diretamente com o Unity Catalog.
Como usar
A configuração inicial e a criação do pipeline utilizam o Catalog Explorer e interfaces suportadas do Lakeflow Connect. O administrador do workspace deve primeiro habilitar o recurso na página de Previews e configurar a autenticação OAuth U2M.
Limitações e requisitos
- O recurso está em Beta.
- Exige que o administrador do workspace habilite o Lakeflow Connect para o GitLab na página de Previews.
- Suporta apenas autenticação do tipo OAuth U2M (OAuth M2M e autenticação básica não são suportados).
- Tabelas com colunas em formato
VARIANTnão suportam SCD Tipo 2. - Alterações automáticas de esquema suportam adição e remoção de colunas, mas mudanças de tipo de dado e renomeação de colunas não são suportadas (exigem atualização completa).
- Filtragem de linhas via API não é suportada.
- lakeflow connect
- gitlab
- ingestion
- unity catalog
- pipeline
GitLab connector is available in Beta
Resumo e explicação gerados por IA a partir da release note oficial. Em caso de dúvida, a documentação oficial da plataforma prevalece.
Relacionadas
- DatabricksGA
Repositórios de pacotes em nível de workspace para Databricks Apps
Administradores de workspace podem configurar repositórios padrão de pacotes Python e npm para Databricks Apps.
databricks apps · workspace settings - DatabricksGA
Redimensione partições de stateful streaming sem perder o checkpoint no Databricks
Agora é possível alterar o número de partições de shuffle em queries Structured Streaming e pipelines Lakeflow sem descartar o estado do checkpoint.
structured streaming · lakeflow - DatabricksAtualização
Google Gemini 4 Argon disponível no Unity Gateway do Databricks
O modelo multimodal Google Gemini 4 Argon já pode ser acessado via Foundation Model APIs e Unity Gateway.
unity catalog · foundation model apis