Conector do Anysphere Organization no Lakeflow Connect
Ingira membros e grupos da organização Anysphere (Cursor) para o Databricks em snapshots diários usando o Lakeflow Connect.
O que mudou
O conector do Anysphere Organization no Lakeflow Connect permite trazer dados de usuários e equipes do Cursor diretamente para o seu lakehouse. Ele utiliza a API de Administração do Anysphere e salva os dados particionados por data, facilitando auditorias e análises de uso da ferramenta.### Para que serveImagine que você precisa auditar o acesso de desenvolvedores e o uso de licenças da ferramenta Cursor na sua empresa. Com este conector, você pode centralizar esses dados no Databricks. É possível fazer:- Ingestão diária de membros da organização e grupos de trabalho.- Criação de pipelines usando a interface gráfica, APIs ou Databricks Workflows.- Governança direta com o Unity Catalog.### Como usarPara configurar o pipeline e carregar os dados, você utiliza a interface do Catálogo ou APIs do Databricks. O exemplo a seguir ilustra a criação de uma conexão e o acionamento do pipeline via fluxo de trabalho.sql -- Exemplo conceitual de uso no Catalog Explorer ou Workflows CREATE CONNECTION se_anysphere_conn TYPE ANANSPHERE OPTIONS ( api_key 'sua_chave_de_api_aqui' ); O que nesse código:- 1. Define uma nova conexão no Unity Catalog usando a chave de API de administrador do Anysphere.- 2. Habilita o acesso para que os engenheiros criem o pipeline de ingestão.### Limitações e requisitos- Estágio: Beta.- Método de autenticação: Apenas chave de API de Administrador (API Key).- Ingestão incremental: Não suportada. Todas as tabelas são atualizadas com snapshots completos a cada execução, mantendo o histórico na coluna snapshot_date.- SCD Tipo 2: Não suportado devido à ausência de rastreio de exclusão por CDC.
- lakeflow connect
- ingestion
- unity catalog
- pipelines
Anysphere Organization connector (Beta)
Resumo e explicação gerados por IA a partir da release note oficial. Em caso de dúvida, a documentação oficial da plataforma prevalece.
Relacionadas
- DatabricksGA
Repositórios de pacotes em nível de workspace para Databricks Apps
Administradores de workspace podem configurar repositórios padrão de pacotes Python e npm para Databricks Apps.
databricks apps · workspace settings - DatabricksGA
Redimensione partições de stateful streaming sem perder o checkpoint no Databricks
Agora é possível alterar o número de partições de shuffle em queries Structured Streaming e pipelines Lakeflow sem descartar o estado do checkpoint.
structured streaming · lakeflow - DatabricksAtualização
Google Gemini 4 Argon disponível no Unity Gateway do Databricks
O modelo multimodal Google Gemini 4 Argon já pode ser acessado via Foundation Model APIs e Unity Gateway.
unity catalog · foundation model apis