Conector da Anysphere Organization

info

Beta

Esse recurso está em Beta. Workspace admins can control access to this recurso from the Previews page by opting into the Lakeflow Connect for Anysphere Org preview. See Gerenciar Databricks previews.

O conector gerenciado Anysphere Organization no Lakeflow Connect permite ingerir dados de organização e equipe do Anysphere (Cursor) no Databricks.

Disponibilidade do recurso

Recurso	Disponibilidade
Criação de pipeline baseada em interface do usuário	Com suporte
Criação de pipelines baseada em API	Com suporte
Pacotes de Automação Declarativa	Com suporte
Ingestão incremental	Não suportado Todas as tabelas são atualizadas com um snapshot completo em cada atualização do pipeline. Cada tabela retém a história diária por meio da coluna de partição snapshot_date.
Governança do Unity Catalog	Com suporte
Orquestração usando o Databricks Workflows	Com suporte
SCD tipo 2	Não suportado Todas as tabelas são ingeridas como Snapshots de refresh completo sem acompanhamento de exclusão do CDC, portanto o SCD tipo 2 não está disponível.
Seleção e deseleção de colunas baseada em API	Com suporte
Filtragem de linhas baseada em API	Não suportado
Evolução automatizada do esquema: colunas novas e excluídas	Com suporte
Evolução do esquema automatizada: alterações de tipo de dados	Não suportado
Evolução automatizada do esquema: renomeação de colunas	Não suportado Requer um refresh completo.
Evolução do esquema automatizada: novas tabelas	Com suporte Se você ingerir o esquema inteiro.

Recurso	Disponibilidade
Criação de pipeline baseada em interface do usuário	Com suporte
Criação de pipelines baseada em API	Com suporte
Pacotes de Automação Declarativa	Com suporte
Ingestão incremental	Não suportado Todas as tabelas são atualizadas com um snapshot completo em cada atualização do pipeline. Cada tabela retém a história diária por meio da coluna de partição snapshot_date.
Governança do Unity Catalog	Com suporte
Orquestração usando o Databricks Workflows	Com suporte
SCD tipo 2	Não suportado Todas as tabelas são ingeridas como Snapshots de refresh completo sem acompanhamento de exclusão do CDC, portanto o SCD tipo 2 não está disponível.
Seleção e deseleção de colunas baseada em API	Com suporte
Filtragem de linhas baseada em API	Não suportado
Evolução automatizada do esquema: colunas novas e excluídas	Com suporte
Evolução do esquema automatizada: alterações de tipo de dados	Não suportado
Evolução automatizada do esquema: renomeação de colunas	Não suportado Requer um refresh completo.
Evolução do esquema automatizada: novas tabelas	Com suporte Se você ingerir o esquema inteiro.

Métodos de autenticação

Método de autenticação	Disponibilidade
OAuth U2M	Não suportado
OAuth M2M	Não suportado
Autenticação básica (nome de usuário/senha)	Não suportado
Autenticação básica (API key)	Com suporte Chave de API do administrador da organização Anysphere (Cursor).

Método de autenticação	Disponibilidade
OAuth U2M	Não suportado
OAuth M2M	Não suportado
Autenticação básica (nome de usuário/senha)	Não suportado
Autenticação básica (API key)	Com suporte Chave de API do administrador da organização Anysphere (Cursor).

Ingerir da organização Anysphere em 3 passos

nota

Antes de começar, analise a persona do usuário do Databricks, as interfaces suportadas, a frequência de ingestão e os padrões comuns.

Começar a ingerir da Anysphere Organization

1. Configurar a organização Anysphere para ingestão (Administradores) — Configure a organização Anysphere para autenticação com o Databricks.
2. Criar uma conexão do Unity Catalog (Administradores) — Crie uma conexão no Catalog Explorer para que os não administradores possam criar pipelines.
3. Criar um pipeline de ingestão (Administradores ou não administradores) — Selecione qualquer interface suportada e crie um pipeline a partir de uma conexão existente.