Conector do GitLab
Beta
Esse recurso está em Beta. Para usá-lo, o administrador do workspace deve ativar o Lakeflow Connect para GitLab na página Pré-visualizações . Consulte Gerenciar prévias do Databricks.
O conector gerenciado do GitLab no Lakeflow Connect ingere dados de repositório, projeto, grupo, CI/CD e segurança do GitLab para o Databricks.
Disponibilidade de recursos
Recurso | Disponibilidade |
|---|---|
Criação de pipelines baseada em interface do usuário |
|
Criação de pipelines baseada em API |
|
Pacotes de Automação Declarativa |
|
Ingestão incremental |
|
Governança do Unity Catalog |
|
Orquestração usando o Databricks Workflows |
|
Seleção e deseleção de colunas com base em API |
|
Filtragem de linhas baseada em API |
|
SCD Tipo 2 |
Tabelas com colunas VARIANT ( |
Evolução do esquema automatizada: novas colunas e colunas excluídas |
|
Evolução automática do esquema: alterações de tipo de dados |
|
Evolução automática do esquema: alterações de nome de colunas |
Requer um refresh completo. |
Métodos de autenticação
Método de autenticação | Disponibilidade |
|---|---|
OAuth U2M |
|
OAuth M2M |
|
Autenticação básica (nome de usuário/senha) |
|
Fazer a ingestão do GitLab em 3 os passos
Antes de começar, revise a persona de usuário do Databricks, as interfaces compatíveis, a frequência de ingestão e os padrões comuns.
- Configurar o GitLab para ingestão (Administradores): configure o GitLab para autenticar com o Databricks.
- Criar uma conexão do Unity Catalog (Administradores): crie uma conexão no Catalog Explorer para armazenar as credenciais para o Databricks se autenticar com o GitLab.
- Create an ingestion pipeline (Administradores ou não administradores): Selecione qualquer interface compatível e crie um pipeline a partir de uma conexão existente.