Pular para o conteúdo principal

Conector do GitLab

info

Beta

Esse recurso está em Beta. Para usá-lo, o administrador do workspace deve ativar o Lakeflow Connect para GitLab na página Pré-visualizações . Consulte Gerenciar prévias do Databricks.

O conector gerenciado do GitLab no Lakeflow Connect ingere dados de repositório, projeto, grupo, CI/CD e segurança do GitLab para o Databricks.

Disponibilidade de recursos​

Recurso

Disponibilidade

Criação de pipelines baseada em interface do usuário

Ícone de marca de verificação verde Compatível

Criação de pipelines baseada em API

Ícone de marca de verificação verde Compatível

Pacotes de Automação Declarativa

Ícone de marca de verificação verde Compatível

Ingestão incremental

Ícone de marca de verificação verde Compatível

Governança do Unity Catalog

Ícone de marca de verificação verde Compatível

Orquestração usando o Databricks Workflows

Ícone de marca de verificação verde Compatível

Seleção e deseleção de colunas com base em API

Ícone de marca de verificação verde Compatível

Filtragem de linhas baseada em API

Ícone de X vermelho Não suportado

SCD Tipo 2

Ícone de marca de verificação verde Compatível

Tabelas com colunas VARIANT (commits, releases, deployments, epics, merge_request_commits, epic_issues, merge_request_discussions) não oferecem suporte ao SCD tipo 2.

Evolução do esquema automatizada: novas colunas e colunas excluídas

Ícone de marca de verificação verde Compatível

Evolução automática do esquema: alterações de tipo de dados

Ícone de X vermelho Não suportado

Evolução automática do esquema: alterações de nome de colunas

Ícone de X vermelho Não suportado

Requer um refresh completo.

Recurso

Disponibilidade

Criação de pipelines baseada em interface do usuário

Ícone de marca de verificação verde Compatível

Criação de pipelines baseada em API

Ícone de marca de verificação verde Compatível

Pacotes de Automação Declarativa

Ícone de marca de verificação verde Compatível

Ingestão incremental

Ícone de marca de verificação verde Compatível

Governança do Unity Catalog

Ícone de marca de verificação verde Compatível

Orquestração usando o Databricks Workflows

Ícone de marca de verificação verde Compatível

Seleção e deseleção de colunas com base em API

Ícone de marca de verificação verde Compatível

Filtragem de linhas baseada em API

Ícone de X vermelho Não suportado

SCD Tipo 2

Ícone de marca de verificação verde Compatível

Tabelas com colunas VARIANT (commits, releases, deployments, epics, merge_request_commits, epic_issues, merge_request_discussions) não oferecem suporte ao SCD tipo 2.

Evolução do esquema automatizada: novas colunas e colunas excluídas

Ícone de marca de verificação verde Compatível

Evolução automática do esquema: alterações de tipo de dados

Ícone de X vermelho Não suportado

Evolução automática do esquema: alterações de nome de colunas

Ícone de X vermelho Não suportado

Requer um refresh completo.

Métodos de autenticação​

Método de autenticação

Disponibilidade

OAuth U2M

Ícone de marca de verificação verde Compatível

OAuth M2M

Ícone de X vermelho Não suportado

Autenticação básica (nome de usuário/senha)

Ícone de X vermelho Não suportado

Método de autenticação

Disponibilidade

OAuth U2M

Ícone de marca de verificação verde Compatível

OAuth M2M

Ícone de X vermelho Não suportado

Autenticação básica (nome de usuário/senha)

Ícone de X vermelho Não suportado

Fazer a ingestão do GitLab em 3 os passos​

  1. Configurar o GitLab para ingestão (Administradores): configure o GitLab para autenticar com o Databricks.
  2. Criar uma conexão do Unity Catalog (Administradores): crie uma conexão no Catalog Explorer para armazenar as credenciais para o Databricks se autenticar com o GitLab.
  3. Create an ingestion pipeline (Administradores ou não administradores): Selecione qualquer interface compatível e crie um pipeline a partir de uma conexão existente.