Pular para o conteúdo principal

Conectores SaaS gerenciados

Databricks LakeFlow Connect fornece conectores totalmente programáveis para ingestão de dados de aplicativos SaaS corporativos. Cada conector lida com autenticação específica da fonte, leituras incrementais, evolução do esquema e novas tentativas automatizadas.

Conectores suportados​

    • Aha!
    • Ingerir ideias, produtos, tarefas e registros de gerenciamento de produtos relacionados do Aha!.
    • Akamai WAF
    • Ingerir eventos de segurança de firewall de aplicativo da Web (WAF) do Akamai.
    • Amplitude
    • Ingira dados de eventos de analítica de produto juntamente com metadados de evento, coorte e anotação do Amplitude.
    • Anaplan
    • Ingira eventos de trilha de auditoria e registros de conta de usuário do Anaplan.
    • Anthropic
    • Ingerir dados de auditoria da API de Compliance, diretório e chat/mensagens do Claude da Anthropic.
    • Organização Anysphere
    • Ingira membros, grupos e membros de grupos da organização da Anysphere (Cursor) Organization Admin API.
    • Asana
    • Incorpore dados de gerenciamento de trabalho, como Workspace, projetos, tarefas, portfólios e metas do Asana.
    • Azure DevOps
    • Ingira dados de projeto, repository, item de trabalho, build, release e identidade do Azure DevOps.
    • Celigo
    • Ingerir eventos de log de auditoria, como operações de criação, atualização e exclusão de recursos, do Celigo (integrator.io).
    • Confluência
    • Importe páginas, espaços e comentários do Atlassian Confluence.
    • Cribl
    • Ingira logs de configuração, status do worker, metadados da organização e logs de auditoria e acesso do Leader do Cribl.Cloud.
    • GitHub
    • Ingerir dados de repositório, como commits, problemas e pull requests do GitHub.
    • GitLab
    • Ingira dados de repository, projeto, grupo, CI/CD e segurança do GitLab.
    • Glean
    • Ingira percepções de uso e dados de atalhos do Glean.
    • Gmail
    • Ingira mensagens, rótulos, rascunhos e filtros de uma caixa de correio do Gmail.
    • Google Ads
    • Importe métricas de desempenho de campanhas e publicidade do Google Ads.
    • Google Analytics
    • Ingerir dados de tráfego do site e comportamento do usuário do Google Analytics 4.
    • Google Analítica Agregado
    • Ingira dados agregados de usuário, sessão, aquisição, engajamento e relatórios personalizados do Google analítica 4.
    • Google Search Console
    • Ingira dados de desempenho de pesquisa, metadados do site e informações de sitemap do Google Search Console.
    • Google Workspace
    • Ingira eventos de atividade dos logs de auditoria do aplicativo Google Workspace.
    • HubSpot
    • Importe dados de CRM, marketing e atividades de vendas do HubSpot.
    • Jira
    • Importe dados de gerenciamento de projetos e acompanhamento de problemas do Atlassian Jira.
    • LinkedIn Ads
    • Ingira dados de campanhas publicitárias e relatórios de desempenho do LinkedIn Ads.
    • Marketo
    • Ingerir dados de lead, atividade, lista estática e objetos personalizados do Adobe Marketo Engage.
    • Meta Anúncios
    • Ingerir dados de campanhas publicitárias do Meta (Facebook e Instagram Ads).
    • Microsoft Entra ID
    • Ingira objetos de diretório, atribuições de função, configuração de identidade e logs de auditoria e entrada do Microsoft Entra ID.
    • Logs do Microsoft Graph
    • Ingerir alertas de segurança do Microsoft Defender XDR, Microsoft Sentinel e outros produtos de segurança da Microsoft.
    • Segunda-feira.com
    • Ingeira dados de gerenciamento de trabalho, como quadros, usuários, equipes e logs de atividade, do Monday.com.
    • NetSuite
    • Importar dados financeiros e de ERP do Oracle NetSuite.
    • Noção
    • Importe páginas, fontes de dados, bancos de dados, blocos, comentários e usuários do Notion.
    • Okta
    • Ingira usuários, grupos, integrações de aplicativos, dispositivos, políticas e funções de administrador do Okta.
    • OpenAI
    • Ingerir dados de administração da organização, como usuários, projetos, uso, custos e logs de auditoria da OpenAI.
    • Oracle Eloqua
    • Ingira contatos, accounts, campanhas, emails, formulários, atividades e outros dados de marketing do Oracle Eloqua.
    • Outlook
    • Ingerir mensagens de email do Microsoft Outlook.
    • PagerDuty
    • Ingira dados de incidentes, sobreaviso, serviço e auditoria do PagerDuty.
    • PayPal
    • Ingira dados de pagamentos como transações, disputas, faturas e saldos do PayPal.
    • Pendo
    • Ingerir dados de analítica de produto do Pendo.
    • Productboard
    • Ingira a hierarquia de produtos, roteiro, objetivos e notas de feedback do cliente do Productboard.
    • QuickBooks
    • Ingira dados de contabilidade como contas, clientes, faturas, contas e pagamentos do QuickBooks.
    • Anúncios do Reddit
    • Ingerir dados de campanhas publicitárias e métricas de desempenho do Reddit Ads.
    • Salesforce
    • Ingerir registros de CRM e dados de clientes do Salesforce usando leituras incrementais.
    • Salesforce Marketing Cloud
    • Ingerir dados de marketing como jornadas, campanhas, emails e assinantes do Salesforce Marketing Cloud.
    • SendGrid
    • Ingira dados de diretório de subusuários e atividade de gerenciamento de acesso de IP do SendGrid.
    • ServiceNow
    • Importe registros e chamados de gerenciamento de serviços IT do ServiceNow.
    • SharePoint
    • Importe arquivos e liste dados de sites do Microsoft SharePoint.
    • Shopify
    • Ingira dados de comércio eletrônico, como produtos, pedidos, clientes, estoque, execuções e descontos do Shopify.
    • Smartsheet
    • Ingerir dados de planilha do Smartsheet.
    • Square
    • Ingerir dados de ponto de venda, como pagamentos, pedidos, clientes, itens de catálogo e inventário, do Square.
    • Strac
    • Ingira eventos de auditoria de segurança de dados do Strac.
    • SurveyMonkey
    • Ingira pesquisas, coletores, respostas a pesquisas e contatos do SurveyMonkey.
    • Veeva Vault
    • Ingerir objetos padrão, objetos personalizados, tabelas do sistema e tabelas de trilha de auditoria do Veeva Vault.
    • Verkada
    • Ingerir logs de auditoria da organização e acessar usuários do Verkada.
    • Vimeo
    • Ingira dados de equipe, membro de equipe, função de equipe e log de auditoria do Vimeo.
    • Workday HCM
    • Importe dados de RH, folha de pagamento e força de trabalho do Workday Human Capital Management.
    • Workiva
    • Ingira atividades de auditoria, usuários e funções do Workiva.
    • Xero
    • Ingira dados contábeis como faturas, pagamentos, contatos e transações bancárias do Xero.
    • Zendesk Support
    • Importe dados de tickets de suporte, usuários e organização do Zendesk.
    • Zip
    • Ingerir dados de compras, como solicitações, pedidos de compra, faturas e fornecedores da Zip.
    • Zoho Books
    • Ingira dados contábeis, como faturas, contas, contatos e transações bancárias do Zoho Books.
    • Zoho CRM
    • Ingira dados de CRM, como leads, contatos, contas, negócios e módulos personalizados do Zoho CRM.
nota

Para compartilhar dados com o SAP Business Data Cloud (BDC), use o conector SAP BDC para Databricks, que utiliza o OpenSharing e não o Lakeflow Connect. Consulte Compartilhar dados entre o SAP Business Data Cloud (BDC) e o Databricks.

Componentes de conexão​

Um conector SaaS possui os seguintes componentes:

Componente

Descrição

Conexão

Um objeto protegível do Unity Catalog que armazena detalhes de autenticação para o aplicativo.

pipelinede ingestão

Um pipeline que copia os dados da aplicação para as tabelas de destino. A execução pipeline de ingestão na compute serverless .

Tabelas de destino

As tabelas onde o pipeline de ingestão grava os dados. Essas são tabelas de transmissão, que são tabelas Delta com suporte adicional para processamento incremental de dados.

Componente

Descrição

Conexão

Um objeto protegível do Unity Catalog que armazena detalhes de autenticação para o aplicativo.

pipelinede ingestão

Um pipeline que copia os dados da aplicação para as tabelas de destino. A execução pipeline de ingestão na compute serverless .

Tabelas de destino

As tabelas onde o pipeline de ingestão grava os dados. Essas são tabelas de transmissão, que são tabelas Delta com suporte adicional para processamento incremental de dados.

Diagrama de componentes do conector SaaS