Limitações do conector do Vimeo

info

Beta

Esse recurso está em Beta. Para usá-lo, um administrador do workspace deve ativar o Lakeflow Connect para Vimeo na página Pré-visualizações . Consulte Gerenciar prévias do Databricks.

O conector Vimeo gerenciado no Lakeflow Connect ingere quatro tabelas, lê no máximo 364 dias de história de logs de auditoria, usa refresh completo apenas para dados de equipe e não oferece suporte a SCD tipo 2.

Limitações gerais de software como serviço (SaaS) do conector

As limitações nesta seção aplicam-se a todos os conectores SaaS no Lakeflow Connect.

• Quando você executa um pipeline agendado, os alertas não Trigger imediatamente. Em vez disso, eles fazem Trigger quando ocorre a execução da próxima atualização.
• Quando uma tabela de origem é excluída, a tabela de destino não é excluída automaticamente. Você deve excluir a tabela de destino manualmente. Esse comportamento não é consistente com o comportamento do Spark Declarative Pipelines no Lakeflow.
• Durante os períodos de manutenção da fonte, o Databricks pode não conseguir acessar seus dados.
• Se um nome de tabela de origem entrar em conflito com um nome de tabela de destino existente, a atualização do pipeline falhará.
• O suporte a pipeline de multi-destino é apenas para API.
• Opcionalmente, você pode renomear uma tabela que você ingere. Se você renomear uma tabela em seu pipeline, ele se tornará um pipeline apenas de API e você não poderá mais editar o pipeline na UI.
• Se você selecionar uma coluna após começar um pipeline, o conector não preencherá automaticamente os dados da nova coluna. Para ingerir data histórica, execute manualmente um refresh completo na tabela.
• O Databricks não pode ingerir duas ou mais tabelas com o mesmo nome no mesmo pipeline, mesmo que elas venham de esquemas de origem diferentes.
• O sistema de origem assume que as colunas de cursor aumentam monotonicamente.
• O conector ingere dados brutos sem transformações. Use Spark Declarative Pipelines downstream em LakeFlow Pipelines para transformações.

Limitações específicas do conector

As limitações nesta seção se aplicam ao conector Vimeo.

• O conector ingere quatro tabelas: teams, team_members, team_roles e audit_logs. Não ingere outras APIs ou recursos do Vimeo.
• As tabelas teams, team_members e team_roles são apenas de refresh completo. O conector reingere todos os registros em cada execução.
• A tabela audit_logs ingere eventos de no máximo os 364 dias anteriores, pouco menos do limite de 365 dias do Vimeo. O Vimeo não disponibiliza eventos de auditoria mais antigos por meio da API.
• O conector lê dados para um único proprietário da account de equipe, definido pelo ID de usuário do proprietário da account na conexão. Ele não ingere dados de vários proprietários em um único pipeline.
• O SCD tipo 2 não é compatível com nenhuma tabela porque cada tabela tem VARIANT colunas, que o conector não pode comparar para o acompanhamento de alterações no nível da linha.