Pular para o conteúdo principal

Conecte-se ao site serverless compute

Esta página explica como conectar-se e usar compute serverless para Notebook, fluxo de trabalho e pipeline declarativo LakeFlow Spark no Databricks.

O que é serverless compute?

compute sem servidor é um serviço gerenciado Databricksque permite aos usuários se conectarem rapidamente a recursos de computação sob demanda para Notebook, fluxo de trabalho e pipeline declarativo LakeFlow Spark .

Ao optar por usar o serverless compute, o senhor pode executar cargas de trabalho sem provisionar qualquer compute recurso em seu cloud account. Em vez disso, o site Databricks aloca e gerencia automaticamente o recurso compute necessário. Isso acelera os tempos de start-up e de escalonamento, minimiza o tempo de parada e reduz a necessidade de gerenciar compute recurso.

As cargas de trabalho sem servidor são protegidas por múltiplas camadas de segurança e são projetadas para serem adequadas ao ambiente corporativo. Para obter mais informações, consulte Segurança serverless Databricks.

nota

compute sem servidor está disponível por default na maioria dos espaços de trabalho e não requer ativação. Os espaços de trabalho que têm Unity Catalog ativado têm acesso automático a compute serverless .

Outros recursos Databricks , como SQL Warehouse serverless , o Servindo Modelo e o recurso AI , usam infraestrutura serverless de forma independente e possuem seus próprios caminhos de configuração. Esta página aborda compute serverless apenas para Notebook, fluxo de trabalho e pipeline declarativo LakeFlow Spark .

Utilize compute serverless para suas cargas de trabalho.

Use as páginas a seguir para aprender como configurar cargas de trabalho para usar compute serverless :

Outros recursos que utilizam infraestrutura serverless

Muitos recursos Databricks são executados em infraestrutura serverless , mas são configurados e gerenciados separadamente do compute serverless para Notebooks, Jobs e pipelines declarativos LakeFlow Spark . Por exemplo:

sem servidor compute requisitos

compute sem servidor está disponível por default na maioria dos espaços de trabalho. Não são necessários passos de ativação manual.

Espaços de trabalho legados que não estão habilitados para Unity Catalog não têm acesso a compute serverless . Para acessar compute serverless , você precisa atualizar para o Unity Catalog. Consulte Atualizar um espaço de trabalho Databricks para o Unity Catalog.

sem servidor compute limitações

Para obter uma lista de limitações, consulte limitações do compute sem servidor.

Perguntas frequentes (FAQ)

Como os lançamentos são lançados?

O compute sem servidor é um produto sem versão , o que significa que o Databricks atualiza automaticamente o tempo de execução do serverless compute para oferecer suporte a aprimoramentos e atualizações da plataforma. Todos os usuários recebem as mesmas atualizações, lançadas em um curto período de tempo.

Como posso determinar a versão do site serverless que estou executando?

as cargas de trabalho sem servidor sempre são executadas na versão mais recente do tempo de execução. Consulte as notas sobre a versão para obter a versão mais recente.

Como posso estimar os custos do serverless?

A Databricks recomenda a execução e o benchmarking de uma carga de trabalho representativa ou específica e, em seguida, a análise da tabela do sistema de faturamento. Consulte a referência da tabela do sistema de uso faturável.

Como faço para analisar o uso de DBU para uma carga de trabalho específica?

Para ver o custo de uma carga de trabalho específica, consulte a tabela do sistema system.billing.usage. Consulte Monitorar o custo de serverless computepara obter exemplos de consultas e para download nosso painel de observabilidade de custos.

Há um atraso entre o momento em que o senhor executa um trabalho ou consulta e o aparecimento de cobranças na tabela do sistema de uso faturável?

Sim, pode haver um atraso de até 24 horas entre o momento em que o senhor executa uma carga de trabalho e o momento em que seu uso é refletido na tabela do sistema de uso faturável.

Por que vejo registros de faturamento para trabalhos serverless , mesmo sem ter executado nenhuma carga de trabalho serverless ?

O monitoramento da qualidade dos dados e a execução da otimização preditiva em infraestrutura serverless são cobrados sob o SKU de trabalho serverless . Esses recursos são gerenciados separadamente da compute serverless para Notebook, fluxo de trabalho e pipeline declarativo LakeFlow Spark .

O site serverless compute oferece suporte a repositórios privados?

Os repositórios podem ser privados ou exigir autenticação. Por motivos de segurança, é necessário um URL pré-assinado ao acessar repositórios autenticados.

Como faço para instalar a biblioteca em minha tarefa Job?

Databricks recomenda o uso de ambientes para instalar e gerenciar a biblioteca do seu Job. Consulte Configurar ambiente para tarefa de trabalho.

Posso me conectar a uma fonte de dados personalizada?

Não, somente as fontes que usam a Lakehouse Federation são suportadas. Consulte Fonte de dados suportada.

Como funciona a rede do plano serverless compute ?

serverless compute recurso execução no plano serverless compute , que é gerenciado por Databricks. Para obter mais detalhes sobre a rede e a arquitetura, consulte compute plane networking sem servidor.

Posso configurar compute serverless para Jobs com Declarative Automation Bundles?

Sim, os Declarative Automation Bundles podem ser usados para configurar Jobs que utilizam compute serverless . Veja Job que utiliza compute serverless.

Como faço para executar minha carga de trabalho serverless a partir da minha máquina de desenvolvimento local ou do meu aplicativo de dados?

Databricks Connect permite que o senhor se conecte a Databricks a partir de seu computador local e execute cargas de trabalho em serverless. Consulte O que é o Databricks Connect?