armazenamento padrão

info

Visualização

Esse recurso está em Private Preview e só está disponível em serverless workspace ou conta inscrita na visualização privada. Para solicitar acesso à visualização, preencha este formulário ou entre em contato com o representante da Databricks.

O armazenamento Private Preview for default fornece um local de armazenamento totalmente gerenciado para catálogos Unity Catalog, o que permite que o senhor crie tabelas e volumes gerenciados sem configurar credenciais de armazenamento ou locais externos em Unity Catalog.

O senhor pode adicionar um novo catálogo com suporte do armazenamento default a um catálogo existente habilitado para o Unity Catalog workspace.

important

Durante a visualização privada, o site Databricks não recomenda o armazenamento de dados de produção ou dados confidenciais no armazenamento default, nem a execução de cargas de trabalho de produção usando o armazenamento default.

Habilite o armazenamento default para seu Databricks account

Um administrador do account deve ativar o armazenamento do default no console do Databricks account . Essa opção só estará disponível depois que Databricks aprovar sua solicitação para join o Private Preview.

Peça a um administrador do account que conclua as etapas a seguir:

1. Faça login no consoleaccount.

nota

Ao usar o link fornecido, os usuários que não são administradores do account veem uma tela de seleção workspace em vez do console account.

2. Clique em Visualizar .

3. Coloque o armazenamento padrão em On .

important

A opção Storage padrão só é exibida se o site Databricks tiver habilitado seu account para esse Private Preview. O armazenamento padrão está ativado para todos os espaços de trabalho associados ao seu account, mas há requisitos adicionais.

O senhor deve criar um catálogo com o armazenamento default para permitir que as tabelas gerenciar e os volumes gerenciar armazenem dados com o armazenamento default.

Requisitos

• O armazenamento padrão é suportado apenas para Databricks on AWS.

• O senhor deve usar serverless compute para acessar o armazenamento default.

• Somente as seguintes regiões suportam o armazenamento default:

  • us-east-1
  • us-east-2
  • us-west-2
  • eu-west-1

• O senhor deve estar inscrito no Private Preview para o armazenamento default para usar essa funcionalidade.

• Seu workspace deve ter o Unity Catalog habilitado.

nota

Ao ativar o Unity Catalog pela primeira vez, o Databricks recomenda implantar um metastore sem especificar um bucket S3 para gerenciar o armazenamento. Ignore as etapas opcionais na documentação de ativação do Unity Catalog.

Criar um catálogo com o armazenamento default

Durante o Private Preview, o senhor deve usar o Catalog Explorer na interface do usuário workspace para criar um catálogo com o armazenamento default. O senhor não pode usar o comando SQL CREATE CATALOG catalog_name para criar um catálogo com o armazenamento default.

O senhor deve ter privilégios CREATE CATALOG para criar um catálogo com o armazenamento default. Consulte Privilégios e objetos protegidos do Unity Catalog.

Conclua as etapas a seguir para criar um novo catálogo usando o armazenamento default:

1. Clique em Catálogo na barra lateral. O Catalog Explorer é exibido.
2. Clique em Criar catálogo . A caixa de diálogo Criar um novo catálogo é exibida.
3. Forneça um nome de catálogo que seja exclusivo em seu site account.
4. Selecione a opção para Usar o armazenamento default .
5. Clique em Criar .

Trabalhe com o armazenamento default

Todas as interações com o armazenamento default requerem serverless, o Unity Catalog habilitado para compute.

O recurso apoiado pelo armazenamento default usa o mesmo modelo de privilégio que outros objetos em Unity Catalog. O senhor deve ter privilégios suficientes para criar, view, consultar ou modificar objetos de dados. Consulte Privilégios e objetos protegidos do Unity Catalog.

Em default, os catálogos apoiados pelo armazenamento default ficam visíveis em todos os espaços de trabalho da mesma região. O senhor pode desativar esse comportamento vinculando o catálogo a um único workspace. Consulte Limitar o acesso do catálogo a um espaço de trabalho específico.

O senhor trabalha com o armazenamento default criando e interagindo com tabelas gerenciar e volumes gerenciar apoiados pelo armazenamento default. Consulte Trabalhar com tabelas gerenciais e O que são volumes Unity Catalog?

Para interagir com os objetos de dados armazenados no armazenamento default, o senhor pode usar o Catalog Explorer, o Notebook, o editor de consultas e os painéis.

A seguir, exemplos de tarefas que o senhor pode concluir com o armazenamento default:

• fazer upload de arquivos locais para um volume gerenciar ou criar uma tabela gerenciar. Consulte upload de arquivos para um volume Unity Catalog e Criar ou modificar uma tabela usando o arquivo upload.
• Consultar dados com o Notebook. Veja o tutorial: Consultar e visualizar dados de um Notebook.
• Crie um painel. Consulte Criar um painel.
• Consultar dados com SQL e programar SQL consultas. Consulte Escrever consultas e explorar dados no editor SQL.
• Ingerir dados de um volume externo em uma tabela gerenciadora. Consulte Uso do Auto Loader com o Unity Catalog.
• Ingerir dados em uma tabela gerenciar com Fivetran. Consulte Conectar-se ao Fivetran.
• Use as ferramentas do site BI para explorar tabelas gerenciais. Consulte Conectar o Tableau e o Databricks e Conectar o Power BI ao Databricks.
• execução serverless Notebook. Consulte compute sem servidor para o Notebook.
• execução serverless Job. Veja a execução de seu Databricks Job com serverless compute para fluxo de trabalho.
• execução servindo modelo endpoint. Veja os modelos implantados usando Mosaic AI Model Serving.
• execução serverless DLT pipeline. Consulte Configurar um serverless DLT pipeline.
• Use a otimização preditiva em suas tabelas. Consulte Otimização preditiva para Unity Catalog gerenciar tabelas.

Limitações

Durante a visualização privada, o site Databricks não recomenda o armazenamento de dados de produção ou dados confidenciais no armazenamento default, nem a execução de cargas de trabalho de produção usando o armazenamento default. As seguintes limitações se aplicam:

• Muitas regiões não são suportadas. Consulte os requisitos.
• O compute clássico (qualquer compute que não seja serverless) não pode interagir com dados ativos no armazenamento default.
• Delta Sharing suporta o compartilhamento de dados ativos dentro do mesmo Databricks account, mas não para outros Databricks account ou clientes abertos Delta Sharing.
• Leitores e gravadores externos não podem acessar o armazenamento default.
• O armazenamento padrão não é compatível com configurações avançadas de rede ou com a chave gerenciada pelo cliente.
• O senhor não pode criar um novo catálogo no armazenamento default usando o comando CREATE CATALOG catalog_name SQL.