Junho de 2024
Essas melhorias nas plataformas recurso e Databricks foram lançadas em junho de 2024.
Os lançamentos são encenados. O site Databricks account pode não ser atualizado até uma semana ou mais após a data de lançamento inicial.
AI-comentários gerados (GA)
27 de junho de 2024
Junho de 2024
AI-Os comentários gerados pelo usuário agora estão disponíveis de forma geral. Consulte Adicionar AIcomentários gerados pelo Unity Catalog site aos objetos.
Notebook - destaque de sintaxe fora de ordem
16 de junho de 2024
Python O destaque de erros de sintaxe no Notebook agora avisa os usuários quando as variáveis são usadas antes de serem declaradas e sugere uma correção.
O Notebook Assistant diagnostica automaticamente os erros
16 de junho de 2024
O site Databricks Assistant agora diagnostica automaticamente os erros de código no Notebook. Isso usa o generativo AI para analisar seu código e a mensagem de erro para sugerir uma correção diretamente no Notebook. Para saber mais, consulte Ativar e experimentar o Databricks Assistant
melhorias no Catalog Explorer
28 de junho de 2024
As seguintes melhorias foram feitas no Catalog Explorer:
-
Foi adicionada uma seção de acesso rápido que exibe objetos recentes do Unity Catalog, objetos favoritos do Unity Catalog e catálogos e esquemas para navegação.
-
Removeu a barra superior e a estrutura do acordeão e moveu os pontos de entrada do seguinte para um menu de ícones de engrenagem na barra lateral com o navegador de esquemas para simplificar a navegação:
- computar a seleção
- Delta Sharing
- Credenciais de armazenamento
- Localizações externas
- Conexões
- Explorar DBFS
Também é possível acessar os dados Delta Sharing e External na parte superior do Catalog Explorer, acima da seção Quick access (Acesso rápido ).
Servir vários modelos externos a partir de um único modelo de serviço endpoint
27 de junho de 2024
Mosaic AI Model Serving agora suporta o atendimento de vários modelos externos por modelo de atendimento endpoint. Consulte Servir vários modelos externos para um endpoint.
O Databricks Assistant agora é GA
27 de junho de 2024
O Databricks Assistant é lançado como GA. Os recursos do assistente incluem:
- Gere, depure, otimize e explique o código.
- Crie visualizações a partir de dados. Consulte Criar visualizações com o Databricks Assistant.
- Trabalho de depuração (recurso de visualização pública).
- Codificar e editar consultas SQL.
- Encontre ajuda relevante na documentação da Databricks e na base de conhecimento.
Para obter mais informações, consulte O que é Databricks Assistant?
O Databricks Assistant agora dá títulos aos tópicos
27 de junho de 2024
Para navegar mais facilmente pelos tópicos de ajuda, o Databricks Assistant atribui títulos aos tópicos com base no contexto do seu prompt.
Consulte Ativar e experimentar o Databricks Assistant.
gerenciador de ambiente do Notebook sem servidor
27 de junho de 2024
Agora o senhor pode instalar Python dependências para o serverless Notebook usando o painel lateral Environment , que oferece um único local para editar, view e exportar os requisitos de biblioteca para um Notebook. Consulte Instalar dependências do Notebook.
Console de depuração de notebook
27 de junho de 2024
Com o console de depuração do Notebook, agora é possível inspecionar valores de variáveis em tempo real e executar trechos de código durante uma sessão de depuração do Notebook.
Adicione rapidamente um programar periódico a um Databricks fluxo de trabalho
28 de junho de 2024
Agora o senhor pode adicionar um simples programar a um Databricks fluxo de trabalho especificando apenas um intervalo e uma unidade de tempo (por exemplo, executar o fluxo de trabalho a cada 4 horas). Esse novo tipo de programar complementa o tipo de programar avançado existente, permitindo que o senhor adicione um programar com apenas alguns cliques. Ver execução Job on a programar.
Acesso de emergência para logon único GA
26 de junho de 2024
Para evitar bloqueios, os administradores do account podem configurar o acesso de emergência de logon único para até dez usuários. Esses usuários podem entrar em Databricks usando autenticação multifator com chave de segurança FIDO 2, como YubiKey ou um aplicativo autenticador móvel. Consulte Acesso de emergência para evitar bloqueios.
O Databricks Runtime 15.3 é GA
24 de junho de 2024
O Databricks Runtime 15.3 e o Databricks Runtime 15.3 ML já estão disponíveis para todos os usuários.
Consulte Databricks Runtime 15.3 (EoS) e Databricks Runtime 15.3 for Machine Learning (EoS).
Databricks Geos é GA
24 de junho de 2024
O Databricks Geos já está disponível para todos. Databricks Geos Gerenciar a residência de dados ao processar o conteúdo do cliente para alguns recursos do site AI.
Para obter mais informações,Databricks Geos consulte: Data residency (Residência de dados).
Nova interface de criação de catálogo aprimorada
18 de junho de 2024
A nova interface de criação de catálogo conduz você passo a passo por todo o processo de criação e configuração de um catálogo, fornecendo instruções úteis e separando as configurações necessárias das opcionais. Você pode usar a mesma interface de usuário para criar catálogos padrão, compartilhados e estrangeiros.
Consulte Criar catálogos.
As tabelas do sistema de faturamento são ativadas por default
18 de junho de 2024
O esquema system.billing agora está habilitado pelo site default em todos os espaços de trabalho Unity Catalog. Consulte a referência da tabela do sistema de uso faturável.
o monitoramento da lakehouse é GA
13 de junho de 2024
Databricks O Lakehouse Monitor já está disponível para todos os usuários.
O compartilhamento de volumes usando o Delta Sharing já está disponível para todos
13 de junho de 2024
Delta Sharing o suporte ao compartilhamento de dados não tabulares como um volume agora é GA. O senhor pode compartilhar volumes entre o espaço de trabalho Databricks em diferentes metastores Unity Catalog (incluindo o espaço de trabalho em diferentes contas Databricks e diferentes nuvens).
Volumes são objetos do Unity Catalog que representam um volume lógico de armazenamento em um local de armazenamento de objetos na nuvem. Eles se destinam principalmente a fornecer governança sobre dados não tabulares ativos. Delta Sharing O Databricks oferece uma integração nativa com o Unity Catalog que permite gerenciar, administrar, auditar e rastrear o uso de dados de volumes compartilhados.
Consulte Adicionar volumes a um compartilhamento.
Crie orçamentos para monitorar os gastos do account (Public Preview)
13 de junho de 2024
Os administradores de contas agora podem criar orçamentos para monitorar os gastos em Databricks account. Os orçamentos podem incluir filtros personalizados para rastrear os gastos com base em workspace e tags personalizadas. Consulte Criar e monitorar orçamentos.
Painel de gerenciamento de custos importável adicionado ao console account (visualização pública)
13 de junho de 2024
Os administradores de conta agora podem importar um painel de gerenciamento de custos personalizável do console account para qualquer Unity Catalog workspace em seu account. Há duas versões do painel de controle, uma que monitora o uso em todo o site accounte outra para uso individualworkspace.
Consulte Importar um painel de uso.
O login unificado agora está disponível ao público em geral
12 de junho de 2024
O login unificado permite que o senhor gerencie uma configuração SSO para seu Databricks account e espaço de trabalho. Quando o SSO está ativado no seu account, o senhor pode optar por ativar o login unificado para todo o espaço de trabalho ou para o espaço de trabalho selecionado. O espaço de trabalho de login unificado usa a configuração account-level SSO e todos os usuários, incluindo os administradores account e workspace, devem fazer login em Databricks usando SSO. consulte Habilitar login unificado. O login unificado está geralmente disponível para contas criadas após 21 de junho de 2023 desde 21 de junho de 2023.
A chave gerenciar do cliente (CMK) para Databricks Vector Search agora é GA
12 de junho de 2024
A chave gerenciadora de clientes (CMK) no ponto de extremidade de pesquisa de vetores agora está disponível de forma geral.
Mosaic AI Estrutura de agentes (visualização pública)
12 de junho de 2024
Mosaic AI A estrutura de agentes é um conjunto de ferramentas no site Databricks criado para ajudar os desenvolvedores a criar, implantar e avaliar aplicativos Retrieval Augmented Generation (RAG) com qualidade de produção. O Agent Framework permite que o senhor crie ou otimize aplicativos LLM em uma única plataforma usando seus próprios dados.
O Agent Framework inclui os seguintes recursos:
- Criar e log agentes e cadeias.
- Parametrize agentes e cadeias para experimentar e iterar rapidamente.
- para comparar a execução entre a recuperação de documentos relevantes, a precisão da resposta, o custo e a latência.
- Juízes LLM personalizados para recuperação e precisão de resposta.
- Implante aplicativos AI com registro automatizado de solicitações e respostas.
- aplicativo de avaliação integrado para obter feedback do usuário.
- Avaliação de agentes para avaliar a qualidade, a latência e o custo dos aplicativos generativos AI.
- MLflow Tracing para analisar e comparar traços na execução do código.
Para obter detalhes, consulte RAG (Retrieval Augmented Generation) no Databricks.
A otimização preditiva agora é GA
11 de junho de 2024
A otimização preditiva para as tabelas gerenciais do Unity Catalog já está disponível de forma geral. A otimização preditiva agora executa OPTIMIZE em tabelas com o líquido clustering habilitado para aplicar clustering. Consulte Otimização preditiva para Unity Catalog gerenciar tabelas.
A otimização de rota está disponível para o endpoint de atendimento
11 de junho de 2024
Agora o senhor pode criar um ponto de extremidade de atendimento otimizado de rota para seu modelo de atendimento ou Feature Serving fluxo de trabalho. Consulte Configurar otimização de rota no ponto de extremidade de serviço.
O mapeamento de colunas agora é GA
10 de junho de 2024
Delta Lake já está disponível de forma geral. Agora você pode usar DROP FEATURE para desativar o mapeamento de colunas e fazer o downgrade do protocolo da tabela. Consulte Renomear e soltar colunas com o mapeamento de colunas do Delta Lake.
As tabelas do sistema de fluxo de trabalho já estão disponíveis (visualização pública)
10 de junho de 2024
O esquema system.lakeflow contém quatro novas tabelas que o senhor pode usar para monitorar o trabalho em seu site account. Consulte a referência da tabela do sistema Jobs.
Se o senhor não tiver acesso a essas tabelas do sistema, certifique-se de que habilitou o esquema system.lakeflow em seu site account. Consulte Habilitar esquemas de tabela do sistema.
A chamada de função é uma pré-visualização pública
10 de junho de 2024
A chamada de funções agora está disponível na Pré-visualização pública. Essa funcionalidade está disponível usando o Foundation Model APIs modelos pay-per-tokens: DBRX Instruct e Meta-Llama-3-70B-Instruct. Consulte Chamada de função em Databricks.
Consulte um índice de pesquisa vetorial usando vector_search()
10 de junho de 2024
O AI Functions agora suporta vector_search(), o que permite que o senhor consulte um índice do Mosaic AI Vector Search usando SQL. Veja a funçãovector_search.
O Mosaic AI Vector Search agora oferece suporte à pesquisa híbrida
7 de junho de 2024
O Mosaic AI Vector Search agora oferece suporte à pesquisa híbrida de similaridade de palavras-chave, que combina a pesquisa de incorporação baseada em vetores com técnicas tradicionais de pesquisa baseadas em palavras-chave. Essa abordagem combina palavras exatas na consulta e, ao mesmo tempo, usa uma pesquisa de similaridade baseada em vetores para capturar as relações semânticas e o contexto da consulta. Ao integrar essas duas técnicas, a pesquisa híbrida por similaridade de palavras-chave recupera documentos que contêm não apenas as palavras-chave exatas, mas também aquelas que são conceitualmente semelhantes, fornecendo resultados de pesquisa mais abrangentes e relevantes. Para obter detalhes, consulte Mosaic AI Vector Search.
O GTE agora é compatível com o modelo servindo
7 de junho de 2024
O Mosaic AI Model Serving agora oferece suporte ao General Text Embedding (GTE), um modelo de incorporação de texto que pode mapear o texto para um vetor de incorporação. O GTE é suportado como parte do Foundation Model APIs e está disponível em pay-per-tokens que atendem às regiões endpoint. Consulte Usar APIs do Foundation Model.
O ponto de extremidade de atendimento otimizado de rota impõe restrições de rede
6 de junho de 2024
O serviço otimizado de rota endpoint agora impõe restrições de rede, como listas de controle de acesso IP ou PrivateLink. Consulte Configurar otimização de rota no ponto de extremidade de serviço.
Databricks Assistant: Threads & queries experience enabled by default
6 de junho de 2024
Databricks Assistant (Public Preview) agora rastreia as linhas de consulta e o histórico em todos os contextos do editor em sua experiência de sessão em default. O senhor pode gerenciar a habilitação de todos os espaços de trabalho em um account ou de um espaço de trabalho individual.
Para obter mais informações, consulte O que é Databricks Assistant?
Novos pontos de entrada para ajuda no produto
5 de junho de 2024
Agora o senhor pode acessar a opção Contact Support clicando no ícone do seu usuário na barra superior do site workspace. Consulte Obter ajuda.
Editor de Markdown do Notebook aprimorado
5 de junho de 2024
Agora o senhor pode ver uma visualização ao vivo de suas células Markdown no Notebook e acessar uma barra de ferramentas para elementos Markdown comuns, como cabeçalhos, listas e links. Passe mais tempo comunicando suas ideias e menos tempo lembrando a sintaxe.
Acesse rapidamente as tabelas do Catalog Explorer a partir do Notebook
5 de junho de 2024
Agora o senhor pode acessar facilmente as tabelas do Catalog Explorer diretamente do Notebook. Passe o mouse sobre o nome de uma tabela em uma célula do Notebook para obter um link para a página do explorador do catálogo e ver detalhes como colunas, permissões e muito mais.
Driver ODBC da Databricks 2.8.2
4 de junho de 2024
O Databricks ODBC Driver(download) versão 2.8.2 já está disponível. Esta versão acrescenta os seguintes novos recursos e aprimoramentos:
- Os clientes agora podem usar o comando estendido SQL
PUT,GETeREMOVEpara ingerir e gerenciar grandes conjuntos de dados em volumes Unity Catalog. - Os valores de configuração padrão do OAuth agora estão atualizados e em conformidade. As opções de configuração atualizadas incluem o endpoint de autorização, o ID do cliente OAuth, o escopo OAuth de usuário para máquina e o escopo OAuth de máquina para máquina. Para obter mais detalhes, consulte as notas sobre a versão.
- As bibliotecas de terceiros foram atualizadas, incluindo a expat 2.6.2 (anteriormente 2.6.0) e a libCURL 8.7.1 (anteriormente 8.6.0).
- O driver agora aceita uma autoridade de certificação (CA) privada assinada se ela for adicionada ao armazenamento de certificados da CA Trusted Root do Windows.
Essa versão também corrige os seguintes problemas:
- Anteriormente, o cliente retornava um erro se o tamanho de um comentário na tabela excedesse
MaxCommentLen. O comportamento do site default agora trunca o comentário da tabela para que fique em conformidade com o limite especificado emMaxCommentLen. - O cliente retornou anteriormente um erro ao emitir
SQLCancelem determinadas circunstâncias.
A nova interface de usuário do Databricks Notebook já está disponível para todos
4 de junho de 2024
A nova UI do Databricks Notebook oferece aos desenvolvedores uma experiência de criação simplificada e focada em dados. Os principais recursos incluem:
- UX moderna: desfrute de uma experiência de codificação simplificada com uma UI atualizada e outros recursos para aprimorar a organização do Notebook.
- Nova tabela de resultados: realize a exploração de dados sem código com recursos de pesquisa e filtragem diretamente nas saídas dos resultados.