Política de manutenção de modelos de IA generativa
Este artigo descreve a política de manutenção de modelos para o Foundation Model APIs pay-per-tokens e as ofertas do Foundation Model Fine-tuning.
Para continuar a oferecer suporte aos modelos mais modernos, o site Databricks pode atualizar os modelos suportados ou retirar os modelos mais antigos das ofertas de pagamento por token e de ajuste fino do Foundation Model APIs.
Modelo de política de aposentadoria
A política de aposentadoria a seguir se aplica somente aos modelos de bate-papo e de conclusão suportados nas ofertas de pagamento por token do Foundation Model APIs e do Foundation Model Fine-tuning.
Quando um modelo é aposentado, ele não está mais disponível para uso e é removido das ofertas de recurso indicadas. Databricks toma os seguintes passos para notificar os clientes sobre um modelo que está pronto para ser aposentado:
Uma mensagem de aviso é exibida no cartão do modelo na página Serving do site Databricks workspace , indicando que o modelo está planejado para ser desativado.
Uma mensagem de aviso é exibida no menu dropdown para Foundation Model Fine-tuning no site Experiments tab, indicando que o modelo está planejado para ser desativado.
A documentação aplicável contém um aviso que indica que o modelo está planejado para ser aposentado e a data de início em que não haverá mais suporte.
Depois que os usuários forem notificados sobre a próxima retirada do modelo, a Databricks retirará o modelo em três meses. Durante esse período de três meses, os clientes podem:
Optar por migrar para um provisionamento Taxa de transferência endpoint para continuar usando o modelo após a data de fim de vida útil
Migrar o fluxo de trabalho existente para usar os modelos de substituição recomendados.
Na data de aposentadoria, o modelo é removido do produto e a documentação aplicável é atualizada para recomendar o uso de um modelo substituto.
Consulte Modelos aposentados para obter uma lista dos modelos atualmente aposentados e as datas planejadas de aposentadoria.
Atualizações de modelos
Databricks pode enviar atualizações incrementais para modelos de pagamento por tokens para fornecer otimizações. Quando um modelo é atualizado, o URL do endpoint permanece o mesmo, mas o ID do modelo no objeto de resposta é alterado para refletir a data da atualização. Por exemplo, se uma atualização for enviada para meta-llama/Meta-Llama-3.1-405B
em 04/03/2024, o nome do modelo no objeto de resposta será atualizado para meta-llama/Meta-Llama-3.1-405B-030424
. Databricks mantém um histórico de versões das atualizações que o senhor pode consultar.
Modelos aposentados
As seções a seguir resumem as aposentadorias de modelos atuais e futuras para as ofertas de pay-per-tokens do Foundation Model APIs e do Foundation Model Fine-tuning.
Foundation Model Ajustando as aposentadorias
A tabela a seguir mostra as famílias de modelos aposentados, suas datas de aposentadoria e as famílias de modelos de substituição recomendadas para usar nas cargas de trabalho de ajuste fino do Foundation Model. A Databricks recomenda que o senhor migre seus aplicativos para usar modelos substitutos antes da data de aposentadoria indicada.
Família de modelos |
Data de aposentadoria |
Família de modelos de substituição recomendada |
---|---|---|
Meta-Lama-3 |
13 de dezembro de 2024 |
Meta-Lama-3.1 |
Meta-Lama-2 |
13 de dezembro de 2024 |
Meta-Lama-3.1 |
Código Llama |
13 de dezembro de 2024 |
Meta-Lama-3.1 |
Modelo da Fundação APIs aposentadorias pay-per-tokens
A tabela a seguir mostra as aposentadorias de modelos, suas datas de aposentadoria e os modelos de substituição recomendados para uso no Foundation Model APIs, que serve cargas de trabalho pay-per-tokens. A Databricks recomenda que o senhor migre seus aplicativos para usar modelos substitutos antes da data de aposentadoria indicada.
Importante
Em 23 de julho de 2024, Meta-Llama-3.1-70B-Instruct Substituído o suporte para Meta-Llama-3-70B-Instruct no endpoint do Foundation Model APIs pay-per-tokens.
Modelo |
Data de aposentadoria |
Modelo de substituição recomendado |
---|---|---|
Meta-Llama-3-70B-Instruct |
23 de julho de 2024 |
Meta-Llama-3.1-70B-Instruct |
Meta-Llama-2-70B-Chat |
30 de outubro de 2024 |
Meta-Llama-3.1-70B-Instruct |
Instrução MPT 7B |
30 de agosto de 2024 |
Mixtral-8x7B |
Instrução MPT 30B |
30 de agosto de 2024 |
Mixtral-8x7B |
Se o senhor precisar de suporte de longo prazo para uma versão de modelo específica, o site Databricks recomenda o uso do modelo Foundation APIs provisionamento Taxa de transferência para suas cargas de trabalho de serviço.