Gouvernance de l'IA avec Unity AI Gateway
Bêta
Cette page couvre la nouvelle Passerelle d'IA Unity (visible dans la barre latérale de l'interface utilisateur), qui est actuellement en bêta. Les administrateurs de compte peuvent activer l'accès à cette fonctionnalité sur la page Aperçus de la console de compte. Consultez Gérer les aperçus Databricks.
Pour plus de détails sur la version précédente d’AI Gateway (pas Unity AI Gateway), consultez AI Gateway pour la diffusion d’Endpoint.
Unity AI Gateway est la solution de gouvernance Databricks pour l'IA d'entreprise. Construit sur Unity Catalog, il étend la gouvernance au-delà de vos données et assets d'IA, aux interactions d'exécution entre les modèles, les agents, les serveurs MCP et les outils. Contrôlez les services d'IA que les équipes peuvent utiliser, acheminez et gérez le trafic d'IA, définissez des garde-fous et surveillez l'utilisation à partir d'un seul plan de contrôle.
Get start
Configurez et appliquez la gouvernance de l'IA à l'ensemble de vos assets d'IA, du trafic et du comportement de service.
-
- Guide de gouvernance de l'IA
- Un chemin de bout en bout pour les administrateurs afin de gouverner l'accès aux assets d'IA, le trafic et le coût, ainsi que le contenu des requêtes et des réponses.
-
- Tutoriel : régir l'accès MCP d'un agent de codage à GitHub
- Restreindre l'accès d'un agent de codage aux outils MCP GitHub à l'aide des autorisations Unity Catalog et d'une politique de service intégrée.
-
- Didacticiel : Mettre en œuvre des garde-fous sur un service de modèle avec des politiques de service
- Implémentez des garde-fous sur un service de modèle en utilisant des stratégies de service intégrées et personnalisées.
Contrôler les services d'IA que les équipes peuvent utiliser
Enregistrez les assets d'IA en tant qu'objets sécurisables Unity Catalog, puis accordez et révoquez l'accès avec les mêmes privilèges que ceux que vous utilisez pour les tables et les volumes. Les agents sont régis par ces mêmes sécurisables : un agent est enregistré en tant que modèle Unity Catalog, et les outils qu'il appelle sont régis en tant que services, fonctions et connexions MCP.
-
- Modèles
- Gérez les modèles ML enregistrés, y compris les modèles de fondation hébergés par Databricks, avec les privilèges Unity Catalog.
-
- Autorisations du modèle de fondation
- Restreignez les modèles de fondation hébergés par Databricks auxquels votre organisation peut accéder, à l'échelle du compte ou par groupe.
-
- Outils MCP
- Gouverner les serveurs MCP enregistrés en tant que sécurisables Unity Catalog, avec filtrage des outils et politiques de service.
-
- Outils personnalisés
- Gouvernez les fonctions de Unity Catalog que les agents utilisent comme outils, avec les mêmes privilèges que vous utilisez pour les données.
-
- Connexions HTTP
- Gouvernez les connexions Unity Catalog utilisées pour atteindre les APIs externes et les serveurs MCP.
-
- Créer des services de modèle
- Définissez et partagez les services de modèles en tant qu'objets sécurisables Unity Catalog dans tous les espaces de travail.
Acheminer et gérer le trafic d'IA
Unity AI Gateway achemine les requêtes vers vos services de modèle et de MCP depuis un plan de contrôle central, afin que vous puissiez gérer la capacité, la disponibilité et les dépenses chez les fournisseurs.
-
- Appliquer les limites de débit
- Appliquez des limites de consommation sur les services de modèle et les services MCP pour gérer la capacité et le coût.
-
- Configurez la répartition du trafic et les fallbacks.
- Distribuez les requêtes sur plusieurs backends de modèle et ajoutez une fonction de basculement pour augmenter la disponibilité.
-
- Gérer les budgets
- Surveillez les dépenses et définissez des threshold par utilisateur et des plafonds stricts pour les fournisseurs hébergés par Databricks et les fournisseurs externes.
Les fonctionnalités de la Passerelle d'IA Unity n'entraînent pas de frais pendant la phase Beta.
Définir des garde-fous et des stratégies d’accès
Les politiques de service, également appelées garde-fous, contrôlent le traitement de chaque requête et réponse, en fonction de son contenu et de la personne à l'origine de l'appel.
-
- Stratégies de service pour les éléments sécurisables d'IA
- Comment les politiques de service régissent le contenu des requêtes et des réponses aux services d'IA, à l'aide de politiques intégrées et personnalisées.
-
- Créer et associer une politique de service
- Comment écrire une fonction de politique de service et l'attacher à un service MCP ou à un service de modèle.
Superviser l'utilisation, le coût et le risque
Suivez l'activité, les dépenses et les résultats dans l'ensemble des services de la Passerelle d'IA Unity.
-
- Surveiller l’utilisation
- Suivre les requêtes, l'utilisation des tokens et la latence pour les services de modèle à l'aide de tables système.
-
- Analyser le coût
- Attribuez le coût Databricks aux services, aux modèles cibles, aux principaux et aux balises.
-
- Auditer les requêtes et les réponses
- Consignez les requêtes et les réponses dans les tables Delta de Unity Catalog pour le monitoring et le debugging.
Endpoints de mise en service de modèles (précédent)
La version précédente d’AI Gateway dispose de fonctionnalités de gouvernance pour les Endpoint de déploiement de modèles au niveau du Workspace, y compris les Endpoint de modèles externes, les Endpoint d’API de modèles de fondation et les Endpoint de modèles personnalisés.
-
- Passerelle d'IA pour les Endpoint de service
- Découvrez les fonctionnalités de AI Gateway pour les Endpoint de service, y compris les fonctionnalités prises en charge et les limitations.
-
- Configurer la passerelle IA sur les Endpoint de diffusion de modèles
- Configurez les fonctionnalités de AI Gateway, telles que le suivi de l'utilisation, la journalisation de la charge utile, les limites de débit et les garde-fous sur un endpoint de diffusion de modèles.
-
- Surveiller les modèles servis à l'aide de tables d'inférence compatibles avec AI Gateway
- Surveiller les modèles servis à l'aide de tables d'inférence compatibles avec AI Gateway.