モデルサービング エンドポイントで Unity AI Gateway を構成する
この機能はプレビュー段階です。
この記事では、モデルサービング エンドポイントで Mosaic Unity AI Gateway を構成する方法を学習します。
必要条件
-
次のいずれかのリージョンにある Databricks ワークスペース。
- 外部モデルがサポートする地域
- 基盤モデルは API プロビジョニング スループットまたはトークン単位の従量課金でサポートされているリージョンです。
-
A モデルサービング エンドポイント. ワークスペースで事前設定されたトークン単位の従量課金エンドポイントのいずれかを使用できます。
UIを使用してUnity AI Gatewayを設定する
エンドポイント作成ページの 「AI Gateway」 セクションでは、Unity AI Gatewayの機能を個別に設定できます。
以下の表は、Serving UIを使用してエンドポイントを作成する際にUnity AI Gatewayを設定する方法をまとめたものです。
UI での AI ガードレールの構成
次の表は、サポートされているガードレールを構成する方法を示しています。
ガードレール | 有効にする方法 | 詳細 |
|---|---|---|
安全性 | [ 安全性 ] を選択すると、モデルが安全でない有害なコンテンツと相互作用するのを防ぐための保護機能が有効になります。 | |
個人を特定できる情報 (PII) の検出 | 名前、住所、クレジットカード番号などのPIIデータを検出するには、[ PII検出 ]を選択します。 | |
有効なトピック | このフィールドにトピックを直接入力できます。複数のエントリがある場合は、各トピックの後に必ず Enter キーを押してください。または、 | 最大 50 個の有効なトピックを指定できます。各トピックは 100 文字を超えることはできません |
無効なキーワード | このフィールドにトピックを直接入力できます。複数のエントリがある場合は、各トピックの後に必ず Enter キーを押してください。または、 | 無効なキーワードは最大 50 個まで指定できます。各キーワードは 100 文字を超えることはできません。 |