メインコンテンツまでスキップ

OpenAI コネクタ

備考

ベータ版

この機能はベータ版です。ワークスペース管理者は、 プレビュー ページからこの機能へのアクセスを制御できます。Databricksのプレビューを管理するを参照してください。

Lakeflow Connect のマネージド OpenAI コネクタは、ユーザー、プロジェクト、API キー、使用量、コスト、監査 Log などの組織管理データを OpenAI から Databricks に取り込みます。

機能の利用可能性

機能

可用性

UI ベースのパイプラインオーサリング

緑色のチェックアイコン サポート

API ベースのパイプライン作成

緑色のチェックアイコン サポート

宣言型オートメーションバンドル

緑色のチェックアイコン サポート

増分取り込み

緑色のチェックアイコン サポート

Unity Catalog ガバナンス

緑色のチェックアイコン サポート

Databricks Workflows を使用したオーケストレーション

緑色のチェックアイコン サポート

API ベースの列の選択と選択解除

緑色のチェックアイコン サポート

APIベースの行フィルタリング

赤色の X アイコン サポートされていません

SCDタイプ2

緑色のチェックアイコン サポート

ミュータブルなエンティティテーブルに適用されます。追記専用の audit_logsusage_*、および costs テーブルは、不変のイベントと日次バケットを記録します。

自動スキーマ進化: 新しい列と削除された列

緑色のチェックアイコン サポート

自動スキーマ進化: データ型の変更

赤色の X アイコン サポートされていません

自動スキーマ進化: カラム名の変更

赤色の X アイコン サポートされていません

完全な更新が必要です。

機能

可用性

UI ベースのパイプラインオーサリング

緑色のチェックアイコン サポート

API ベースのパイプライン作成

緑色のチェックアイコン サポート

宣言型オートメーションバンドル

緑色のチェックアイコン サポート

増分取り込み

緑色のチェックアイコン サポート

Unity Catalog ガバナンス

緑色のチェックアイコン サポート

Databricks Workflows を使用したオーケストレーション

緑色のチェックアイコン サポート

API ベースの列の選択と選択解除

緑色のチェックアイコン サポート

APIベースの行フィルタリング

赤色の X アイコン サポートされていません

SCDタイプ2

緑色のチェックアイコン サポート

ミュータブルなエンティティテーブルに適用されます。追記専用の audit_logsusage_*、および costs テーブルは、不変のイベントと日次バケットを記録します。

自動スキーマ進化: 新しい列と削除された列

緑色のチェックアイコン サポート

自動スキーマ進化: データ型の変更

赤色の X アイコン サポートされていません

自動スキーマ進化: カラム名の変更

赤色の X アイコン サポートされていません

完全な更新が必要です。

認証方法

認証方法

可用性

OAuth U2M

赤色の X アイコン サポートされていません

OAuth M2M

赤色の X アイコン サポートされていません

Basic 認証 (ユーザー名/パスワード)

赤色の X アイコン サポートされていません

基本認証(APIキー)

緑色のチェックアイコン サポート

OpenAI管理者APIキー。

認証方法

可用性

OAuth U2M

赤色の X アイコン サポートされていません

OAuth M2M

赤色の X アイコン サポートされていません

Basic 認証 (ユーザー名/パスワード)

赤色の X アイコン サポートされていません

基本認証(APIキー)

緑色のチェックアイコン サポート

OpenAI管理者APIキー。

起動する前に知っておくべきこと

トピック

重要性について

Databricks ユーザーペルソナ

ワークフローは、Databricksのユーザーペルソナに依存します:

  • シングルユーザー: 管理者ユーザーが Unity Catalog 接続とインジェストパイプラインを作成します。
  • マルチユーザー: 管理者が、管理者以外のユーザーがパイプラインを作成するための接続を作成します。

認証方法

接続を作成するステップは、選択する認証方法によって異なります。

インターフェース

パイプラインを作成するステップは、インターフェースによって異なります。

データ取り込みの頻度

パイプラインのスケジュールは、レイテンシーとコストの要件によって異なります。

一般的なパターン

取り込みのニーズに応じて、パイプラインでは履歴追跡、列選択、行フィルタリングなどの構成を使用する場合があります。サポートされている構成はコネクターによって異なります。「機能の利用可能性」を参照してください。

トピック

重要性について

Databricks ユーザーペルソナ

ワークフローは、Databricksのユーザーペルソナに依存します:

  • シングルユーザー: 管理者ユーザーが Unity Catalog 接続とインジェストパイプラインを作成します。
  • マルチユーザー: 管理者が、管理者以外のユーザーがパイプラインを作成するための接続を作成します。

認証方法

接続を作成するステップは、選択する認証方法によって異なります。

インターフェース

パイプラインを作成するステップは、インターフェースによって異なります。

データ取り込みの頻度

パイプラインのスケジュールは、レイテンシーとコストの要件によって異なります。

一般的なパターン

取り込みのニーズに応じて、パイプラインでは履歴追跡、列選択、行フィルタリングなどの構成を使用する場合があります。サポートされている構成はコネクターによって異なります。「機能の利用可能性」を参照してください。

3 ステップで OpenAI から取り込む

  1. 取り込み用に OpenAI を構成する (管理者) — Databricks で認証するように OpenAI をセットアップします。
  2. Unity Catalog 接続の作成 (管理者) — Databricks が OpenAI で認証するための資格情報を保存する接続をカタログエクスプローラで作成します。
  3. 取り込みパイプラインを作成する (管理者または管理者以外) — サポートされているインターフェースを選択し、既存の接続からパイプラインを作成します。