マネージド ファイル ソース コネクタ
Databricks LakeFlowコネクト は、エンタープライズのファイルストレージサービスから非構造化ファイルを取り込むためのフルマネージドコネクタを提供します。各コネクタは、ソース固有の認証、増分読み取り、および自動再試行を処理します。
サポートされているコネクタ
-
- Google Drive(管理対象)
- Google Driveから管理ファイルソースインジェストを使用して、レイクハウスにファイルを取り込みます。
-
- Microsoft SharePoint (マネージド)
- Microsoft SharePointサイトからマネージドファイルソース取り込みを使用してファイルを取り込みます。
Spark および SQL APIs を使用する標準コネクタについては、 Google ドライブからファイルを取り込むおよびSharePoint からファイルを取り込むを参照してください。
コネクタ コンポーネント
ファイルソースコネクタには次のコンポーネントがあります。
コンポーネント | 説明 |
|---|---|
接続 | ファイルストレージサービス用の認証の詳細を格納する、Unity Catalog のセキュリティ保護可能なオブジェクトです。 |
取り込みパイプライン | ソースから送信先テーブルにファイルをコピーするパイプライン。この取り込みパイプラインはサーバレスコンピュートで実行されます。 |
宛先テーブル | 取り込み パイプラインがデータを書き込むテーブル。これらは ストリーミングテーブルであり、増分データ処理の追加サポートを備えた Delta テーブルです。 |