Google Drive取り込みのセットアップの概要

Lakeflow Connect のマネージド Google Drive コネクタは、非構造化ファイル (PDF や Google ドキュメントなど) および構造化形式 (CSV、JSON、Excel など) を Delta テーブルに取り込み、3 つの認証方法をサポートしています。パースと変換を完全に制御しながら Spark および SQL APIs を使用するカスタム パイプラインについては、Google Drive からのファイルの取り込みを参照してください。

Google Drive コネクタを選択します

Lakeflow Connect では、2 つの Google Drive コネクタを提供しています。どちらも Google Drive のデータにアクセスしますが、管理レベルが異なります。

コネクター	説明
管理対象 Google Drive コネクタ	エンタープライズアプリケーション向けのフルマネージドで保守の手間がかからないコネクタで、Deltaテーブルにデータをインジェストし、ソースと同期状態に保ちます。
標準の Google Drive コネクタ	read_files、spark.read、COPY INTO、Auto Loader などのバッチおよびストリーミング APIs を使用して、SQL、PySpark、または LakeFlow Pipelines によるカスタム取り込みパイプラインを構築します。取り込み中の複雑な変換を実行する柔軟性を備えている一方で、パイプラインの管理と保守に関するより大きな責任を伴います。

コネクター	説明
管理対象 Google Drive コネクタ	エンタープライズアプリケーション向けのフルマネージドで保守の手間がかからないコネクタで、Deltaテーブルにデータをインジェストし、ソースと同期状態に保ちます。
標準の Google Drive コネクタ	read_files、spark.read、COPY INTO、Auto Loader などのバッチおよびストリーミング APIs を使用して、SQL、PySpark、または LakeFlow Pipelines によるカスタム取り込みパイプラインを構築します。取り込み中の複雑な変換を実行する柔軟性を備えている一方で、パイプラインの管理と保守に関するより大きな責任を伴います。

どの認証方法を選択すればよいですか？

管理対象の Google Drive コネクタは、次の認証方法をサポートしています。

• OAuth U2M: Databricks管理

  • Google Cloud プロジェクトやアプリの登録は必要ありません。

• OAuth U2M：カスタム管理

  • 独自の Google Cloud アプリを持ち込みます。組織がアプリの所有権または API レート制限の制御を必要とする場合に使用します。

• OAuthサービスアカウント

  • 個人ではなく、Google サービスアカウントとして認証を行います。

どちらの OAuth U2M メソッドも個人の Google アカウントとして認証を行うため、コネクターはそのアカウントがアクセスできるファイルのみを取り込みます。1人のユーザーのアカウントに結び付けられていないコンテンツを取り込むには、OAuth サービスアカウントを使用します。

ワークスペースに OAuth U2M: Databricks管理 が表示されない場合は、 OAuth U2M: カスタム管理 を使用します。