Microsoft SharePoint コネクタの制限事項
プレビュー
Microsoft SharePoint コネクタは ベータ版です。
このページでは、Microsoft を使用した SharePointDatabricksLakeflowコネクト からの取り込みに関する制限事項と考慮事項を示します。
一般的な SaaS コネクタの制限事項
このセクションの制限事項は、Lakeflowコネクト のすべてのSaaS コネクタに適用されます。
-
スケジュールされたパイプラインを実行しても、アラートはすぐにはトリガーされません。代わりに、次の更新が実行されたときにトリガーされます。
-
ソース テーブルを削除しても、コピー先テーブルは自動的に削除されません。コピー先テーブルは手動で削除する必要があります。この動作は Lakeflow 宣言型パイプラインの動作と一致しません。
-
ソースのメンテナンス期間中は、Databricks がデータにアクセスできない場合があります。
-
ソース テーブル名が既存の宛先テーブル名と競合する場合、パイプラインの更新は失敗します。
-
マルチデスティネーションパイプラインのサポートはAPIのみです。
-
オプションで、取り込むテーブルの名前を変更できます。パイプライン内のテーブルの名前を変更すると、そのテーブルは API のみのパイプラインになり、UI でパイプラインを編集できなくなります。
-
列レベルの選択と選択解除は API 専用です。
-
パイプラインがすでに開始された後に列を選択した場合、コネクタは新しい列のデータを自動的にバックフィルしません。ヒストリカルデータを取り込むには、テーブルで完全な更新を手動で実行します。
-
Databricks では、同じパイプライン内で同じ名前の 2 つ以上のテーブルを取り込むことはできません (それらが異なるソース スキーマから来ている場合でも)。
-
マネージドインジェストパイプラインは、AWS GovCloud リージョン (FedRAMP High) のワークスペースではサポートされていません。
-
マネージド インジェスト パイプラインは、
us-east-2リージョンまたはus-west-1リージョンの FedRAMP Moderate ワークスペースではサポートされていません。 -
ソース・システムは、カーソル列が単調に増加していると想定しています。
コネクタ固有の制限
-
SharePoint コネクタは、100 MB 以下のファイルのみをサポートします。100 MB を超えるファイルのメタデータは取り込まれますが、ファイルの内容はダウンロードされません。
-
SharePoint からのファイルレベルのアクセス制御リスト (ACL) およびその他のカスタム メタデータの取り込みはサポートされていません。
-
別の SharePoint ドキュメント ライブラリにリンクされているファイルの取り込みはサポートされていません。
-
ドライブ内の個々のファイルの選択と選択解除はサポートされていません。コネクタは、ドライブ内のすべてのファイルを取り込みます。
-
ダウンストリームの使用に提供されるユーティリティは、シングルユーザー クラスタリングに限定されます。 ただし、シングルユーザー クラスタリングは、他のユーザーが作成したストリーミングテーブルにアクセスできません。 したがって、各ダウンストリーム ユーザーは独自のインジェスト パイプラインを作成する必要があります。
ユーティリティを変更して、サーバレスと共有クラスタリングで動作させることができますが、パフォーマンスに影響を与える可能性があります。 例を参照してください。
-
一部のフィールド (
quickXorHash、mimeTypeなど) は、すべてのファイル形式でサポートされているわけではありません。これらの場合でも、ファイルのダウンロードやその他のメタデータの取り込みは機能するはずです。 -
Databricks では、1 時間に 1 回しか取り込むことをおすすめしません。
-
コネクタは API 専用です。Databricks UI はサポートされていません。