Anysphere Audit Logsコネクタの制限事項
備考
ベータ版
この機能はベータ版です。ワークスペース管理者は、 プレビュー ページからこの機能へのアクセスを制御できます。Databricksのプレビューを管理するを参照してください。
一般的な SaaS コネクタの制限事項
このセクションの制限事項は、Lakeflowコネクト のすべてのSaaS コネクタに適用されます。
- スケジュールされたパイプラインをRunする場合、アラートはすぐにTriggerされません。その代わり、次の更新がTriggerされます。
- ソーステーブルを削除しても、宛先テーブルは自動的に削除されません。宛先テーブルを手動で削除する必要があります。この動作は、Lakeflow上のSpark宣言型パイプラインの動作と一致しません。
- ソースのメンテナンス期間中は、Databricks がデータにアクセスできない場合があります。
- ソーステーブル名が既存の宛先テーブル名と競合する場合、パイプラインの更新は失敗します。
- マルチ送信先パイプラインのサポートはAPIのみです。
- 取り込むテーブルの名前は、オプションで変更できます。パイプライン内のテーブルの名前を変更すると、そのパイプラインは API 専用パイプラインとなり、UI でパイプラインを編集できなくなります。
- パイプラインがすでに起動した後に列を選択した場合、コネクタはその新しい列のデータを自動的にバックフィルしません。ヒストリカルデータを取り込むには、テーブルで完全更新を手動でランします。
- Databricks では、たとえ異なるソーススキーマからのものであっても、同じパイプライン内で同じ名前のテーブルを2つ以上取り込むことはできません。
- ソースシステムは、カーソル列が単調に増加することを前提としています。
- このコネクタは、変換を行わずに生データを取り込みます。変換には、LakeFlow Pipelines上のダウンストリームのSpark宣言型パイプラインを使用します。
コネクター固有の制限事項
このセクションの制限事項は、Anysphere Audit Logs コネクターに適用されます。
- コネクタは、監査 Logs イベントデータに対して SCD タイプ 2 をサポートしていません。
- このコネクタは、
timestampカーソルフィールドを使用してaudit_logsテーブルの増分取り込みをサポートしています。過去 30 日間の監査イベントのみが利用可能です — Anysphere (Cursor) は監査 Logs を約 30 日間保持し、クエリーウィンドウを 30 日間に制限します。最初のパイプラインのランでは、テーブルには完全な履歴アーカイブではなく、最近のイベント(通常は過去 30 日間)のみが含まれることを想定してください。 - サポートされているテーブルの一覧については、「サポートされているソーステーブル」を参照してください。