Criblコネクタの制限事項
備考
ベータ版
この機能はベータ版です。使用するには、ワークスペース管理者は プレビュー ページから Cribl向けLakeflow Connect を有効にする必要があります。Databricksのプレビューを管理を参照してください。
このページには、 Lakeflow Connectのマネージド Cribl コネクタの既知の制限に関する情報が含まれています。
一般的な ソフトウェア as a サービス(SaaS)コネクタの制限事項
このセクションの制限事項は、Lakeflowコネクト のすべてのSaaS コネクタに適用されます。
- スケジュールされたパイプラインをランする場合、アラートは即座にTriggerされません。代わりに、次の更新がランするときにTriggerされます。
- ソース テーブルを削除しても、宛先テーブルは自動的に削除されません。宛先テーブルを手動で削除する必要があります。この動作は、 Lakeflow上のSpark宣言型パイプラインの動作と一致しません。
- ソースのメンテナンス期間中、Databricksがデータにアクセスできない場合があります。
- ソーステーブル名が既存の宛先テーブル名と競合する場合、パイプラインの更新は失敗します。
- マルチ送信先パイプラインのサポートはAPIのみです。
- オプションで、取り込むテーブルの名前を変更できます。パイプライン内のテーブルの名前を変更すると、そのテーブルは API 専用パイプラインになり、UI でパイプラインを編集できなくなります。
- パイプラインがすでに起動した後に列を選択した場合、コネクタはその新しい列のデータを自動的にバックフィルしません。ヒストリカルデータを取り込むには、テーブルで完全更新を手動でランします。
- Databricksでは、異なるソーススキーマからのものであっても、同じパイプライン内で同じ名前の複数のテーブルを取り込むことはできません。
- ソースシステムは、カーソル列が単調に増加すると想定します。
- コネクタは、変換なしで生データを取り込みます。変換には、LakeFlow Pipelines上のダウンストリームSpark宣言型パイプラインを使用します。
コネクタ固有の制限事項
このセクションの制限事項は、Criblコネクタに適用されます。
- コネクタは Cribl.Cloud のみをサポートします。セルフホスト型のCribl Leadersには接続しません。
- 各接続は1つのCribl.Cloudワークスペースを読み取ります。
workspacesおよびapi_credentialsテーブルは組織スコープであり、組織内のすべてのワークスペースのレコードを返します。 - ワーカーグループスコープのテーブルは、ストリーム、エッジ、および検索ワーカーグループをカバーします。Outpostグループは
worker_groupsにのみ表示されます。workersテーブルはストリームとエッジのみをカバーしています。