メインコンテンツまでスキップ

Criblコネクタの制限事項

備考

ベータ版

この機能はベータ版です。使用するには、ワークスペース管理者は プレビュー ページから Cribl向けLakeflow Connect を有効にする必要があります。Databricksのプレビューを管理を参照してください。

このページには、 Lakeflow Connectのマネージド Cribl コネクタの既知の制限に関する情報が含まれています。

一般的な ソフトウェア as a サービス(SaaS)コネクタの制限事項​

このセクションの制限事項は、Lakeflowコネクト のすべてのSaaS コネクタに適用されます。

  • スケジュールされたパイプラインをランする場合、アラートは即座にTriggerされません。代わりに、次の更新がランするときにTriggerされます。
  • ソース テーブルを削除しても、宛先テーブルは自動的に削除されません。宛先テーブルを手動で削除する必要があります。この動作は、 Lakeflow上のSpark宣言型パイプラインの動作と一致しません。
  • ソースのメンテナンス期間中、Databricksがデータにアクセスできない場合があります。
  • ソーステーブル名が既存の宛先テーブル名と競合する場合、パイプラインの更新は失敗します。
  • マルチ送信先パイプラインのサポートはAPIのみです。
  • オプションで、取り込むテーブルの名前を変更できます。パイプライン内のテーブルの名前を変更すると、そのテーブルは API 専用パイプラインになり、UI でパイプラインを編集できなくなります。
  • パイプラインがすでに起動した後に列を選択した場合、コネクタはその新しい列のデータを自動的にバックフィルしません。ヒストリカルデータを取り込むには、テーブルで完全更新を手動でランします。
  • Databricksでは、異なるソーススキーマからのものであっても、同じパイプライン内で同じ名前の複数のテーブルを取り込むことはできません。
  • ソースシステムは、カーソル列が単調に増加すると想定します。
  • コネクタは、変換なしで生データを取り込みます。変換には、LakeFlow Pipelines上のダウンストリームSpark宣言型パイプラインを使用します。

コネクタ固有の制限事項​

このセクションの制限事項は、Criblコネクタに適用されます。

  • コネクタは Cribl.Cloud のみをサポートします。セルフホスト型のCribl Leadersには接続しません。
  • 各接続は1つのCribl.Cloudワークスペースを読み取ります。workspaces および api_credentials テーブルは組織スコープであり、組織内のすべてのワークスペースのレコードを返します。
  • ワーカーグループスコープのテーブルは、ストリーム、エッジ、および検索ワーカーグループをカバーします。Outpostグループは worker_groups にのみ表示されます。workersテーブルはストリームとエッジのみをカバーしています。