Cribl コネクタ リファレンス

備考

ベータ版

この機能はベータ版です。使用するには、ワークスペース管理者は [プレビュー] ページから Cribl 用 Lakeflow Connect を有効にする必要があります。Databricksのプレビューの管理を参照してください。

このページには、サポートされているソーステーブルや宛先テーブルのスキーマなど、マネージドCriblコネクタの参照情報が記載されています。

サポートされているソーステーブル

Cribl コネクタは、default ソーススキーマの下にある次のソーステーブルをサポートします。ワーカーグループスコープのテーブルは、group_allowlist を設定しない限り、ワークスペース内のすべてのストリーム、エッジ、および検索ワーカーグループから取り込みます。

ソーステーブル	プライマリーキー	説明	同期モード	カーソルフィールド
worker_groups	product, id	ストリーム、エッジ、検索、およびアウトポスト製品のワーカーグループおよびフリート。	フル更新のみ
workers	product, id	ストリームおよびエッジ製品のワーカーおよびエッジノード。	フル更新のみ
health	host	ワークスペースリーダーの健全性ステータス。	フル更新のみ
pipelines	group, id	各ワーカーグループのパイプライン。	フル更新のみ
routes	group, id	各ワーカーグループのルーティングテーブル。	フル更新のみ
sources	group, id	各ワーカーグループのソース(入力)構成。	フル更新のみ
destinations	group, id	各ワーカーグループの出力（送信先）構成。	フル更新のみ
parsers	group, id	各ワーカー グループのパーサー ライブラリ エントリ。	フル更新のみ
breakers	group, id	各ワーカーグループのイベントブレーカールールセット。	フル更新のみ
grok_patterns	group, id	各ワーカーグループの Grok パターンファイル。	フル更新のみ
schemas	group, id	各ワーカーグループのスキーマライブラリエントリ。	フル更新のみ
collectors	group, id	各ワーカーグループのコレクタージョブ。	フル更新のみ
database_connections	group, id	各ワーカーグループのデータベース接続。	フル更新のみ
packs	group, id	各ワーカーグループにインストールされたパック。	フル更新のみ
inputs_status	group, id	各ワーカーグループの各ソースのヘルス状態とメトリクス。	フル更新のみ
outputs_status	group, id	各ワーカーグループの各宛先の正常性状態とメトリクス。	フル更新のみ
functions	worker_group, id	各ワーカーグループで使用可能な機能。	フル更新のみ
workspaces	workspaceId	組織内のワークスペース。	フル更新のみ
api_credentials	clientId	組織内の API 資格情報。クライアントのシークレットは取り込まれません。	フル更新のみ
audit_log	time, event_id	リーダー監査ログイベント。	インクリメンタル	time
access_log	time, event_id	リーダーAPIアクセスLogsイベント。	インクリメンタル	time

ソーステーブル	プライマリーキー	説明	同期モード	カーソルフィールド
worker_groups	product, id	ストリーム、エッジ、検索、およびアウトポスト製品のワーカーグループおよびフリート。	フル更新のみ
workers	product, id	ストリームおよびエッジ製品のワーカーおよびエッジノード。	フル更新のみ
health	host	ワークスペースリーダーの健全性ステータス。	フル更新のみ
pipelines	group, id	各ワーカーグループのパイプライン。	フル更新のみ
routes	group, id	各ワーカーグループのルーティングテーブル。	フル更新のみ
sources	group, id	各ワーカーグループのソース(入力)構成。	フル更新のみ
destinations	group, id	各ワーカーグループの出力（送信先）構成。	フル更新のみ
parsers	group, id	各ワーカー グループのパーサー ライブラリ エントリ。	フル更新のみ
breakers	group, id	各ワーカーグループのイベントブレーカールールセット。	フル更新のみ
grok_patterns	group, id	各ワーカーグループの Grok パターンファイル。	フル更新のみ
schemas	group, id	各ワーカーグループのスキーマライブラリエントリ。	フル更新のみ
collectors	group, id	各ワーカーグループのコレクタージョブ。	フル更新のみ
database_connections	group, id	各ワーカーグループのデータベース接続。	フル更新のみ
packs	group, id	各ワーカーグループにインストールされたパック。	フル更新のみ
inputs_status	group, id	各ワーカーグループの各ソースのヘルス状態とメトリクス。	フル更新のみ
outputs_status	group, id	各ワーカーグループの各宛先の正常性状態とメトリクス。	フル更新のみ
functions	worker_group, id	各ワーカーグループで使用可能な機能。	フル更新のみ
workspaces	workspaceId	組織内のワークスペース。	フル更新のみ
api_credentials	clientId	組織内の API 資格情報。クライアントのシークレットは取り込まれません。	フル更新のみ
audit_log	time, event_id	リーダー監査ログイベント。	インクリメンタル	time
access_log	time, event_id	リーダーAPIアクセスLogsイベント。	インクリメンタル	time

コネクターのオプション

Cribl コネクタでは、次のパイプライン レベルのオプションがサポートされています。使用方法については、例を参照してください。

オプション	Type	スコープ	必須	適用対象	説明
control_plane_host	String	パイプライン	No	workspacesおよび api_credentials	https:// スキームのない、Cribl.Cloud ワークスペース API のホスト名。defaultは<workspace-id>-<organization-id>.cribl.cloudです。
management_plane_host	String	パイプライン	No	workspaces, api_credentials	https:// スキームを除外した Cribl.Cloud 管理 API のホスト名。defaultはgateway.cribl.cloudです。
group_allowlist	String	パイプライン	No	すべてのワーカーグループスコープのテーブル	取り込むワーカーグループIDのカンマ区切りリスト。defaultはすべてのワーカーグループです。
start_datetime	String	パイプライン	No	audit_log, access_log	最初の同期で取り込む最も早いLogs時刻 (yyyy-MM-dd'T'HH:mm:ss.SSS'Z'形式)。defaultは同期の365日前です。

オプション	Type	スコープ	必須	適用対象	説明
control_plane_host	String	パイプライン	No	workspacesおよび api_credentials	https:// スキームのない、Cribl.Cloud ワークスペース API のホスト名。defaultは<workspace-id>-<organization-id>.cribl.cloudです。
management_plane_host	String	パイプライン	No	workspaces, api_credentials	https:// スキームを除外した Cribl.Cloud 管理 API のホスト名。defaultはgateway.cribl.cloudです。
group_allowlist	String	パイプライン	No	すべてのワーカーグループスコープのテーブル	取り込むワーカーグループIDのカンマ区切りリスト。defaultはすべてのワーカーグループです。
start_datetime	String	パイプライン	No	audit_log, access_log	最初の同期で取り込む最も早いLogs時刻 (yyyy-MM-dd'T'HH:mm:ss.SSS'Z'形式)。defaultは同期の365日前です。

宛先テーブルスキーマ

worker_groups

主キー: product, id

同期モード: すべての更新のみ

フィールド	データ型
id	STRING
name	STRING
description	STRING
type	STRING
tags	STRING
streamtags	ARRAY<STRING>
onPrem	BOOLEAN
provisioned	BOOLEAN
estimatedIngestRate	BIGINT
cloud	STRUCT<provider: STRING, region: STRING>
workerRemoteAccess	BOOLEAN
product	STRING
isFleet	BOOLEAN
isSearch	BOOLEAN
collectorsHaEnabled	BOOLEAN
configVersion	STRING
workerCount	BIGINT
deployingWorkerCount	BIGINT
incompatibleWorkerCount	BIGINT
maxWorkerAge	STRING
upgradeVersion	STRING
inherits	STRING
git	STRUCT<commit: STRING, localChanges: BIGINT, log: ARRAY<STRUCT<author_email: STRING, author_name: STRING, date: STRING, hash: STRING, message: STRING, short: STRING>>>
lookupDeployments	ARRAY<STRUCT<context: STRING, lookups: ARRAY<STRUCT<deployedVersion: STRING, file: STRING, version: STRING>>>>

フィールド	データ型
id	STRING
name	STRING
description	STRING
type	STRING
tags	STRING
streamtags	ARRAY<STRING>
onPrem	BOOLEAN
provisioned	BOOLEAN
estimatedIngestRate	BIGINT
cloud	STRUCT<provider: STRING, region: STRING>
workerRemoteAccess	BOOLEAN
product	STRING
isFleet	BOOLEAN
isSearch	BOOLEAN
collectorsHaEnabled	BOOLEAN
configVersion	STRING
workerCount	BIGINT
deployingWorkerCount	BIGINT
incompatibleWorkerCount	BIGINT
maxWorkerAge	STRING
upgradeVersion	STRING
inherits	STRING
git	STRUCT<commit: STRING, localChanges: BIGINT, log: ARRAY<STRUCT<author_email: STRING, author_name: STRING, date: STRING, hash: STRING, message: STRING, short: STRING>>>
lookupDeployments	ARRAY<STRUCT<context: STRING, lookups: ARRAY<STRUCT<deployedVersion: STRING, file: STRING, version: STRING>>>>

workers

主キー: product, id

同期モード: すべての更新のみ

フィールド	データ型
id	STRING
status	STRING
group	STRING
info	STRUCT<apiPort: BIGINT, apiScheme: STRING, architecture: STRING, aws: STRUCT<enabled: BOOLEAN, instanceId: STRING, region: STRING, tags: MAP<STRING, STRING>, type: STRING, zone: STRING>, azure: STRUCT<enabled: BOOLEAN, hostname: STRING, instanceId: STRING, name: STRING, region: STRING, resourceGroup: STRING, subscriptionId: STRING, tags: MAP<STRING, STRING>, type: STRING, vmId: STRING, zone: STRING>, conn_ip: STRING, cpus: BIGINT, cribl: STRUCT<config: STRUCT<apiCredentialsRev: STRING, featuresRev: STRING, hbPeriodSeconds: BIGINT, logStreamEnv: STRING, policyRev: STRING, teamsRev: STRING, usersRev: STRING, version: STRING>, deploymentId: STRING, disableSNIRouting: BOOLEAN, distMode: STRING, edgeNodes: BIGINT, group: STRING, guid: STRING, installType: STRING, lookupVersions: MAP<STRING, MAP<STRING, STRING>>, master: STRUCT<host: STRING, port: BIGINT, servername: STRING, tls: BOOLEAN>, overlayId: STRING, pid: BIGINT, socksEnabled: BOOLEAN, startTime: BIGINT, tags: ARRAY<STRING>, version: STRING>, env: MAP<STRING, STRING>, freeDiskSpace: BIGINT, hostOs: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>, hostname: STRING, isCaptain: BOOLEAN, isSaasWorker: BOOLEAN, kube: STRUCT<enabled: BOOLEAN, namespace: STRING, node: STRING, owner: STRUCT<kind: STRING, name: STRING>, pod: STRING, source: STRING>, localTime: BIGINT, metadata: STRUCT<aws: STRUCT<enabled: BOOLEAN, instanceId: STRING, region: STRING, tags: MAP<STRING, STRING>, type: STRING, zone: STRING>, azure: STRUCT<enabled: BOOLEAN, hostname: STRING, instanceId: STRING, name: STRING, region: STRING, resourceGroup: STRING, subscriptionId: STRING, tags: MAP<STRING, STRING>, type: STRING, vmId: STRING, zone: STRING>, hostOs: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>, kube: STRUCT<enabled: BOOLEAN, namespace: STRING, node: STRING, owner: STRUCT<kind: STRING, name: STRING>, pod: STRING, source: STRING>, os: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>>, node: STRING, os: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>, outpost: STRUCT<groupname: STRING, guid: STRING, host: STRING>, platform: STRING, release: STRING, totalDiskSpace: BIGINT, totalmem: BIGINT>
workerProcesses	BIGINT
lastMsgTime	BIGINT
firstMsgTime	BIGINT
deployable	BOOLEAN
disconnected	BOOLEAN
connectionProtocol	STRING
product	STRING
type	STRING
offlineDurationMs	BIGINT
provisioningTokenId	STRING
metadata	STRUCT<aws: STRUCT<enabled: BOOLEAN, instanceId: STRING, region: STRING, tags: MAP<STRING, STRING>, type: STRING, zone: STRING>, azure: STRUCT<enabled: BOOLEAN, hostname: STRING, instanceId: STRING, name: STRING, region: STRING, resourceGroup: STRING, subscriptionId: STRING, tags: MAP<STRING, STRING>, type: STRING, vmId: STRING, zone: STRING>, hostOs: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>, kube: STRUCT<enabled: BOOLEAN, namespace: STRING, node: STRING, owner: STRUCT<kind: STRING, name: STRING>, pod: STRING, source: STRING>, os: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>>
lastMetrics	MAP<STRING, VARIANT>
nodeUpgradeStatus	STRUCT<active: BIGINT, failed: BIGINT, skipped: BIGINT, state: BIGINT, timestamp: BIGINT>
workers	STRUCT<count: BIGINT>

フィールド	データ型
id	STRING
status	STRING
group	STRING
info	STRUCT<apiPort: BIGINT, apiScheme: STRING, architecture: STRING, aws: STRUCT<enabled: BOOLEAN, instanceId: STRING, region: STRING, tags: MAP<STRING, STRING>, type: STRING, zone: STRING>, azure: STRUCT<enabled: BOOLEAN, hostname: STRING, instanceId: STRING, name: STRING, region: STRING, resourceGroup: STRING, subscriptionId: STRING, tags: MAP<STRING, STRING>, type: STRING, vmId: STRING, zone: STRING>, conn_ip: STRING, cpus: BIGINT, cribl: STRUCT<config: STRUCT<apiCredentialsRev: STRING, featuresRev: STRING, hbPeriodSeconds: BIGINT, logStreamEnv: STRING, policyRev: STRING, teamsRev: STRING, usersRev: STRING, version: STRING>, deploymentId: STRING, disableSNIRouting: BOOLEAN, distMode: STRING, edgeNodes: BIGINT, group: STRING, guid: STRING, installType: STRING, lookupVersions: MAP<STRING, MAP<STRING, STRING>>, master: STRUCT<host: STRING, port: BIGINT, servername: STRING, tls: BOOLEAN>, overlayId: STRING, pid: BIGINT, socksEnabled: BOOLEAN, startTime: BIGINT, tags: ARRAY<STRING>, version: STRING>, env: MAP<STRING, STRING>, freeDiskSpace: BIGINT, hostOs: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>, hostname: STRING, isCaptain: BOOLEAN, isSaasWorker: BOOLEAN, kube: STRUCT<enabled: BOOLEAN, namespace: STRING, node: STRING, owner: STRUCT<kind: STRING, name: STRING>, pod: STRING, source: STRING>, localTime: BIGINT, metadata: STRUCT<aws: STRUCT<enabled: BOOLEAN, instanceId: STRING, region: STRING, tags: MAP<STRING, STRING>, type: STRING, zone: STRING>, azure: STRUCT<enabled: BOOLEAN, hostname: STRING, instanceId: STRING, name: STRING, region: STRING, resourceGroup: STRING, subscriptionId: STRING, tags: MAP<STRING, STRING>, type: STRING, vmId: STRING, zone: STRING>, hostOs: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>, kube: STRUCT<enabled: BOOLEAN, namespace: STRING, node: STRING, owner: STRUCT<kind: STRING, name: STRING>, pod: STRING, source: STRING>, os: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>>, node: STRING, os: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>, outpost: STRUCT<groupname: STRING, guid: STRING, host: STRING>, platform: STRING, release: STRING, totalDiskSpace: BIGINT, totalmem: BIGINT>
workerProcesses	BIGINT
lastMsgTime	BIGINT
firstMsgTime	BIGINT
deployable	BOOLEAN
disconnected	BOOLEAN
connectionProtocol	STRING
product	STRING
type	STRING
offlineDurationMs	BIGINT
provisioningTokenId	STRING
metadata	STRUCT<aws: STRUCT<enabled: BOOLEAN, instanceId: STRING, region: STRING, tags: MAP<STRING, STRING>, type: STRING, zone: STRING>, azure: STRUCT<enabled: BOOLEAN, hostname: STRING, instanceId: STRING, name: STRING, region: STRING, resourceGroup: STRING, subscriptionId: STRING, tags: MAP<STRING, STRING>, type: STRING, vmId: STRING, zone: STRING>, hostOs: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>, kube: STRUCT<enabled: BOOLEAN, namespace: STRING, node: STRING, owner: STRUCT<kind: STRING, name: STRING>, pod: STRING, source: STRING>, os: STRUCT<addresses: ARRAY<STRING>, enabled: BOOLEAN, id: STRING, version: STRING>>
lastMetrics	MAP<STRING, VARIANT>
nodeUpgradeStatus	STRUCT<active: BIGINT, failed: BIGINT, skipped: BIGINT, state: BIGINT, timestamp: BIGINT>
workers	STRUCT<count: BIGINT>

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

health

プライマリーキー: host

同期モード: すべての更新のみ

フィールド	データ型
status	STRING
startTime	BIGINT
overlay	STRUCT<state: STRING>
role	STRING
isCaptain	BOOLEAN
host	STRING

フィールド	データ型
status	STRING
startTime	BIGINT
overlay	STRUCT<state: STRING>
role	STRING
isCaptain	BOOLEAN
host	STRING

pipelines

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
conf	STRUCT<__template_streamtags: STRING, asyncFuncTimeout: BIGINT, description: STRING, functions: ARRAY<STRUCT<conf: MAP<STRING, VARIANT>, description: STRING, disabled: BOOLEAN, filter: STRING, final: BOOLEAN, groupId: STRING, id: STRING>>, groups: MAP<STRING, STRUCT<description: STRING, disabled: BOOLEAN, name: STRING>>, output: STRING, pack: BOOLEAN, streamtags: ARRAY<STRING>>
conf_description	STRING
conf_output	STRING

フィールド	データ型
group	STRING
id	STRING
conf	STRUCT<__template_streamtags: STRING, asyncFuncTimeout: BIGINT, description: STRING, functions: ARRAY<STRUCT<conf: MAP<STRING, VARIANT>, description: STRING, disabled: BOOLEAN, filter: STRING, final: BOOLEAN, groupId: STRING, id: STRING>>, groups: MAP<STRING, STRUCT<description: STRING, disabled: BOOLEAN, name: STRING>>, output: STRING, pack: BOOLEAN, streamtags: ARRAY<STRING>>
conf_description	STRING
conf_output	STRING

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

routes

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
routes	ARRAY<STRUCT<autoParse: BOOLEAN, clones: ARRAY<MAP<STRING, STRING>>, context: STRING, description: STRING, disabled: BOOLEAN, enableOutputExpression: BOOLEAN, filter: STRING, final: BOOLEAN, groupId: STRING, id: STRING, name: STRING, output: STRING, outputExpression: STRING, pipeline: STRING, targetContext: STRING>>
comments	ARRAY<STRUCT<comment: STRING, groupId: STRING, id: STRING, index: BIGINT>>
groups	MAP<STRING, STRUCT<description: STRING, index: BIGINT, name: STRING>>

フィールド	データ型
group	STRING
id	STRING
routes	ARRAY<STRUCT<autoParse: BOOLEAN, clones: ARRAY<MAP<STRING, STRING>>, context: STRING, description: STRING, disabled: BOOLEAN, enableOutputExpression: BOOLEAN, filter: STRING, final: BOOLEAN, groupId: STRING, id: STRING, name: STRING, output: STRING, outputExpression: STRING, pipeline: STRING, targetContext: STRING>>
comments	ARRAY<STRUCT<comment: STRING, groupId: STRING, id: STRING, index: BIGINT>>
groups	MAP<STRING, STRUCT<description: STRING, index: BIGINT, name: STRING>>

sources

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
type	STRING
pipeline	STRING
disabled	BOOLEAN
fullFidelity	BOOLEAN
sendToRoutes	BOOLEAN
pqEnabled	BOOLEAN
streamtags	ARRAY<STRING>
status	STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, metrics: MAP<STRING, VARIANT>, pq: STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: BIGINT, metrics: MAP<STRING, VARIANT>, timestamp: BIGINT>, timestamp: BIGINT, useStatusFromLB: BOOLEAN>
notifications	ARRAY<STRUCT<mode: STRING, templateTargetPairs: ARRAY<STRUCT<targetId: STRING, templateId: STRING>>>>
raw	VARIANT

フィールド	データ型
group	STRING
id	STRING
type	STRING
pipeline	STRING
disabled	BOOLEAN
fullFidelity	BOOLEAN
sendToRoutes	BOOLEAN
pqEnabled	BOOLEAN
streamtags	ARRAY<STRING>
status	STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, metrics: MAP<STRING, VARIANT>, pq: STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: BIGINT, metrics: MAP<STRING, VARIANT>, timestamp: BIGINT>, timestamp: BIGINT, useStatusFromLB: BOOLEAN>
notifications	ARRAY<STRUCT<mode: STRING, templateTargetPairs: ARRAY<STRUCT<targetId: STRING, templateId: STRING>>>>
raw	VARIANT

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

destinations

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
type	STRING
pipeline	STRING
environment	STRING
description	STRING
defaultId	STRING
systemFields	ARRAY<STRING>
streamtags	ARRAY<STRING>
status	STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, metrics: MAP<STRING, VARIANT>, pq: STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: BIGINT, metrics: MAP<STRING, VARIANT>, timestamp: BIGINT>, timestamp: BIGINT, useStatusFromLB: BOOLEAN>
notifications	ARRAY<STRUCT<mode: STRING, templateTargetPairs: ARRAY<STRUCT<targetId: STRING, templateId: STRING>>>>
raw	VARIANT

フィールド	データ型
group	STRING
id	STRING
type	STRING
pipeline	STRING
environment	STRING
description	STRING
defaultId	STRING
systemFields	ARRAY<STRING>
streamtags	ARRAY<STRING>
status	STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, metrics: MAP<STRING, VARIANT>, pq: STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: BIGINT, metrics: MAP<STRING, VARIANT>, timestamp: BIGINT>, timestamp: BIGINT, useStatusFromLB: BOOLEAN>
notifications	ARRAY<STRUCT<mode: STRING, templateTargetPairs: ARRAY<STRUCT<targetId: STRING, templateId: STRING>>>>
raw	VARIANT

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

parsers

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
type	STRING
lib	STRING
description	STRING
tags	STRING
fields	ARRAY<STRING>
delimChar	STRING
escapeChar	STRING
nullValue	STRING
quoteChar	STRING
regex	STRING
raw	VARIANT

フィールド	データ型
group	STRING
id	STRING
type	STRING
lib	STRING
description	STRING
tags	STRING
fields	ARRAY<STRING>
delimChar	STRING
escapeChar	STRING
nullValue	STRING
quoteChar	STRING
regex	STRING
raw	VARIANT

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

breakers

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
lib	STRING
description	STRING
tags	STRING
rules	ARRAY<STRUCT<__template_timestampTimezone: STRING, cleanFields: BOOLEAN, condition: STRING, delimiter: STRING, delimiterRegex: STRING, disabled: BOOLEAN, escapeChar: STRING, eventBreakerRegex: STRING, fields: ARRAY<STRUCT<name: STRING, value: STRING>>, fieldsLineRegex: STRING, fieldsToRemove: ARRAY<STRING>, hasHeaderRow: BOOLEAN, headerLineRegex: STRING, index: BIGINT, jsonArrayField: STRING, jsonExtractAll: BOOLEAN, jsonTimeField: STRING, maxEventBytes: BIGINT, name: STRING, nullFieldVal: STRING, parentFieldsToCopy: ARRAY<STRING>, parser: VARIANT, parserEnabled: BOOLEAN, quoteChar: STRING, shouldUseDataRaw: BOOLEAN, timeField: STRING, timestamp: STRUCT<format: STRING, length: BIGINT, type: STRING>, timestampAnchorRegex: STRING, timestampEarliest: STRING, timestampLatest: STRING, timestampSourceField: STRING, timestampTimezone: STRING, type: STRING>>
minRawLength	BIGINT
raw	VARIANT

フィールド	データ型
group	STRING
id	STRING
lib	STRING
description	STRING
tags	STRING
rules	ARRAY<STRUCT<__template_timestampTimezone: STRING, cleanFields: BOOLEAN, condition: STRING, delimiter: STRING, delimiterRegex: STRING, disabled: BOOLEAN, escapeChar: STRING, eventBreakerRegex: STRING, fields: ARRAY<STRUCT<name: STRING, value: STRING>>, fieldsLineRegex: STRING, fieldsToRemove: ARRAY<STRING>, hasHeaderRow: BOOLEAN, headerLineRegex: STRING, index: BIGINT, jsonArrayField: STRING, jsonExtractAll: BOOLEAN, jsonTimeField: STRING, maxEventBytes: BIGINT, name: STRING, nullFieldVal: STRING, parentFieldsToCopy: ARRAY<STRING>, parser: VARIANT, parserEnabled: BOOLEAN, quoteChar: STRING, shouldUseDataRaw: BOOLEAN, timeField: STRING, timestamp: STRUCT<format: STRING, length: BIGINT, type: STRING>, timestampAnchorRegex: STRING, timestampEarliest: STRING, timestampLatest: STRING, timestampSourceField: STRING, timestampTimezone: STRING, type: STRING>>
minRawLength	BIGINT
raw	VARIANT

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

grok_patterns

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
content	STRING
size	BIGINT
tags	STRING

フィールド	データ型
group	STRING
id	STRING
content	STRING
size	BIGINT
tags	STRING

schemas

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
description	STRING
schema	STRING
tags	STRING

フィールド	データ型
group	STRING
id	STRING
description	STRING
schema	STRING
tags	STRING

collectors

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
type	STRING
description	STRING
environment	STRING
ttl	STRING
savedQueryId	STRING
__template_streamtags	STRING
resumeOnBoot	BOOLEAN
workerAffinity	BOOLEAN
ignoreGroupJobsLimit	BOOLEAN
removeFields	ARRAY<STRING>
streamtags	ARRAY<STRING>
collector	STRUCT<conf: VARIANT, destructive: BOOLEAN, encoding: STRING, type: STRING>
executor	STRUCT<conf: VARIANT, storeTaskResults: BOOLEAN, type: STRING>
input	STRUCT<breakerRulesets: ARRAY<STRING>, metadata: ARRAY<STRUCT<name: STRING, value: STRING>>, output: STRING, pipeline: STRING, preprocess: STRUCT<args: ARRAY<STRING>, command: STRING, disabled: BOOLEAN>, sendToRoutes: BOOLEAN, staleChannelFlushMs: DOUBLE, throttleRatePerSec: STRING, type: STRING>
schedule	STRUCT<cronSchedule: STRING, enabled: BOOLEAN, maxConcurrentRuns: BIGINT, resumeMissed: BOOLEAN, run: MAP<STRING, VARIANT>, skippable: BOOLEAN>
history	VARIANT
savedState	MAP<STRING, STRUCT<data: MAP<STRING, VARIANT>>>
notifications	ARRAY<STRUCT<condition: STRING, conf: VARIANT, disabled: BOOLEAN,グループ: STRING, id: STRING, metadata: ARRAY<STRUCT<name: STRING, value: STRING>>, mode: STRING, pack: STRING, targetConfigs: ARRAY<STRUCT<conf: VARIANT, id: STRING>>, targets: ARRAY<STRING>, templateTargetPairs: ARRAY<STRUCT<targetId: STRING, templateId: STRING>>>>

フィールド	データ型
group	STRING
id	STRING
type	STRING
description	STRING
environment	STRING
ttl	STRING
savedQueryId	STRING
__template_streamtags	STRING
resumeOnBoot	BOOLEAN
workerAffinity	BOOLEAN
ignoreGroupJobsLimit	BOOLEAN
removeFields	ARRAY<STRING>
streamtags	ARRAY<STRING>
collector	STRUCT<conf: VARIANT, destructive: BOOLEAN, encoding: STRING, type: STRING>
executor	STRUCT<conf: VARIANT, storeTaskResults: BOOLEAN, type: STRING>
input	STRUCT<breakerRulesets: ARRAY<STRING>, metadata: ARRAY<STRUCT<name: STRING, value: STRING>>, output: STRING, pipeline: STRING, preprocess: STRUCT<args: ARRAY<STRING>, command: STRING, disabled: BOOLEAN>, sendToRoutes: BOOLEAN, staleChannelFlushMs: DOUBLE, throttleRatePerSec: STRING, type: STRING>
schedule	STRUCT<cronSchedule: STRING, enabled: BOOLEAN, maxConcurrentRuns: BIGINT, resumeMissed: BOOLEAN, run: MAP<STRING, VARIANT>, skippable: BOOLEAN>
history	VARIANT
savedState	MAP<STRING, STRUCT<data: MAP<STRING, VARIANT>>>
notifications	ARRAY<STRUCT<condition: STRING, conf: VARIANT, disabled: BOOLEAN,グループ: STRING, id: STRING, metadata: ARRAY<STRUCT<name: STRING, value: STRING>>, mode: STRING, pack: STRING, targetConfigs: ARRAY<STRUCT<conf: VARIANT, id: STRING>>, targets: ARRAY<STRING>, templateTargetPairs: ARRAY<STRUCT<targetId: STRING, templateId: STRING>>>>

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

database_connections

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
databaseType	STRING
authType	STRING
description	STRING
tags	STRING
connectionTimeout	BIGINT
requestTimeout	BIGINT
tls	STRUCT<caPath: STRING, certPath: STRING, certificateName: STRING, disabled: BOOLEAN, maxVersion: STRING, minVersion: STRING, privKeyPath: STRING, rejectUnauthorized: BOOLEAN, servername: STRING>

フィールド	データ型
group	STRING
id	STRING
databaseType	STRING
authType	STRING
description	STRING
tags	STRING
connectionTimeout	BIGINT
requestTimeout	BIGINT
tls	STRUCT<caPath: STRING, certPath: STRING, certificateName: STRING, disabled: BOOLEAN, maxVersion: STRING, minVersion: STRING, privKeyPath: STRING, rejectUnauthorized: BOOLEAN, servername: STRING>

packs

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
source	STRING
version	STRING
description	STRING
displayName	STRING
author	STRING
tags	VARIANT
raw	VARIANT

フィールド	データ型
group	STRING
id	STRING
source	STRING
version	STRING
description	STRING
displayName	STRING
author	STRING
tags	VARIANT
raw	VARIANT

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

inputs_status

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
type	STRING
status	STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, healthCounts: STRUCT<Green: BIGINT, Red: BIGINT, Unknown: BIGINT, Yellow: BIGINT>, metrics: MAP<STRING, VARIANT>, pq: STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, healthCounts: STRUCT<Green: BIGINT, Red: BIGINT, Unknown: BIGINT, Yellow: BIGINT>, metrics: MAP<STRING, VARIANT>, timestamp: BIGINT>, timestamp: BIGINT, useStatusFromLB: BOOLEAN>
health	STRING
status_timestamp	BIGINT

フィールド	データ型
group	STRING
id	STRING
type	STRING
status	STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, healthCounts: STRUCT<Green: BIGINT, Red: BIGINT, Unknown: BIGINT, Yellow: BIGINT>, metrics: MAP<STRING, VARIANT>, pq: STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, healthCounts: STRUCT<Green: BIGINT, Red: BIGINT, Unknown: BIGINT, Yellow: BIGINT>, metrics: MAP<STRING, VARIANT>, timestamp: BIGINT>, timestamp: BIGINT, useStatusFromLB: BOOLEAN>
health	STRING
status_timestamp	BIGINT

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

outputs_status

主キー: group, id

同期モード: すべての更新のみ

フィールド	データ型
group	STRING
id	STRING
type	STRING
status	STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, healthCounts: STRUCT<Green: BIGINT, Red: BIGINT, Unknown: BIGINT, Yellow: BIGINT>, metrics: MAP<STRING, VARIANT>, pq: STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, healthCounts: STRUCT<Green: BIGINT, Red: BIGINT, Unknown: BIGINT, Yellow: BIGINT>, metrics: MAP<STRING, VARIANT>, timestamp: BIGINT>, timestamp: BIGINT, useStatusFromLB: BOOLEAN>
health	STRING
status_timestamp	BIGINT

フィールド	データ型
group	STRING
id	STRING
type	STRING
status	STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, healthCounts: STRUCT<Green: BIGINT, Red: BIGINT, Unknown: BIGINT, Yellow: BIGINT>, metrics: MAP<STRING, VARIANT>, pq: STRUCT<error: STRUCT<details: MAP<STRING, VARIANT>, message: STRING>, health: STRING, healthCounts: STRUCT<Green: BIGINT, Red: BIGINT, Unknown: BIGINT, Yellow: BIGINT>, metrics: MAP<STRING, VARIANT>, timestamp: BIGINT>, timestamp: BIGINT, useStatusFromLB: BOOLEAN>
health	STRING
status_timestamp	BIGINT

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

functions

主キー: worker_group, id

同期モード: すべての更新のみ

フィールド	データ型
worker_group	STRING
id	STRING
name	STRING
version	STRING
group	STRING
disabled	BOOLEAN
handleSignals	BOOLEAN
sync	BOOLEAN
__filename	STRING
loadTime	DOUBLE
modTime	DOUBLE
asyncTimeout	DOUBLE
cribl_version	STRING
schema	MAP<STRING, VARIANT>
uischema	MAP<STRING, VARIANT>

フィールド	データ型
worker_group	STRING
id	STRING
name	STRING
version	STRING
group	STRING
disabled	BOOLEAN
handleSignals	BOOLEAN
sync	BOOLEAN
__filename	STRING
loadTime	DOUBLE
modTime	DOUBLE
asyncTimeout	DOUBLE
cribl_version	STRING
schema	MAP<STRING, VARIANT>
uischema	MAP<STRING, VARIANT>

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

workspaces

プライマリーキー: workspaceId

同期モード: すべての更新のみ

フィールド	データ型
workspaceId	STRING
region	STRING
leaderFQDN	STRING
state	STRING
alias	STRING
description	STRING
tags	ARRAY<STRING>

フィールド	データ型
workspaceId	STRING
region	STRING
leaderFQDN	STRING
state	STRING
alias	STRING
description	STRING
tags	ARRAY<STRING>

api_credentials

プライマリーキー: clientId

同期モード: すべての更新のみ

フィールド	データ型
name	STRING
description	STRING
enabled	BOOLEAN
organizationId	STRING
clientId	STRING
roles	VARIANT
organizationRole	STRING
createdBy	STRING
createdDate	TIMESTAMP
lastUpdatedBy	STRING
lastUpdatedDate	TIMESTAMP
ipAllowlist	ARRAY<STRING>

フィールド	データ型
name	STRING
description	STRING
enabled	BOOLEAN
organizationId	STRING
clientId	STRING
roles	VARIANT
organizationRole	STRING
createdBy	STRING
createdDate	TIMESTAMP
lastUpdatedBy	STRING
lastUpdatedDate	TIMESTAMP
ipAllowlist	ARRAY<STRING>

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

audit_log

主キー: time, event_id

カーソルフィールド: time

フィールド	データ型
time	TIMESTAMP
action	STRING
type	STRING
user	STRING
principal	STRING
id	STRING
requestId	STRING
group	STRING
event_id	BIGINT
raw	VARIANT

フィールド	データ型
time	TIMESTAMP
action	STRING
type	STRING
user	STRING
principal	STRING
id	STRING
requestId	STRING
group	STRING
event_id	BIGINT
raw	VARIANT

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。

access_log

主キー: time, event_id

カーソルフィールド: time

フィールド	データ型
time	TIMESTAMP
src	STRING
user	STRING
method	STRING
url	STRING
status	BIGINT
message	STRING
response_time	BIGINT
requestId	STRING
cid	STRING
stats	VARIANT
event_id	BIGINT
raw	VARIANT

フィールド	データ型
time	TIMESTAMP
src	STRING
user	STRING
method	STRING
url	STRING
status	BIGINT
message	STRING
response_time	BIGINT
requestId	STRING
cid	STRING
stats	VARIANT
event_id	BIGINT
raw	VARIANT

注記

このテーブルにはVARIANT列があるため、SCDタイプ2をサポートしていません。