データ共有を監査および監視する

この記事では、データのプロバイダーと受信者が監査ログを使用してDelta Sharingイベントを監視する方法について説明します。プロバイダー監査ログには、プロバイダーが実行したアクションと、プロバイダーの共有データに対して受信者が実行したアクションが記録されます。受信者監査ログには、共有へのアクセスとプロバイダーオブジェクトの管理に関連するイベントが記録されます。

Delta Sharing監査ログイベントのリストを表示するには、 Delta Sharingイベント」を参照してください。

要件

監査ログにアクセスするには、アカウント管理者が Databricks アカウントの監査ログシステムテーブルを有効にする必要があります。「システムテーブルを有効にする」を参照してください。監査ログシステムテーブルの詳細については、「監査ログシステムテーブルリファレンス」を参照してください。

アカウント管理者またはメタストア管理者ではない場合、監査ログを読み取るには、 system.access.auditへのアクセス権が付与されている必要があります。

ログに記録されたイベント

Delta Sharing監査ログイベントのリストを表示するには、 Delta Sharingイベント」を参照してください。

受信者のクエリ結果の詳細を表示する

プロバイダーログでは、 deltaSharingQueriedTableChanges および deltaSharingQueriedTable として返されるイベントは、データ受信者のクエリが応答を受け取った後にログに記録されます。プロバイダーは、これらのログの response.result フィールドを表示して、受信者と共有された内容の詳細を確認できます。このフィールドには、次の値を含めることができます。このリストはすべてを網羅しているわけではありません。

"checkpointBytes": "0",
"earlyTermination": "false",
"maxRemoveFiles": "0",
"path": "file: example/s3/path/golden/snapshot-data0/_delta_log",
"deltaSharingPartitionFilteringAccessed": "false",
"deltaSharingRecipientId": "<redacted>",
"deltaSharingRecipientIdHash": "<recipient-hash-id>",
"jsonLogFileNum": "1",
"scannedJsonLogActionNum": "5",
"numRecords": "3",
"deltaSharingRecipientMetastoreId": "<redacted>",
"userAgent": "Delta-Sharing-Unity-Catalog-Databricks-Auth/1.0 Linux/4.15.0-2068-azure-fips OpenJDK_64-Bit_Server_VM/11.0.7+10-jvmci-20.1-b02 java/11.0.7 scala/2.12.15 java_vendor/GraalVM_Community",
"jsonLogFileBytes": "2846",
"checkpointFileNum": "0",
"metastoreId": "<redacted>",
"limitHint": "Some(1)",
"tableName": "cookie_ingredients",
"tableId": "1234567c-6d8b-45fd-9565-32e9fc23f8f3",
"activeAddFiles": "2", // number of AddFiles returned in the query
"numAddFiles": "2", // number of AddFiles returned in the query
"numAddCDCFiles": "2", // number of AddFiles returned in the CDF query
"numRemoveFiles": "2", // number of RemoveFiles returned in the query
"numSeenAddFiles": "3",
"scannedAddFileSize": "1300", // file size in bytes for the AddFile returned in the query
"scannedAddCDCFileSize": "1300", // file size in bytes for the AddCDCFile returned in the CDF query
"scannedRemoveFileSize": "1300", // file size in bytes for the RemoveFile returned in the query
"scannedCheckpointActionNum": "0",
"tableVersion": "0"

ログに記録されたエラー

試行したDelta Sharingアクションが失敗した場合、アクションはログの response.error_message フィールドにエラーメッセージとともに記録されます。 < 文字から > 文字までの項目は、プレースホルダーテキストを表します。

プロバイダーログのエラーメッセージ

Delta Sharingデータプロバイダーに関する次のエラーをログに記録します。

選択したメタストアではDelta Sharing有効になっていません。

DatabricksServiceException: FEATURE_DISABLED:
Delta Sharing is not enabled

存在しないカタログに対して操作が試行されました。

DatabricksServiceException: CATALOG_DOES_NOT_EXIST:
Catalog ‘<catalog>’ does not exist.

アカウント管理者またはメタストア管理者ではないユーザーが、特権操作を実行しようとしました。
```
DatabricksServiceException: PERMISSION_DENIED:
Only administrators can <operation-name> <operation-target>
```
メタストアが割り当てられていないワークスペースからメタストアに対して操作が試行されました。
```
DatabricksServiceException: INVALID_STATE:
Workspace <workspace-name> is no longer assigned to this metastore
```

要求に受信者名または共有名がありませんでした。

DatabricksServiceException: INVALID_PARAMETER_VALUE: CreateRecipient/CreateShare Missing required field: <recipient-name>/<share-name>

要求に無効な受信者名または共有名が含まれていました。

DatabricksServiceException: INVALID_PARAMETER_VALUE: CreateRecipient/CreateShare <recipient-name>/<share-name> is not a valid name

ユーザーがUnity Catalogメタストアにないテーブルを共有しようとしました。

DatabricksServiceException: INVALID_PARAMETER_VALUE: Only managed or external table on Unity Catalog can be added to a share

ユーザーが、すでにローテーション状態にあり、以前のトークンの有効期限がまだ切れていない受信者をローテーションしようとしました。
```
DatabricksServiceException: INVALID_PARAMETER_VALUE: There are already two active tokens for recipient <recipient-name>
```
ユーザーが、既存の受信者と同じ名前で新しい受信者または共有を作成しようとしました。
```
DatabricksServiceException: RECIPIENT_ALREADY_EXISTS/SHARE_ALREADY_EXISTS: Recipient/Share <name> already exists`
```

ユーザーが、存在しない受信者または共有に対して操作を実行しようとしました。

DatabricksServiceException: RECIPIENT_DOES_NOT_EXIST/SHARE_DOES_NOT_EXIST: Recipient/Share '<name>' does not exist

ユーザーが共有にテーブルを追加しようとしましたが、テーブルは既に追加されていました。
```
DatabricksServiceException: RESOURCE_ALREADY_EXISTS: Shared Table '<name>' already exists
```
ユーザーが、存在しないテーブルを参照する操作を実行しようとしました。
```
DatabricksServiceException: TABLE_DOES_NOT_EXIST: Table '<name>' does not exist
```
ユーザーが、存在しないスキーマを参照する操作を実行しようとしました。
```
DatabricksServiceException: SCHEMA_DOES_NOT_EXIST: Schema '<name>' does not exist
```

ユーザーが存在しない共有にアクセスしようとしました。

DatabricksServiceException: SHARE_DOES_NOT_EXIST: Share <share-name> does not exist.

受信者ログのエラーメッセージ

Delta Sharingデータ受信者に関する次のエラーをログに記録します。

ユーザーは、アクセス許可のない共有にアクセスしようとしました。

DatabricksServiceException: PERMISSION_DENIED:
User does not have SELECT on Share <share-name>