All Purpose と ジョブ コンピュートに接続
この記事では、 Databricks ワークスペースの all-purpose とジョブ コンピュートに接続して、データエンジニアリング、データサイエンス、データ分析のワークロードを実行する方法について説明します。 汎用コンピュートを使用してノートブックを実行したり、ジョブ コンピュートを使用してワークフローを実行したりできます。
コンピュートにアクセスまたは作成できるのは誰ですか?
コンピュートにアクセスしたり、コンピュートを作成したりできるかどうかは、ユーザーの権限によって異なります。
- ワークスペースで Server レス コンピュート for ノートブック が有効になっている場合、ワークスペース内のすべてのユーザは、ノートブックとジョブで対話型ワークロードを実行するためのサーバレス コンピュート リソースにアクセスできます。
- ワークスペース 管理者は、任意の種類のコンピュートを作成できます。 また、ワークスペースで作成されたすべてのコンピュートに対する CAN MANAGE 権限も継承します。
- Unlimitedクラスター作成 権限を持つ管理者以外のユーザーは、コンピュートの作成時にすべての構成設定にアクセスできます。アクセス許可を与えられたコンピュートにアクセスでき、任意の種類の新しいコンピュートを作成できます。 使用可能な構成設定については、「 コンピュート構成リファレンス」を参照してください。 ワークスペース 管理者は、この権利を任意のユーザー、グループ、またはサービスプリンシパルに割り当てることができます。 「エンタイトルメントの管理」を参照してください。
- Unlimitedクラスター作成 権限を持たない管理者以外のユーザーは、権限が付与されているコンピュート、または権限が割り当てられているポリシーを使用して作成したコンピュートにのみアクセスできます。
他のユーザーが設定したコンピュートを使用する
無制限のクラスター作成アクセス許可がない場合は、ワークスペース管理者によって付与されたコンピュート ポリシーとコンピュート ポリシーにのみアクセスできます。 ユーザーは、コンピュートに対して次のいずれかの権限を持つことができます。
- Can Attach To: ノートブックをコンピュートにアタッチして、コンピュート メトリクスと Spark UIを表示できます。
- Can Restart: コンピュートの起動、再起動、終了ができます。 また、 Can Attach To 権限も含まれます。
- CAN MANAGE: コンピュートの詳細、権限、サイズを編集できます。 また、 Can Attach To 権限と Can Restart 権限も含まれます。
- NO PERMISSIONS: コンピュートに対する権限がありません。
コンピュートにアタッチする権限がある場合は、開いているノートブックの 「Connect 」ドロップダウンメニューから選択するか、新しいジョブを作成するときに 「コンピュート 」ドロップダウンメニューから選択できます。 コンピュートのアクセス許可の詳細については、「 コンピュートのアクセス許可」を参照してください。
Create new コンピュート using a ポリシー
コンピュート ポリシーの権限がある場合は、独自のコンピュートを作成できます。 ポリシーには最小限の構成オプションがあり、デフォルト設定を使用して効率的なリソースになるように設計されています。 設定を編集する場合は、 構成設定リファレンスで各設定について学習できます。
- ワークスペースのサイドバーにある コンピュート タブをクリックします。
- [コンピュートを作成] ボタンをクリックします。
- ポリシー ドロップダウン メニューからポリシーを選択します。
- (オプション)コンピュートの名前を更新します。
- (オプション)使用可能な設定を構成します。
- 作成 をクリックします。
これで、ワークロードの実行に使用できるコンピュート リソースができました。
ポリシー
ワークスペース管理者は、ワークスペースでコンピュート ポリシーを作成および管理できます。 必要なコンピュートを作成できるポリシーにアクセスできない場合は、ワークスペース管理者にお問い合わせください。 ポリシーの詳細については、「 コンピュート ポリシーの作成と管理」を参照してください。
ワークスペースにはカスタム ポリシーがある場合や、 Databricks デフォルト ポリシーを使用している場合があります。 デフォルトのポリシーには、次のものが含まれます。
- パーソナルコンピュート: ユーザーは、最小限の構成オプションを使用して、個別に割り当てられた単一ノード コンピュート リソースを作成できます。
- 共有コンピュート: ユーザーは、複数のユーザーが共有することを目的とした、より大きなマルチノード リソースを作成できます。
- Power User コンピュート: ユーザーは、より大きなマルチノードリソースを作成できます。 このポリシーは、Personal コンピュートよりも多くのコンピュート リソースを必要とするシングルユーザー ワークロードを対象としています。
- ジョブ コンピュート: ユーザーは、ジョブ用の汎用のデフォルト コンピュートを作成できます。
デフォルトでは、すべてのユーザーがパーソナル コンピュート ポリシーにアクセスできます。 パーソナル コンピュート ポリシーが表示されない場合は、組織によってワークスペースから削除されています。
無制限のコンピュート作成
ワークスペース管理者または Unrestrictedクラスター作成 権限を持つユーザーは、 Unrestricted ポリシーを使用してコンピュートを作成できます。 これにより、 新しいコンピュートUIのすべてのコンピュート 設定にアクセスできます。 使用可能なすべての設定のリファレンスについては、「 コンピュート構成リファレンス」を参照してください。