今後の予定

今後のDatabricksリリースについて説明します。

クエリ、アラート、データソースを管理するための Databricks SQL API の更新

Databricks 、クエリ、アラート、データソース、およびアクセス許可を管理するためのDatabricks SQL APIの新しいバージョンをリリースする予定です。 この次期リリースは、より堅牢でユーザーフレンドリーなエクスペリエンスを提供するように設計されています。 新しい API バージョンが利用可能になっても、レガシー バージョンは少なくとも 6 か月間は引き続きサポートされます。 この移行期間は、古いバージョンが段階的に廃止される前に、アプリケーションと統合を新しいバージョンに移行するための十分な時間を確保することを目的としています。

Databricks SQL APIの新バージョンのハイライト

クエリ APIアラート APIの新しいバージョンには、次のものが含まれます。

  • 新しいクエリ API とアラート API は、現在の API パス/api/2.0/preview/sql/...に代わるapi/2.0/sql/...でアクセスできるようになります。

  • 新しいクエリAPIとアラートAPI 、より説明的なフィールド名とタイプを持つ新しいクエリとアラートの定義が使用されます。

  • 新しい Queries APIおよび アラートAPIの更新エンドポイントは、POST ではなく PATCH を使用した部分更新をサポートします。 さらに、これらのエンドポイントでは、クエリとアラートの所有権を譲渡できます。 以前は、これはオブジェクト所有権転送 APIを使用した場合のみ許可されていました。

  • 新しい Queries APIと アラートAPIのリスト エンドポイントは、トークン ベースのページ区切りを使用してページ分けされます。

  • 新しいクエリ API のリスト エンドポイントでは、名前によるフィルタリングやカスタム順序付けはサポートされなくなりました。 代わりに、アクセス可能なすべてのクエリが返され、作成時刻の昇順で並べ替えられます。

  • Queries API の復元エンドポイントは廃止されます。 ゴミ箱に移動されたクエリは、引き続き Databricks UI を通じて復元できます。 この機能の代わりとして、ワークスペース オブジェクトを復元するツールが計画されており、ワークスペースAPIの更新として含まれる予定です。

  • 新しいアラートAPIの削除エンドポイントは、アラートを完全に削除するのではなく、アラートをゴミ箱に移動します。 ゴミ箱に移動されたアラートは 30 日後に自動的にクリーンアップされます。 30 日以内に、ゴミ箱に移動されたアラートは Databricks UI を通じて復元できます。 この機能の代わりとして、ワークスペース オブジェクトを復元するツールが計画されており、ワークスペースAPIの更新として含まれる予定です。

データソースAPIの廃止:

  • データソースAPIは非推奨になります。 現在、その機能はSQLウェアハウスのリストを取得することに限られています。 新しいクエリAPI 、データソース ID の代わりにSQLウェアハウス ID を渡したり返したりできるようになります。 APIデータソースとSQL ウェアハウス間の変換のための個別の 呼び出しは不要になりました。

Databricks SQL ACL /Permissions APIsの更新:

  • 新しいバージョンの API では、Get object ACLまたはSet object ACL はサポートされなくなりました。 これらのアクションは、権限を管理するためにワークスペースAPIを使用して実行する必要があります。

フィールドと形式の変更の正確なリストを含む、クエリ API とアラート API の新しいバージョンの詳細については、Databricks アカウント チームにお問い合わせください。

従来の Git 統合は 1 月 31 日にサポート終了

2024 年 1 月 31 日以降、Databricks は従来のノートブックの Git 統合を削除します。 この機能は 2 年以上レガシー状態であり、2023 年 11 月以降、製品 UI に非推奨の通知が表示されています。

従来の Git 統合から Databricks Git フォルダー (旧称 Repos) への移行の詳細については、 「従来の Git 統合から Databricks Repos への切り替え」を参照してください。 この削除が影響し、拡張機能が必要な場合は、Databricks アカウント チームにお問い合わせください。

クエリ、ダッシュボード、およびアラートのリストページに対する変更

Databricks は、クエリ、ダッシュボード、アラートのリスト ページから[管理者ビュー]タブを削除する予定です。 ワークスペース管理者には、ワークスペース オブジェクトに対する CAN MANAGE 権限が自動的に付与されるため、すべてのクエリ、ダッシュボード、およびアラートに各リスト ページの[すべて]タブからアクセスできます。

外部サポートチケットの送信はまもなく廃止されます

Databricks は、サポート チケットの送信エクスペリエンスをhelp.databricks.comから Databricks ワークスペースのヘルプ メニューに移行しています。 help.databricks.com によるサポート チケットの送信は、まもなく廃止されます。チケットの表示とトリアージは、引き続き help.databricks.comで行うことができます。

組織が Databricks サポート契約を結んでいる場合に利用できる製品内エクスペリエンスは、Databricks Assistant と統合され、チケットを送信しなくても問題に迅速に対処できます。

製品内エクスペリエンスにアクセスするには、ワークスペースの上部バーにあるユーザー アイコンをクリックし、 [サポートに問い合わせ] をクリックするか、アシスタントに「ヘルプが必要です」と入力します。

[サポートに問い合わせる] モーダルが開きます。

サポートモーダルに問い合わせる

製品内エクスペリエンスがダウンしている場合は、問題に関する詳細情報を含むサポートの要求を help@databricks に送信してくださいcomです。 詳細については、「 ヘルプ」を参照してください

JDK8 および JDK11 はサポートされません

Databricks は、Spark 4.0 のリリース時に、次のメジャー Databricks Runtime バージョンで JDK 8 のサポートを削除する予定です。 Databricks は、Databricks Runtime 14.x の次の LTS バージョンで JDK 11 のサポートを削除する予定です。

新しいワークスペース の Unity Catalog の自動有効化

Databricks は、新しいワークスペースに対して Unity Catalog を自動的に有効にし始めました。 これにより、ワークスペースの作成後にアカウント管理者が Unity Catalog を構成する必要がなくなります。 ロールアウトはアカウント間で段階的に進行しています。

新しいグラフとグラフの改善

Databricks は、SQL エディター、SQL ダッシュボード、ノートブックに新しいグラフを追加する予定です。 この変更により、グラフのレンダリングパフォーマンスが向上し、色が改善され、対話性が高速になります。 「Databricks の新しいグラフの視覚化」を参照してください。

お気に入り機能

Databricksは、ワークスペースにお気に入り機能を導入する予定です。ノートブック、ダッシュボード、テスト、クエリーなどのコンテンツをお気に入りのリストに保存して、ホームページからお気に入りにアクセスできるようになります。

sqlite-jdbcのアップグレード

Databricks Runtimeは、すべてのDatabricks Runtimeメンテナンスリリースでsqlite-jdbcバージョンを3.8.11.2から3.42.0.0にアップグレードする予定です。バージョン3.42.0.0のAPIは、3.8.11.2との互換性が完全ではありません。バージョン3.42.0.0を使用しているメソッドと戻り値の型を確認してください。

コードでsqlite-jdbcを使用している場合は、sqlite-jdbcの互換性レポートを確認してください。