2022 年 3 月

次の機能と Azure Databricks プラットフォームの機能強化が 2022 年 3 月にリリースされました。

Note

リリースは段階的に行われます。 Azure Databricks アカウントの更新は、最初のリリース日から 1 週間以上行われないことがあります。

Databricks Enhanced Autoscaling を使用した Delta Live Tables パイプラインのパフォーマンスとコストの改善

2022 年 3 月 31 日

Databricks Enhanced Autoscaling を使用すると、ストリーミング ワークロードの最適化とバッチ ワークロードのサポートの強化により、既存のクラスターの自動スケール機能が向上します。 自動スケールの強化により、クラスターのより効率的な使用、リソース使用量の削減、コストの縮小が実現されます。 「拡張自動スケーリングを使用して、Delta Live Tables パイプラインのクラスター使用率を最適化する」を参照してください。

Files in Repos は、新しいワークスペースで既定で有効になっています

2022 年 3 月 30 日

Files in Repos 機能が、新しく作成されたワークスペースでは既定で有効になっています。

Databricks Feature Store の一般提供

2022 年 3 月 22 日

Databricks Feature Store は一般提供されています。 Databricks Feature Store を使用すると、組織全体で特徴の共有と検出が可能になります。また、モデルのトレーニングと推論に一貫した特徴評価コードが使用されるようになります。

実験ページから実験を共有する

2022 年 3 月 21 から 28 日: バージョン 3.68

MLflow 実験ページの [アクセス許可] ボタンの名前が [共有] に変更されました。 ダイアログに実験への共有可能なリンクが含まれるようになりました。 「実験へのアクセス許可を変更する」を参照してください。

RStudio Workbench のバグ修正

2022 年 3 月 21 から 28 日: バージョン 3.68

最新の RStudio Workbench は、ライセンス ファイルを使用する場合に Cookie に依存します。 これらの Cookie はプロキシ用の許可リストに載っていませんでした。 この問題は修正されています。

新しいワークスペース言語オプション

2022 年 3 月 21 日

ワークスペースは、次の言語で使用できるようになりました。

• Español
• Português (Brasil)

Databricks Runtime 10.4 LTS と 10.4 LTS ML は GA、10.4 Photon はパブリック プレビュー

2022 年 3 月 18 日

Databricks Runtime 10.4 LTS と Databricks Runtime 10.4 LTS ML が一般提供されるようになりました。 Databricks Runtime 10.4 Photon は、パブリック プレビュー段階です。

注意

LTS は、このバージョンが長期的にサポートされていることを意味します。 Databricks Runtime LTS バージョンのライフサイクルに関する説明を参照してください。

「Databricks Runtime 10.4 LTS」と「Databricks Runtime 10.4 LTS for Machine Learning」を参照してください。

Unity カタログがパブリック プレビューで利用可能

2022 年 3 月 10 日

Unity Catalog (プレビュー) は、Databricks Lakehouse 上のデータと AI に対する粒度の細かいガバナンス ソリューションです。

Unity Catalog は、次の主な機能を使用して、データのセキュリティとガバナンスを簡略化するのに役立ちます。

• 1 回だけ定義し、すべての場所をセキュリティで保護: Unity Catalog は、すべてのワークスペースとペルソナに適用されるデータ アクセス ポリシーを管理するための単一の場所となります。
• 標準に準拠したセキュリティモデル: Unity Catalog のセキュリティ モデルは、標準の ANSI SQL に基づいています。管理者は、使い慣れた構文を使用して、既存のデータ レイクのカタログ、データベース (スキーマとも呼ばれます)、テーブル、ビューにアクセス許可を与えることができます。
• 組み込みの監査: Unity Catalog は、データへのアクセスを記録するユーザーレベルの監査ログを自動的にキャプチャします。

Unity Catalog のデータには、Data Science & Engineering クラスターや Databricks Machine Learning クラスター、SQL ウェアハウス、Databricks SQL エディターから、または Unity Catalog REST API や Unity Catalog コマンド ライン インターフェイス (CLI) を使用するなど、ワークスペースのローカル データにアクセスするのと同じ方法でアクセスできます。

詳細については、「Unity Catalog とは」を参照してください。 Unity Catalog のパブリック プレビューに参加するには、Azure Databricks アカウント チームにお問い合わせください。

差分共有がパブリック プレビューで利用可能

2022 年 3 月 10 日

Delta Sharing (プレビュー) は、使用するコンピューティング プラットフォームに関係なく、他の組織と安全にデータを共有するために Databricks によって開発されたオープン プロトコルです。 "データプロバイダー" と呼ばれる Databricks ユーザーは、Delta Sharing を使用して、"データ受信者" と呼ばれる組織外の個人またはグループと Unity Catalog メタストア内のデータを共有できます。 データ受信者は、最新バージョンの共有データの操作をすぐに開始できます。 コネクタの完全なリストと使用方法についての情報は、Delta Sharing プロジェクトに関するドキュメントを参照してください。 Unity Catalog メタストアで Delta Sharing が有効になっている場合、Unity Catalog は Delta Sharing サーバーを実行します。

詳しくは、「Delta Sharing を使用してデータと AI 資産を安全に共有する」をご参照ください。 Delta Sharing のパブリック プレビューに参加するには、Azure Databricks アカウント チームにお問い合わせください。

管理サービスのためのカスタマー マネージド キーのローテーション

2022 年 3 月 10 日

管理サービスのためのカスタマー マネージド キー (CMK) を追加できます。 Azure Databricks では、このキーを使用して、ノートブック ソース、シークレット、Databricks SQL クエリ履歴のコントロール プレーン内のデータを暗号化するキーへのアクセスを保護および制御します。 この機能はパブリック プレビュー段階にあります。

キーのローテーション (更新) ができるようになりました。

Delta Live Tables パイプラインのアクセス制御の強化

2022 年 3 月 9 日

パイプラインの所有者、パイプラインを表示または管理できるユーザー、パイプラインを実行できるユーザーなど、Delta Live Tables パイプラインへのアクセスをより細かく制御できるようになりました。 「Delta Live Tables ACL」を参照してください。

新しい channel 設定で Delta Live Tables プレビュー機能をテストする (パブリック プレビュー)

2022 年 3 月 7 日から 3 月 14 日: バージョン 3.67

新しい channel 設定を使用して、Delta Live Tables パイプラインで今後の機能をテストできます。 今後の機能をパイプラインでテストするには、channel を preview に設定します。 現在のリリースに戻すには、channel を current に設定します。

Delta Live Tables Python 関数のエラー処理の改善 (パブリック プレビュー)

2022 年 3 月 7 日から 3 月 14 日: バージョン 3.67

このリリースでは、テーブル プロパティの名前と値を設定するときに Delta Live Tables Python 関数が string データ型を使用することを検証するための型チェックが追加されました。 以前は、文字列以外の値を使用してテーブルプロパティを設定すると、基になる原因を示すエラー メッセージなしでパイプラインが失敗するおそれがありました。

Databricks Repos の機能強化

2022 年 3 月 7 日から 14 日: バージョン 3.67

次の機能強化が Databricks Repos に追加されました。

• リポジトリ内のファイルでのテキスト検索と置換。 検索、置換、すべて置換の各機能を提供する [ファイル] および [編集] メニューがファイル エディターに追加されました。
• 以前は、Databricks では、1 つのリポジトリに含めるノートブックとファイルの総数が 2,000 を超えないようにすることが推奨されていました。 この制限は 5,000 に引き上げられました。

クラスター ポリシーの変更に関する診断ログ

2022 年 3 月 7 日から 14 日: バージョン 3.67

監査ログが有効な状態で、クラスター ポリシーを作成、更新、または削除するか、クラスター ポリシーのユーザー アクセス許可を更新すると、監査イベントがログに記録されるようになりました。 詳細については、「診断ログ リファレンス」を参照してください。

Databricks Runtime 10.4 (ベータ版)

2022 年 3 月 4 日

Databricks Runtime 10.4、10.4 Photon、10.4 ML をベータ リリースとして使用できるようになりました。

「Databricks Runtime 10.4 LTS」と「Databricks Runtime 10.4 LTS for Machine Learning」で詳細なリリース ノートを参照してください。