2021 年 1 月

次の機能と Azure Databricks プラットフォームの機能強化が 2021 年 1 月にリリースされました。

Note

リリースは段階的に行われます。 Azure Databricks アカウントの更新は、最初のリリース日から 1 週間以上行われないことがあります。

今月は、Azure Databricks プラットフォーム バージョン 3.37 がリリースされました。 バージョン 3.35 または 3.36 のリリースはありませんでした。

セキュリティで保護されたクラスター接続 (パブリック IP なし) は一般提供

2021 年 1 月 28 日

セキュアなクラスター接続 (パブリック IP なし) が一般提供になりました。すべてのノードがプライベート IP アドレスのみを持つクラスターを起動できます。これにより、強化されたセキュリティが提供されます。 新しいワークスペースでは、セキュアなクラスター接続を有効にできます。 移行したいワークスペースにパブリック IP がある場合は、セキュアなクラスター接続が有効な新しいワークスペースを作成して、この新しいワークスペースにリソースを移行する必要があります。 詳細については、Microsoft または Databricks のアカウント チームにお問い合わせください。

セキュアなクラスター接続を使用する場合は、ワークスペースのサブネットからのエグレスに対する変更があります。

• 既定の (マネージド) VNet を使用すると、Azure Databricks は 既定のSNAT を使用せず、NAT ゲートウェイを作成します。 NAT ゲートウェイは、Azure Databricks によって作成、管理される管理対象リソース グループ内に作成されます。 このリソース グループまたはリソース グループ内にプロビジョニングされたリソースは変更できません。
• オプションの VNet インジェクション機能を使用して、独自の VNet を提供する場合は、エグレスを制御するためのオプションがいくつかあります。 このドキュメントは、ワークスペースのデプロイに関する更新されたガイダンスを反映するように更新されました。

詳細については、「セキュアなクラスター接続」をご覧ください。

Databricks Runtime 7.1 シリーズのサポート終了

2021 年 1 月 21 日

Databricks Runtime 7.1、Databricks Runtime 7.1 for Machine Learning、および Databricks Runtime 7.1 for Genomics のサポートが 1 月 21 日に終了しました。 Databricks ランタイム サポート ライフサイクルを参照してください。

インスタンス プールに事前に読み込まれた Docker イメージを使用してクラスターの起動時間を短縮する

2021 年 1 月 20 日 - 28 日: バージョン 3.37

API を使用してインスタンス プールを作成するときに、事前に読み込まれた Docker イメージを指定できるようになりました。 事前読み込み済みの Docker イメージを使用するプール クラスターは、イメージのダウンロードを待つ必要がないため、起動が速くなります。 「インスタンス プールの作成」を参照してください。

ノートブックでの検索と置換ですべての一致の変更がサポートされるようになりました

2021 年 1 月 20 日 - 28 日: バージョン 3.37

ノートブックで検索と置換の機能を使用するときに、すべての一致の置換を選択できるようになりました。 詳細については、「テキストの検索と置換」を参照してください。

単一ノード クラスター (GA)

2021 年 1 月 20 日 - 28 日: バージョン 3.37

単一ノード クラスターは、Spark ドライバーで構成されるクラスターで、Spark worker は存在しません。 対照的に、標準モード クラスターでは、Spark ジョブを実行するために少なくとも 1 つの Spark worker が必要です。 単一ノード クラスターは、次のような場合に役立ちます。

• Spark によってデータを読み込んで保存する必要がある単一ノードの機械学習ワークロードの実行
• 軽量な探索的データ分析 (EDA)

詳細については、「単一ノードまたはマルチ ノード コンピューティング」を参照してください。

自由形式のクラスター ポリシーの種類の名前が "Unrestricted" (無制限) に変更されました

2021 年 1 月 20 日 - 28 日: バージョン 3.37

自由形式のクラスター ポリシーの種類の名前が "Unrestricted" (無制限) に変更されました。 詳細については、「コンピューティング ポリシーとポリシーの作成と 管理」 を参照してください。

ユーザーが 1 つのポリシーにしかアクセスできない場合、クラスター ポリシー フィールドが表示されない

2021 年 1 月 20 日 - 28 日: バージョン 3.37

標準クラスターまたはジョブ クラスターの作成時に、1 つのポリシーにのみアクセスできる場合、またはポリシーが定義されていない場合、“クラスター ポリシー” フィールドは表示されません。

Databricks Runtime 7.0 シリーズのサポート終了

2021 年 1 月 14 日

Databricks Runtime 7.0、Databricks Runtime 7.0 for Machine Learning、および Databricks Runtime 7.0 for Genomics のサポートは 1 月 14 日に終了しました。 「Databricks ランタイム サポート ライフサイクル」を参照してください。