Share via

2021 年 2 月

  • [アーティクル]

次の機能と Azure Databricks プラットフォームの機能強化が 2021 年 2 月にリリースされました。

Note

リリースは段階的に行われます。 Azure Databricks アカウントの更新は、最初のリリース日から 1 週間以上行われないことがあります。

新しい Azure Databricks Power BI コネクタ (GA)

2021 年 2 月 26 日

2020 年 9 月にパブリック プレビューとしてリリースされた Azure Databricks 用の新しい Power BI コネクタの一般提供が開始されました。 次の機能を提供します。

  • 簡単な接続構成: この新しい Power BI Azure Databricks コネクタは Power BI に統合されているため、簡単なダイアログを使用して数回のクリックで構成できます。
  • Microsoft Entra ID 資格情報に基づいた認証。管理者が PAT トークンを構成する必要がなくなりました。
  • 大幅にパフォーマンスが改善された新しい Azure Databricks ODBC コネクタにより、インポートがより高速になり、メタデータ呼び出しが最適化されています。
  • Power BI を介した Azure Databricks データへのアクセスは、Azure Databricks のテーブルのアクセス制御と、Microsoft Entra ID に関連付けられている Azure ストレージ アカウントのアクセス許可に従います。

詳細については、「Power BI を Azure Databricks に接続する」を参照してください。

Azure Databricks でのユーザー アクティビティの診断ログの一般提供開始

2021 年 2 月 23 日 ～ 3 月 2 日:　バージョン 3.40

ユーザーが Azure Databricks で実行しているアクティビティの詳細な監査証跡のキャプチャ機能が、現在一般提供されています。

「診断ログ リファレンス」を参照してください。

DBFS REST API の get-status および list の応答に modification_time を追加

2021 年 2 月 23 日 ～ 3 月 2 日:　バージョン 3.40

ファイル オブジェクトの最終変更時刻が DBFS REST API で使用可能になりました。 modification_time は現在、get-status と list の両方の API エンドポイントによって、FileInfo 応答構造体で返されます。 ディレクトリでの get-status 呼び出しに対する JSON 応答の例を次に示します。

{"path": "/test-directory", "is_dir": true, "file_size": 0, "modification_time": 1610366751000}

「DBFS API」をご覧ください。

MLflow で長い実験名を簡単にコピー

2021 年 2 月 16 ～ 23 日: バージョン 3.39

実験ページから実験名をコピーして、ノートブック ログを実行するアクティブな MLflow 実験を簡単に設定できます。 「実験名をコピーする」を参照してください。

提供クラスターのメモリ サイズとコア数を調整

2021 年 2 月 16 ～ 23 日: バージョン 3.39

MLflow モデル サービスに使用されるクラスターをカスタマイズできます。 「Feature Store の統合」を参照してください。

Web ターミナルの一般提供開始

2021 年 2 月 16 ～ 23 日: バージョン 3.39

Web ターミナルが一般提供されています。 Spark ドライバー ノードでシェル コマンドを実行したり、エディターを使用したりするための、便利で高度な対話形式の方法が用意されています。 「Azure Databricks Web ターミナルでシェル コマンドを実行する」を参照してください。

Azure SQL Database および SQL Server 用 Apache Spark コネクタで Databricks Runtime 7.x 以降をサポート

2021 年 2 月 16 日

Azure SQL Database および SQL Server 用 Spark コネクタが Spark 3 をサポートするため、Databricks Runtime 7.x 以降がサポートされています。

Databricks Runtime 7.2 シリーズのサポート終了

2021 年 2 月 11 日

Databricks Runtime 7.2、Databricks Runtime 7.2 for Machine Learning、および Databricks Runtime 7.2 for Genomics のサポートが 2 月 11 日に終了しました。 Databricks ランタイム サポート ライフサイクルを参照してください。

Databricks Runtime 7.6 GA

2021 年 2 月 8 日

Databricks Runtime 7.6 および Databricks Runtime 7.6 ML が一般提供されました。

詳細については、「Databricks Runtime 7.6 (サポート対象外)」および「Databricks Runtime 7.6 for Machine Learning (サポート対象外)」の完全なリリース ノートを参照してください。

Databricks Runtime 8.0 (ベータ版)

2021 年 2 月 1 日

Databricks Runtime 8.0 と Databricks Runtime 8.0 ML をベータ リリースとして使用できるようになりました。

詳細については、「Databricks Runtime 8.0 (サポート対象外)」 および 「Databricks Runtime 8.0 for ML (サポート対象外)」の完全なリリース ノートを参照してください。

Databricks Runtime for Genomics は非推奨になりました

2021 年 2 月 1 日

Databricks では、新しい Databricks Runtime for Genomics のリリースは構築されなくなりました。Databricks Runtime for Genomics 7.3 LTS のサポートが終了する 2022 年 9 月 24 日に Databricks Runtime for Genomics のサポートは削除されます。 その時点で、クラスターの作成時に Databricks Runtime for Genomics を選択することはできなくなります。

Databricks Runtime の非推奨ポリシーとスケジュールの詳細については、サポートされているすべての Databricks Runtime LTS リリース を参照してください。

MLflow の実行成果物表示の JSON をさらに読みやすく表示

2021 年 2 月 4 ～ 11 日: バージョン 3.38

MLflow 成果物パネルの JSON 出力が、より読み取り可能な形式になりました。

REST API を使用してモデル レジストリにコメントを入力する

2021 年 2 月 4 ～ 11 日: バージョン 3.38

REST API を使用して、モデル レジストリにコメントを追加できます。

API 呼び出しで既定のクラスター値を簡単に指定する

2021 年 2 月 4 ～ 11 日: バージョン 3.38

Databricks Clusters API を使用して、汎用クラスターを作成および編集する際に、applyDefaultPolicyValues フィールドを使用できるようになりました。 true の場合、不足しているクラスター属性に policy 既定値を使用します。

現在のワーカー割り当てに従ってクラスター ワーカーの構成を調整する

2021 年 2 月 4 ～ 11 日: バージョン 3.38

クラスターの一覧に、実行中の各クラスターに割り当てられたワーカーの数が表示されます。 この数値がクラスターの詳細ページに表示されるため、クラスターの現在のサイズ設定とクラスター構成の詳細を簡単に比較し、必要に応じて構成を調整できます。

タスク パラメーター変数を使用してジョブのタスクにコンテキスト固有の情報を渡す

2021 年 2 月 4 ～ 11 日: バージョン 3.38

ジョブ ID や実行開始時刻などのコンテキスト固有の情報を含むタスクに変数を渡すことができます。 詳細については、「ジョブ実行に関するコンテキストをジョブ タスクに渡す」を参照してください。

ジョブの失敗によるエラー メッセージに機密の可能性がある情報が含まれなくなりました

2021 年 2 月 4 ～ 11 日: バージョン 3.38

ジョブの失敗エラー メッセージで、Java 例外からのスタック トレースが除外されました。 miscMessage フィールドに含まれるスタック トレースによって、機密情報がユーザーに公開される可能性がありました。