次の方法で共有

2024 年 2 月

  • [アーティクル]

次の機能と Azure Databricks プラットフォームの機能強化が 2024 年 2 月にリリースされました。

Note

リリースは段階的に行われます。 Azure Databricks アカウントの更新は、最初のリリース日から 1 週間以上行われないことがあります。

特徴エンジニアリングで Delta Live Tables を使用する (パブリック プレビュー)

2024 年 2 月 29 日

Unity Catalog では、モデル トレーニングまたは推論用の特徴量テーブルとして、主キーを持つ任意の Delta Live テーブルを使用できるようになりました。 Unity カタログでは、特徴の検出、ガバナンス、系列、ワークスペース間のアクセスが提供されます。 詳細については、「Unity Catalog での特徴量テーブルの作成」を参照してください。

2024 年 2 月 29 日

フロントエンド PrivateLink 接続のソース IPv4 アドレスが、監査ログ内の source_ip_address でキャプチャされるようになりました。 「診断ログ リファレンス」と「Azure Databricks へのプライベート接続の構成」を参照してください。

ジョブ所有者と実行ユーザー設定の変更を制限する

2024 年 2 月 29 日

ワークスペース管理者は既定で、ジョブ所有者をワークスペース内の任意のユーザーまたはサービス プリンシパルに変更でき、ジョブの実行ユーザー設定をワークスペース内の任意のユーザーまたは管理者がサービス プリンシパル ユーザー ロールを持つサービス プリンシパルに変更できます。

アカウント管理者は、ワークスペース管理者がジョブ所有者を自分自身にしか変更できないように制限し、ジョブの実行ユーザー設定をワークスペース管理者がサービス プリンシパル ユーザー ロールを持つサービス プリンシパルまたは自分自身にしか変更できないように制限できるようになりました。 ワークスペースの作成後に、この設定の有効化を自動化できます。 「ワークスペース管理者の制限」を参照してください。

Databricks マネージド サービス プリンシパルのサポート

2024 年 2 月 28 日

Azure Databricks で直接、サービス プリンシパルを作成および管理できるようになりました。 以前は、すべてのサービス プリンシパルを既存の Microsoft Entra ID サービス プリンシパルにリンクする必要がありました。 「Databricks と Microsoft Entra ID (旧称 Azure Active Directory) サービス プリンシパル」を参照してください。

クラスターの自動更新を有効にする (パブリック プレビュー)

2024 年 2 月 27 日

クラスターの自動更新により、ワークスペース内のすべてのクラスターが、最新のホスト OS イメージとセキュリティ パッチに定期的に更新されることが保証されます。 メンテナンス期間は構成可能です。 「クラスターの自動更新」を参照してください。 ワークスペースでこの機能を有効にすることで、強化されたセキュリティとコンプライアンス アドオンが自動的に追加されます。 価格に関するページを参照してください。

管理者は強化されたセキュリティとコンプライアンスの機能を有効にできる (パブリック プレビュー)

2024 年 2 月 27 日

管理者は、強化されたセキュリティとコンプライアンス設定の構成の機能 (コンプライアンス セキュリティ プロファイル、強化されたセキュリティ監視、クラスターの自動更新) を有効にできるようになりました。 Azure portal または ARM テンプレートを使用します。 これらの機能を使用することで、強化されたセキュリティとコンプライアンス アドオンが自動的に追加されます。 価格に関するページを参照してください。

クラスターの自動更新機能と、強化されたセキュリティとコンプライアンスの機能を自分自身で有効にする機能は、パブリック プレビュー段階にあります。 ただし、コンプライアンス セキュリティ プロファイル自体と強化されたセキュリティ監視は一般提供 (GA) されています。

リージョン間エグレス料金を回避するための Cloudflare R2 ストレージのサポート (パブリック プレビュー)

2024 年 2 月 26 日

Unity カタログに登録されたデータのクラウド ストレージとして Cloudflare R2 を使用できるようになりました。 Cloudflare R2 は主に、データがリージョンをまたがるときに、クラウド プロバイダーから課金されるデータ エグレス料金を回避しようと考える Delta Sharing のユース ケースを想定しています。 R2 ストレージは、AWS S3、Azure Data Lake Storage Gen2、および Google Cloud Storage でサポートされているすべての Databricks データと AI 資産をサポートします。 R2 のサポートには、Databricks Runtime 14.3 または SQL Warehouse 2024.15 が必要です。 「Cloudflare R2 レプリカを使うか、ストレージを R2 に移行する」および「Cloudflare R2 に接続するためのストレージ資格情報を作成する」を参照してください。

データの追加 UI で XML ファイル形式がサポートされる

2024 年 2 月 23 日

データの追加 UI で、クラウド オブジェクト ストレージからの XML ファイルのアップロードとインジェストがサポートされるようになりました。 データの追加 UI を使用してデータを読み込むを参照してください。

AI 関数を使用して Foundation Model API から生成 AI モデルを呼び出す

2024 年 2 月 22 日

AI 関数を使用して Databricks Foundation Model API から最先端の生成 AI モデルを呼び出し、感情分析や分類などの AI タスクを実行できるようになりました。

使用可能な関数については、「Databricks Foundation Model API を使用した AI 関数」を参照してください。

Unity Catalog ボリュームは一般提供されています

2024 年 2 月 22 日

Unity Catalog ボリュームは、Databricks Runtime 14.3 LTS 以降で一般公開されています。 Databricks では、クラウド オブジェクト ストレージ内の表形式以外のデータへの読み取りおよび書き込みアクセスを管理するために、ボリュームを使用することが推奨されています。 「ボリュームの作成と操作」を参照してください。

フルページの AI 搭載検索

2024 年 2 月 16 から 22 日

Azure Databricks 検索では、DatabricksIQ を活用して、よりインテリジェントな AI 搭載検索エクスペリエンスが提供されるようになりました。 新しいフルページの検索エクスペリエンスにより、結果を表示するためのより広い領域、オブジェクトの追加のメタデータ、結果を絞り込むためのより多くのフィルターが提供されます。

「ワークスペース オブジェクトを検索する」を参照してください。

SQL ウェアハウスで SQL ノートブック ジョブを実行する

2024年 2 月 8 日

SQL ウェアハウスをコンピューティング リソースとして使用し、ノートブック ジョブをスケジュールおよび実行できるようになりました。 詳細については、「SQL ウェアハウスを使用してノートブックを使用する」を参照してください。

Azure Databricks Workflows のファイル到着トリガーは一般提供されています

2024 年 2 月 7 日

ファイル到着トリガーは、すべてのクラウド プロバイダーで一般提供されるようになりました。 このリリースでは、Unity Catalog の外部の場所に対する既存のサポートに加えて、Unity Catalog ボリュームに新しいファイルが到着した場合にファイル到着トリガーを使用して Azure Databricks ジョブを実行できます。 「新しいファイルが到着したときにジョブをトリガーする」を参照してください。

このリリースでは、ファイル到着トリガーを Azure ファイアウォールで使用する場合の制限事項も削除されました。

2024 年 2 月 7 日

Databricks ワークスペース UI でグローバル検索バーを使用して、Unity Catalog で機械学習モデルを検索できるようになりました。 「Unity Catalog でモデルのライフサイクルを管理する」と「ワークスペース オブジェクトを検索する」を参照してください。

Databricks Git サーバー プロキシは一般提供されています

2024 年 2 月 6 日

Databricks Git サーバー プロキシを使用して、Databricks Repos からオンプレミスの Git サーバーへの安全なアクセスを構成できます。 Databricks Git フォルダー (Repos) のプライベート Git 接続を設定するを参照してください。

Databricks Git サーバー プロキシで CAN_ATTACH_TO アクセス許可が要求されなくなりました

2024 年 2 月 6 日

一般提供リリースの Databricks Git サーバー プロキシでは、すべてのユーザーに CAN_ATTACH_TO アクセス許可を付与する必要がなくなりました。

以前に CAN_ATTACH_TO アクセス許可で Databricks Git サーバー プロキシを構成した場合は、「グローバルな CAN_ATTACH_TO アクセス許可を削除する」を参照してください。

dbt および SQL ファイル タスクに対するワークスペース ファイル サポートは一般提供されています

2024 年 2 月 1 日

Azure Databricks ワークスペース フォルダーに格納された dbt プロジェクトと SQL ファイルを使用するためのサポートが一般提供され、リモート Git リポジトリに保存されたファイルを使用するための既存のサポートが追加されました。 「Azure Databricks ジョブを作成して実行する」および「Azure Databricks ジョブでの dbt 変換を使用する」を参照してください。

Databricks Connect for Scala の一般提供

2024 年 2 月 1 日

Databricks Runtime 14.3 LTS 以降、Databricks Connect が Scala で一般提供されるようになりました。

ボリューム内のファイルからテーブルを作成する

2024 年 2 月 1 日

UI を使用して、Unity Catalog ボリュームに格納されているデータ ファイルから Unity Catalog 管理テーブルを作成できるようになりました。 「ボリュームからテーブルを作成する」を参照してください。

Databricks Runtime 14.3 LTS は一般提供されています

2024 年 2 月 1 日

Databricks Runtime 14.3 LTS と Databricks Runtime 14.3 LTS ML が一般提供されるようになりました。

「Databricks Runtime 14.3 LTS」と「Databricks Runtime 14.3 LTS for Machine Learning」を参照してください。

削除ベクトルを使用するテーブルをサポートする Delta Sharing (パブリック レビュー)

2024 年 2 月 1 日

Delta Sharing では、Delta テーブルで有効にできるストレージ最適化機能である削除ベクトルを使用するテーブルの共有がサポートされるようになりました。 受信者は、SQL ウェアハウスを使用する削除ベクトル、Databricks Runtime 14.1 以上を実行するクラスター、またはオープン ソース delta-sharing-spark 3.1 以上を実行するコンピューティングを使用しているテーブルを読み取ることができます。 サポートは来月から順次開始されます。

「削除ベクトルまたは列マッピングを含むテーブルを共有に追加する」、「削除ベクトルまたは列マッピングが有効になっているテーブルを読み取る」、「削除ベクトルまたは列マッピングが有効になっているテーブルを読み取る」を参照してください。