HDInsight で使用できる Apache Hadoop コンポーネントおよびバージョンとはWhat are the Apache Hadoop components and versions available with HDInsight?

Microsoft Azure HDInsight のApache Hadoop エコシステムのコンポーネントおよびバージョンと、Enterprise セキュリティ パッケージについて説明します。Learn about the Apache Hadoop ecosystem components and versions in Microsoft Azure HDInsight, as well as the Enterprise Security Package. また、HDInsight で Hadoop コンポーネントのバージョンを確認する方法についても説明します。Also, learn how to check Hadoop component versions in HDInsight.

HDInsight の各バージョンは、あるバージョンの Hortonworks Data Platform (HDP) のクラウド ディストリビューションです。Each HDInsight version is a cloud distribution of a version of Hortonworks Data Platform (HDP).

HDInsight の各バージョンで使用できる Apache Hadoop コンポーネントApache Hadoop components available with different HDInsight versions

Azure HDInsight は、いつでもデプロイできる Hadoop クラスター バージョンを複数サポートしています。Azure HDInsight supports multiple Hadoop cluster versions that can be deployed at any time. 各バージョンを選択すると、特定のバージョンの HDP ディストリビューションと、そのディストリビューションに含まれるコンポーネントが作成されます。Each version choice creates a specific version of the HDP distribution and a set of components that are contained within that distribution. 2017 年 4 月 4 日現在、Azure HDInsight で使用される既定のクラスター バージョンは、HDP 2.6 を基盤とした 3.6 です。As of April 4, 2017, the default cluster version used by Azure HDInsight is 3.6 and is based on HDP 2.6.

HDInsight クラスター バージョンに対応するコンポーネントのバージョンを、次の表にまとめます。The component versions associated with HDInsight cluster versions are listed in the following table:

注意

HDInsight サービスの既定のバージョンは、予告なく変更される場合があります。The default version for the HDInsight service might change without notice. バージョンの依存関係がある場合は、Azure PowerShell や Azure クラシック CLI を含む .NET SDK を使用してクラスターを作成する際に HDInsight バージョンを指定してください。If you have a version dependency, specify the HDInsight version when you create your clusters with the .NET SDK with Azure PowerShell and Azure Classic CLI.

コンポーネントComponent HDInsight 4.0HDInsight 4.0 HDInsight 3.6 (既定値)HDInsight 3.6 (Default) HDInsight 3.5HDInsight 3.5 HDInsight 3.4HDInsight 3.4 HDInsight 3.3HDInsight 3.3 HDInsight 3.2HDInsight 3.2 HDInsight 3.1HDInsight 3.1 HDInsight 3.0HDInsight 3.0
Hortonworks Data PlatformHortonworks Data Platform 3.03.0 2.62.6 2.52.5 2.42.4 2.32.3 2.22.2 2.1.72.1.7 2.02.0
Apache Hadoop と YARNApache Hadoop and YARN 3.1.13.1.1 2.7.32.7.3 2.7.32.7.3 2.7.12.7.1 2.7.12.7.1 2.6.02.6.0 2.4.02.4.0 2.2.02.2.0
Apache TezApache Tez 0.9.10.9.1 0.7.00.7.0 0.7.00.7.0 0.7.00.7.0 0.7.00.7.0 0.5.20.5.2 0.4.00.4.0 -
Apache PigApache Pig 0.16.00.16.0 0.16.00.16.0 0.16.00.16.0 0.15.00.15.0 0.15.00.15.0 0.14.00.14.0 0.12.10.12.1 0.12.00.12.0
Apache Hive と HCatalogApache Hive and HCatalog - 1.2.11.2.1 1.2.11.2.1 1.2.11.2.1 1.2.11.2.1 0.14.00.14.0 0.13.10.13.1 0.12.00.12.0
Apache HiveApache Hive 3.1.03.1.0 2.1.02.1.0 - - - - - -
Apache Tez Hive2Apache Tez Hive2 - 0.8.40.8.4 - - - - - -
Apache RangerApache Ranger 1.1.01.1.0 0.7.00.7.0 0.6.00.6.0 - - - - -
Apache HBaseApache HBase 2.0.12.0.1 1.1.21.1.2 1.1.21.1.2 1.1.21.1.2 1.1.11.1.1 0.98.40.98.4 0.98.00.98.0 -
Apache SqoopApache Sqoop 1.4.71.4.7 1.4.61.4.6 1.4.61.4.6 1.4.61.4.6 1.4.61.4.6 1.4.51.4.5 1.4.41.4.4 1.4.41.4.4
Apache OozieApache Oozie 4.3.14.3.1 4.2.04.2.0 4.2.04.2.0 4.2.04.2.0 4.2.04.2.0 4.1.04.1.0 4.0.04.0.0 4.0.04.0.0
Apache ZookeeperApache Zookeeper 3.4.63.4.6 3.4.63.4.6 3.4.63.4.6 3.4.63.4.6 3.4.63.4.6 3.4.63.4.6 3.4.53.4.5 3.4.53.4.5
Apache StormApache Storm - 1.1.01.1.0 1.0.11.0.1 0.10.00.10.0 0.10.00.10.0 0.9.30.9.3 0.9.10.9.1 -
Apache MahoutApache Mahout - 0.9.0+0.9.0+ 0.9.0+0.9.0+ 0.9.0+0.9.0+ 0.9.0+0.9.0+ 0.9.00.9.0 0.9.00.9.0 -
Apache PhoenixApache Phoenix 55 4.7.04.7.0 4.7.04.7.0 4.4.04.4.0 4.4.04.4.0 4.2.04.2.0 4.0.0.2.1.7.0-21624.0.0.2.1.7.0-2162 -
Apache SparkApache Spark 2.3.22.3.2 2.3.0、2.2.0、2.1.02.3.0, 2.2.0, 2.1.0 1.6.2、2.01.6.2, 2.0 1.6.01.6.0 1.5.21.5.2 1.3.1 (Windows のみ)1.3.1 (Windows only) - -
Apache LivyApache Livy 0.50.5 0.40.4 0.30.3 0.30.3 0.20.2 - - -
Apache KafkaApache Kafka 1.1.11.1.1 1.1、1.0 * (下記の「注」を参照)1.1, 1.0 * (See Note below) 0.10.00.10.0 0.9.00.9.0 - - - -
Apache AmbariApache Ambari 2.7.02.7.0 2.6.02.6.0 2.4.02.4.0 2.2.12.2.1 2.1.02.1.0 - - -
Apache ZeppelinApache Zeppelin 0.8.00.8.0 0.7.00.7.0 - - - - - -
MonoMono 4.2.14.2.1 4.2.14.2.1 4.2.14.2.1 3.2.83.2.8 - - -
Apache スライダーApache Slider - 0.92.00.92.0 - - - - - -

注意

システム パフォーマンスの観点から、Kafka バージョン 0.10 のサポートは 2019 年 3 月に期限切れになりました。Due to system performance considerations, support for Kafka version 0.10 was expired in March 2019.

現在の Hadoop コンポーネントのバージョン情報の確認Check for current Hadoop component version information

HDInsight クラスターのバージョンに関連付けられた Hadoop エコシステム コンポーネントのバージョンは、将来 HDInsight が更新されたときに変更される可能性があります。The Hadoop ecosystem component versions associated with HDInsight cluster versions can change with updates to HDInsight. Hadoop コンポーネントを調べて、どのバージョンがクラスターに使用されているかを確認するには、Ambari REST API を使用します。To check the Hadoop components and to verify which versions are being used for a cluster, use the Ambari REST API. GetComponentInformation コマンドによって、サービス コンポーネントに関する情報を取得します。The GetComponentInformation command retrieves information about service components. 詳細については、Apache Ambari のドキュメント を参照してください。For details, see the Apache Ambari documentation.

重要

Linux は、バージョン 3.4 以降の HDInsight で使用できる唯一のオペレーティング システムです。Linux is the only operating system used on HDInsight version 3.4 or later. 詳細については、Windows での HDInsight の提供終了に関する記事をご覧ください。For more information, see Windows retirement on HDInsight.

リリース ノートRelease notes

HDInsight の最新バージョンに関する追加のリリース ノートは、 HDInsight リリース ノート を参照してください。See HDInsight release notes for additional release notes on the latest versions of HDInsight.

サポートされる HDInsight のバージョンSupported HDInsight versions

次の表は、HDInsight のバージョンの一覧を示しています。The following tables list the versions of HDInsight. 各 HDInsight バージョンに対応する HDP バージョンを製品のリリース日とともにまとめています。The HDP versions that correspond to each HDInsight version are listed along with the product release dates. サポート有効期限と提供終了日も記載されます (これらが既知の場合)。The support expiration and retirement dates are also provided, when they're known.

使用可能なバージョンAvailable versions

次の表は、Azure portal と、PowerShell や .NET SDK などの他のデプロイ方法で使用可能な HDInsight のバージョンをまとめたものです。The following table lists the versions of HDInsight that are available in the Azure portal as well as other deployment methods like PowerShell and .NET SDK.

HDInsight のバージョンHDInsight version HDP のバージョンHDP version VM の OSVM OS リリース日Release date サポート有効期限Support expiration date 提供終了日Retirement date 高可用性High availability Azure Portal での可用性Availability on the Azure portal
HDInsight 4.0HDInsight 4.0 HDP 3.0HDP 3.0 Ubuntu 16.0.4 LTSUbuntu 16.0.4 LTS 2018 年 9 月 24 日September 24, 2018 はいYes はいYes
HDInsight 3.6HDInsight 3.6 HDP 2.6HDP 2.6 Ubuntu 16.0.4 LTSUbuntu 16.0.4 LTS 2017 年 4 月 4 日April 4, 2017 はいYes はいYes

* Spark クラスターの種類についてのみ、HDInsight 3.5 のサポートが延長されました* HDInsight 3.5 support was extended only for Spark cluster types

注意

バージョンのサポートが期限切れになると、Microsoft Azure Portal で使用できなくなります。After support for a version has expired, it might not be available through the Microsoft Azure portal. ただし、クラスター バージョンは、Windows PowerShell New-AzHDInsightCluster コマンドの Version パラメーターと .NET SDK を使用することで、バージョンの提供終了日まで利用できます。However, cluster versions continue to be available using the Version parameter in the Windows PowerShell New-AzHDInsightCluster command and the .NET SDK until the version retirement date.

廃止されたバージョンRetired versions

次の表は、Azure portal で使用できない HDInsight のバージョンをまとめたものです。The following table lists the versions of HDInsight that are not available in the Azure portal.

HDInsight のバージョンHDInsight version HDP のバージョンHDP version VM の OSVM OS リリース日Release date サポート有効期限Support expiration date 提供終了日Retirement date 高可用性High availability Azure Portal での可用性Availability on the Azure portal
HDInsight 3.5HDInsight 3.5
(Spark 以外)(Non-Spark)
HDP 2.5HDP 2.5 Ubuntu 16.0.4 LTSUbuntu 16.0.4 LTS 2016 年 9 月 30 日September 30, 2016 2017 年 9 月 5 日September 5, 2017 2018 年 6 月 28 日June 28, 2018 はいYes いいえ No
HDInsight 3.4HDInsight 3.4 HDP 2.4HDP 2.4 Ubuntu 14.0.4 LTSUbuntu 14.0.4 LTS 2016 年 3 月 29 日March 29, 2016 2016 年 12 月 29 日December 29, 2016 2018 年 1 月 9 日January 9, 2018 はいYes いいえ No
HDInsight 3.3HDInsight 3.3 HDP 2.3HDP 2.3 Windows Server 2012 R2Windows Server 2012 R2 2015 年 12 月 2 日December 2, 2015 2016 年 6 月 27 日June 27, 2016 2018 年 7 月 31日July 31, 2018 はいYes いいえ No
HDInsight 3.3HDInsight 3.3 HDP 2.3HDP 2.3 Ubuntu 14.0.4 LTSUbuntu 14.0.4 LTS 2015 年 12 月 2 日December 2, 2015 2016 年 6 月 27 日June 27, 2016 2017 年 7 月 31 日July 31, 2017 はいYes いいえ No
HDInsight 3.2HDInsight 3.2 HDP 2.2HDP 2.2 Ubuntu 12.04 LTS または Windows Server 2012 R2Ubuntu 12.04 LTS or Windows Server 2012 R2 2015 年 2 月 18 日February 18, 2015 2016 年 3 月 1 日March 1, 2016 2017 年 4 月 1 日April 1, 2017 はいYes いいえ No
HDInsight 3.1HDInsight 3.1 HDP 2.1HDP 2.1 Windows Server 2012 R2Windows Server 2012 R2 2014 年 6 月 24 日June 24, 2014 2015 年 5 月 18 日May 18, 2015 2016 年 6 月 30 日June 30, 2016 はいYes いいえ No
HDInsight 3.0HDInsight 3.0 HDP 2.0HDP 2.0 Windows Server 2012 R2Windows Server 2012 R2 2014 年 2 月 11 日February 11, 2014 2014 年 9 月 17 日September 17, 2014 2015 年 6 月 30 日June 30, 2015 はいYes いいえ No
HDInsight 2.1HDInsight 2.1 HDP 1.3HDP 1.3 Windows Server 2012 R2Windows Server 2012 R2 2013 年 10 月 28 日October 28, 2013 2014 年 5 月 12 日May 12, 2014 2015 年 5 月 31 日May 31, 2015 はいYes いいえ No
HDInsight 1.6HDInsight 1.6 HDP 1.1HDP 1.1 2013 年 10 月 28 日October 28, 2013 2014 年 4 月 26 日April 26, 2014 2015 年 5 月 31 日May 31, 2015 いいえ No いいえ No

注意

ヘッド ノードを 2 つ備えた可用性の高いクラスターは、HDInsight バージョン 2.1 以降では既定でデプロイされています。Highly available clusters with two head nodes are deployed by default for HDInsight version 2.1 and later. HDInsight バージョン 1.6 クラスターでは利用できません。They are not available for HDInsight version 1.6 clusters.

HDInsight 用の Enterprise セキュリティ パッケージEnterprise Security Package for HDInsight

Enterprise セキュリティは、クラスターの作成のワークフローの一部として HDInsight クラスターに追加できるオプションのパッケージです。Enterprise Security is an optional package that you can add on your HDInsight cluster as part of create cluster workflow. Enterprise セキュリティ パッケージでは以下の機能がサポートされます。The Enterprise Security Package supports:

サポートされているクラスターの種類Supported cluster types

現時点では、次のクラスターの種類のみが Enterprise セキュリティ パッケージをサポートしています。Currently, only the following cluster types support the Enterprise Security Package:

  • Hadoop (HDInsight 3.6 のみ)Hadoop (HDInsight 3.6 only)
  • SparkSpark
  • Interactive QueryInteractive Query

Azure Data Lake Storage のサポートSupport for Azure Data Lake Storage

Enterprise セキュリティ パッケージでは、プライマリ ストレージとアドオン ストレージの両方として Azure Data Lake Storage の使用がサポートされます。The Enterprise Security Package supports using Azure Data Lake Storage as both the primary storage and the add-on storage.

料金と SLAPricing and SLA

Enterprise セキュリティ パッケージの価格と SLA について詳しくは、HDInsight の価格に関するページをご覧ください。For information on pricing and SLA for the Enterprise Security Package, see HDInsight pricing.

Windows での HDInsight の提供終了HDInsight Windows retirement

Microsoft Azure HDInsight バージョン 3.3 が Windows 向け HDInsight の最終バージョンでした。Microsoft Azure HDInsight version 3.3 was the last version of HDInsight on Windows. Windows 向けの HDInsight の提供終了日は 2018 年 7 月 31 日です。The retirement date for HDInsight on Windows is July 31, 2018. Windows 向けの HDInsight クラスター バージョン 3.3 以前をお持ちの場合、2018 年 7 月 31 日までに Linux 向けの HDInsight (HDInsight バージョン 3.5 以降) に移行する必要があります。If you have any HDInsight clusters on Windows 3.3 or earlier, you must migrate to HDInsight on Linux (HDInsight version 3.5 or later) before July 31, 2018. Linux OS に移行しても、HDInsight クラスターの作成やサイズ変更の機能を保持できます。Migrating to the Linux OS enables you to retain the ability to create or resize your HDInsight clusters. Windows での HDInsight バージョン 3.3 のサポートは 2016 年 6 月 27 日で有効期限が切れました。Support for HDInsight version 3.3 on Windows expired on June 27, 2016.

HDInsight バージョン 3.4 以降では、Microsoft は Linux OS でのみ HDInsight をリリースしています。Starting with HDInsight version 3.4, Microsoft has released HDInsight only on the Linux OS. その結果、HDInsight 内のコンポーネントの一部は、Linux でのみ使用できます。As a result, some of the components within HDInsight are available for Linux only. これらには、Apache RangerApache Kafka、Interactive Query、Apache Spark、HDInsight の各種アプリケーション、およびプライマリ ファイル システムとしての Azure Data Lake Storage が含まれています。These include Apache Ranger, Apache Kafka, Interactive Query, Apache Spark, HDInsight applications, and Azure Data Lake Storage as the primary file system. HDInsight の今後のリリースは、Linux OS でのみ利用可能です。Future releases of HDInsight are available only on the Linux OS. Windows 向けの HDInsight は今後一切リリースされません。There will be no future releases of HDInsight on Windows.

FAQFAQs

Windows 向けの HDInsight 提供終了のタイムラインはどうなっていますか。What is the timeline for retiring HDInsight on Windows?

Windows 向けの HDInsight の提供終了日は 2018 年 7 月 31 日です。July 31, 2018, is the retirement date for HDInsight on Windows. お客様のリージョンにおいて予定提供終了日が異なる場合は、個別に通知されます。If the planned retirement date is different for your region, you are notified separately.

Windows 向けの HDInsight が提供終了することで、既存のユーザーにはどのような影響がありますか。What is the impact of retiring HDInsight on Windows for existing customers?

Windows 向けの HDInsight が提供終了になった後、Windows 向けの新しい HDInsight クラスターを作成することや、既存の HDInsight のサイズを変更することはできません。After HDInsight on Windows is retired, you can't create a new HDInsight Windows cluster, or resize an existing HDInsight Windows cluster. HDInsight バージョン 3.3 のサポートは 2016 年 6 月 27 日で有効期限が切れました。Support for HDInsight version 3.3 expired on June 27, 2016. したがって、HDInsight 3.3 またはそれ以前のバージョンについては、サポートやバグ修正はありません。Therefore, there is no support or bug fixes for HDInsight 3.3 or earlier versions. HDInsight の今後のリリースは、Linux OS でのみ利用可能です。Future releases of HDInsight are available only on the Linux OS. Windows 向けの HDInsight は今後一切リリースされません。There will be no future releases of HDInsight on Windows.

Windows 向け HDInsight のどのバージョンが影響を受けますか。Which versions of HDInsight on Windows are affected?

Azure HDInsight バージョン 3.3 が Windows 向け HDInsight の最終バージョンです。Azure HDInsight version 3.3 is the last version of HDInsight for Windows. Windows 向け HDInsight が提供終了になる前に、Windows 向けのバージョン 3.3 以前のすべての HDInsight クラスターを Linux 向け HDInsight バージョン 3.5 以降に移行する必要があります。Before HDInsight on Windows is retired, all HDInsight Windows clusters version 3.3 or earlier must be migrated to HDInsight on Linux version 3.5 or later. クラスターを Linux 向け HDInsight に移行しても、新しいクラスターの作成や既存のサイズ変更の機能は保持されます。Migrating your clusters to HDInsight on Linux enables you to retain the ability to create new clusters or resize existing clusters.

何をする必要がありますか?What do I need to do?

2018 年 7 月 31 日までに、Windows 向け HDInsight クラスターをサポート対象の Linux 向け HDInsight クラスターに移行します。Migrate your HDInsight Windows clusters to a supported HDInsight Linux cluster before July 31, 2018. 詳細については、HDInsight の移行のドキュメントをご覧ください。Learn more in the HDInsight migration document. Azure HDInsight のバージョンの詳細については、サポートされているバージョンの一覧をご覧ください。For details about Azure HDInsight versions, see the list of supported versions.

クラスター OS の種類はどこでわかりますか。Where do I find the cluster OS type?

Azure Portal で [HDInsight クラスターの概要] ページに移動し、[要点] の下の [クラスターの種類] を見つけます。In the Azure portal, go to the HDInsight Cluster overview page and locate Cluster type under Essentials. クラスター OS の種類は、そのページに一覧表示されます。The cluster OS types are listed on that page.

2018 年 7 月 31 日までに Linux 向け HDInsight クラスターに移行できません。I can’t migrate to an HDInsight Linux cluster by July 31, 2018. Windows 向けの HDInsight クラスターにはどのような影響がありますか。What is the impact to my HDInsight Windows cluster?

Windows 向けの HDInsight クラスターは現状のまま動作しますが、Windows 向けの新しい HDInsight クラスターを作成することや、Windows 向けの既存の HDInsight のサイズを変更することはできません。The HDInsight Windows cluster runs as-is, but you cannot create a new HDInsight Windows cluster, or resize an existing HDInsight Windows cluster.

クラスターには .NET との依存関係が存在します。My cluster has a .NET dependency. この依存関係は Linux でどのように解決すればいいですか。How do I resolve this dependency on Linux?

Mono プロジェクトを使用して、Linux 向けクラスターの依存関係を解決できます。You can resolve your Linux cluster dependency by using the Mono project. .NET のオープン ソースの実装は、Linux 向けの HDInsight クラスターで利用できます。This open-source implementation of .NET is available for HDInsight Linux clusters. 詳細については、HDInsight の移行のドキュメントをご覧ください。Learn more in the HDInsight migration document.

Windows 向けの HDInsight を初めて使用します。I'm a new customer for HDInsight on Windows. Windows 向けの HDInsight クラスターはどうすれば作成できますか。How can I create an HDInsight Windows cluster?

2017 年 7 月 3 日現在、Windows 向けの新しい HDInsight クラスターを作成できるのは既存の Windows 向けの HDInsight ユーザーのみです。As of July 3, 2017, only existing HDInsight Windows customers can create new HDInsight Windows clusters. 新規ユーザーは、PowerShell または SDK を使用して、Azure Portal で、Windows 向けの HDInsight クラスターを作成することはできません。New customers cannot create an HDInsight Windows cluster in the Azure portal by using PowerShell or the SDK. 新規ユーザーは Linux 向けの HDInsight クラスターを作成することをお勧めします。We recommend that new customers create a Linux HDInsight cluster. 既存のユーザーは、Windows 向けの HDInsight 提供終了日まで Windows 向けの新しい HDInsight クラスターを作成できます。Existing customers can create new HDInsight Windows clusters until the HDInsight on Windows retirement date.

Windows 向け HDInsight から Linux 向け HDInsight への移行に関して、料金に影響はありますか。Is there a pricing impact associated with moving from HDInsight on Windows to HDInsight on Linux?

いいえ、いずれの OS の HDInsight でも料金は同じです。No, the pricing is the same for HDInsight on either OS.

Linux 向けの HDInsight のみを使用することによるユーザーの利点とは何ですか。What are the customer advantages associated with the move to only using HDInsight on Linux?

  • HDInsight サービスを介した、オープン ソースのビッグ データ テクノロジをより迅速に市場に提供Faster time-to-market for open-source big data technologies through the HDInsight service
  • サポートを目的とした大規模なコミュニティとエコシステムA large community and ecosystem for support
  • Hadoop などのビッグ データ テクノロジのオープン ソース コミュニティによる活発な開発を活用する機能Ability to exercise active development by the open-source community for Hadoop and other big data technologies

Linux 向けの HDInsight では、Windows 向け HDInsight での機能を超えるような追加機能が提供されますか。Does HDInsight on Linux provide additional functionality beyond what is available in HDInsight on Windows?

HDInsight バージョン 3.4 以降では、Microsoft は Linux OS でのみ HDInsight をリリースしています。Starting with HDInsight version 3.4, Microsoft has released HDInsight only on the Linux OS. その結果、HDInsight 内のコンポーネントの一部は、Linux でのみ使用できます。As a result, some of the components within HDInsight are available for Linux only. これらには、Apache Ranger、Kafka、Interactive Query、Spark、HDInsight の各種アプリケーション、およびプライマリ ファイル システムとしての Azure Data Lake Storage が含まれています。These include Apache Ranger, Kafka, Interactive Query, Spark, HDInsight applications, and Azure Data Lake Storage as the primary file system.

HDInsight クラスター バージョンのサービス レベル アグリーメントService level agreement for HDInsight cluster versions

サービス レベル アグリーメント (SLA) は、サポート ウィンドウ の条件で定義されます。The service level agreement (SLA) is defined in terms of a support window. サポート ウィンドウとは、HDInsight クラスターのバージョンが Microsoft カスタマー サービス & サポートによってサポートされる期間です。The support window is the period of time that an HDInsight cluster version is supported by Microsoft Customer Service and Support. バージョンの サポート有効期限 が切れている場合、HDInsight クラスターはサポート対象外となります。If the version has a support expiration date that has passed, the HDInsight cluster is outside the support window. サポートされているバージョンの詳細については、サポートされている HDInsight クラスター バージョンの一覧をご覧ください。For more information about supported versions, see the list of supported HDInsight cluster versions. 所定の HDInsight Version X のサポート有効期限は (新しい X+1 バージョンが利用可能になった後)、次の数式で計算した日付のうち、遅い方とされます。The support expiration date for a specified HDInsight version X (after a newer X+1 version is available) is calculated as the later of:

  • 数式 1:HDInsight クラスター バージョン X がリリースされた日に 180 日を加える。Formula 1: Add 180 days to the date when the HDInsight cluster version X was released.
  • 数式 2:HDInsight クラスター バージョン X+1 が Azure portal で使用可能になった日付に 90 日を加える。Formula 2: Add 90 days to the date when the HDInsight cluster version X+1 is made available in Azure portal.

提供終了日 とは、その日を過ぎると HDInsight でクラスター バージョンを作成できなくなる日付です。The retirement date is the date after which the cluster version cannot be created on HDInsight. 2017 年 7 月 31 日以降は、提供終了日より後に HDInsight クラスターのサイズを変更できません。Starting July 31, 2017, you cannot resize an HDInsight cluster after its retirement date.

注意

Windows 向けの HDInsight クラスター (バージョン 2.1、3.0、3.1、3.2、および 3.3 を含む) は Azure ゲスト OS ファミリ 4 で実行されます。この OS は Windows Server 2012 R2 の 64 ビット版を使用します。HDInsight Windows clusters (including versions 2.1, 3.0, 3.1, 3.2 and 3.3) run on Azure Guest OS Family version 4, which uses the 64-bit version of Windows Server 2012 R2. Azure ゲスト OS ファミリ バージョン 4 は、.NET Framework のバージョン 4.0、4.5、4.5.1、および 4.5.2 をサポートします。Azure Guest OS Family version 4 supports the .NET Framework versions 4.0, 4.5, 4.5.1, and 4.5.2.

HDInsight バージョンに対応する Hortonworks リリース ノートHortonworks release notes associated with HDInsight versions

このセクションでは、HDInsight で使用される Hortonworks Data Platform ディストリビューションと Apache コンポーネントのリリース ノートへのリンクを提供します。The section provides links to release notes for the Hortonworks Data Platform distributions and Apache components that are used with HDInsight.

クラスターの既定のノード構成と仮想マシン サイズDefault node configuration and virtual machine sizes for clusters

次の表に、HDInsight クラスターの既定の仮想マシン (VM) サイズを示します。The following tables list the default virtual machine (VM) sizes for HDInsight clusters. このグラフは、HDInsight クラスターをデプロイする PowerShell または Azure CLI スクリプトを作成するときに使用する、VM のサイズを理解する必要があります。This chart is necessary to understand the VM sizes to use when you are creating PowerShell or Azure CLI scripts to deploy HDInsight clusters.

重要

1 つのクラスターに 32 個を超えるワーカー ノードが必要な場合、コア数が 8 個以上で RAM が 14 GB 以上のサイズのヘッド ノードを選択する必要があります。If you need more than 32 worker nodes in a cluster, you must select a head node size with at least 8 cores and 14 GB of RAM.

  • ブラジル南部と西日本を除くすべてのサポートされているリージョン:All supported regions except Brazil South and Japan West:
クラスターの種類Cluster type HadoopHadoop hbaseHBase Interactive QueryInteractive Query StormStorm SparkSpark ML ServerML Server KafkaKafka
ヘッド: 既定の VM サイズHead: default VM size D12 v2D12 v2 D12 v2D12 v2 D13 v2D13 v2 A3A3 D12 v2D12 v2 D12 v2D12 v2 D3v2D3v2
ヘッド: 推奨される VM サイズHead: recommended VM sizes D3 v2D3 v2 D3 v2D3 v2 D13D13 A4 v2A4 v2 D12 v2D12 v2 D12 v2D12 v2 A2M v2A2M v2
D4 v2D4 v2 D4 v2D4 v2 D14D14 A8 v2A8 v2 D13 v2D13 v2 D13 v2D13 v2 D3 v2D3 v2
D12 v2D12 v2 D12 v2D12 v2 E16 v3E16 v3 A2m v2A2m v2 D14 v2D14 v2 D14 v2D14 v2 D4 v2D4 v2
E4 v3E4 v3 E4 v3E4 v3 E32 v3E32 v3 E4 v3E4 v3 E4 v3E4 v3 E4 v3E4 v3 D12 v2D12 v2
worker: 既定の VM サイズWorker: default VM size D4 v2D4 v2 D4 v2D4 v2 D14 v2D14 v2 D3 v2D3 v2 D13 v2D13 v2 D4 v2D4 v2 4 D12v2 (ブローカーあたり 2 S30 ディスク)4 D12v2 with 2 S30 disks per broker
worker: 推奨される VM サイズWorker: recommended VM sizes D3 v2D3 v2 D3 v2D3 v2 D13D13 D3 v2D3 v2 D4 v2D4 v2 D4 v2D4 v2 D13 v2D13 v2
D4 v2D4 v2 D4 v2D4 v2 D14D14 D4 v2D4 v2 D12 v2D12 v2 D12 v2D12 v2 DS12 v2DS12 v2
D12 v2D12 v2 D12 v2D12 v2 E16 v3E16 v3 D12 v2D12 v2 D13 v2D13 v2 D13 v2D13 v2 DS13 v2DS13 v2
E4 v3E4 v3 E4 v3E4 v3 E20 v3E20 v3 E4 v3E4 v3 D14 v2D14 v2 D14 v2D14 v2 E4 v3E4 v3
E32 v3E32 v3 E16 v3E16 v3 E16 v3E16 v3 ES4 v3ES4 v3
E64 v3E64 v3 E20 v3E20 v3 E20 v3E20 v3 E8 v3E8 v3
E32 v3E32 v3 E32 v3E32 v3 ES8 v3ES8 v3
E64 v3E64 v3 E64 v3E64 v3
ZooKeeper: 既定の VM サイズZooKeeper: default VM size A4 v2A4 v2 A4 v2A4 v2 A4 v2A4 v2 A2 v2A2 v2 D3v2D3v2
ZooKeeper: 推奨される VM サイズZooKeeper: recommended VM sizes A4 v2A4 v2 A2 v2A2 v2 A2M v2A2M v2
A8 v2A8 v2 A4 v2A4 v2 D3 v2D3 v2
A2m v2A2m v2 A8 v2A8 v2 E8 v3E8 v3
エッジ: 既定の VM サイズEdge: default VM size D4 v2D4 v2
エッジ: 推奨される VM サイズEdge: recommended VM size D4 v2D4 v2
D12 v2D12 v2
D13 v2D13 v2
D14 v2D14 v2
E16 v3E16 v3
E20 v3E20 v3
E32 v3E32 v3
E64 v3E64 v3
  • ブラジル南部と西日本のみ (v2 サイズはありません):Brazil South and Japan West only (no v2 sizes):

    クラスターの種類Cluster type HadoopHadoop hbaseHBase Interactive QueryInteractive Query StormStorm SparkSpark ML サービスML Services
    ヘッド: 既定の VM サイズHead: default VM size D12D12 D12D12 D13D13 A3A3 D12D12 D12D12
    ヘッド: 推奨される VM サイズHead: recommended VM sizes D3、D3,
    D4、D4,
    D12D12
    D3、D3,
    D4、D4,
    D12D12
    D13、D13,
    D14D14
    A3、A3,
    A4、A4,
    A5A5
    D12、D12,
    D13、D13,
    D14D14
    D12、D12,
    D13、D13,
    D14D14
    worker: 既定の VM サイズWorker: default VM size D4D4 D4D4 D14D14 D3D3 D13D13 D4D4
    worker: 推奨される VM サイズWorker: recommended VM sizes D3、D3,
    D4、D4,
    D12D12
    D3、D3,
    D4、D4,
    D12D12
    D13、D13,
    D14D14
    D3、D3,
    D4、D4,
    D12D12
    D4、D4,
    D12、D12,
    D13、D13,
    D14D14
    D4、D4,
    D12、D12,
    D13、D13,
    D14D14
    ZooKeeper: 既定の VM サイズZooKeeper: default VM size A4 v2A4 v2 A4 v2A4 v2 A4 v2A4 v2 A2 v2A2 v2
    ZooKeeper: 推奨される VM サイズZooKeeper: recommended VM sizes A2、A2,
    A3、A3,
    A4A4
    A2、A2,
    A3、A3,
    A4A4
    エッジ: 既定の VM サイズEdge: default VM sizes D4D4
    エッジ: 推推奨される VM サイズEdge: recommended VM sizes D4、D4,
    D12、D12,
    D13、D13,
    D14D14

注意

  • ヘッドは、Storm クラスター タイプでは Nimbus と呼ばれます。Head is known as Nimbus for the Storm cluster type.
  • Worker は、Storm クラスター タイプでは Supervisor と呼ばれます。Worker is known as Supervisor for the Storm cluster type.
  • Worker は、HBase クラスター タイプでは Region と呼ばれます。Worker is known as Region for the HBase cluster type.

次の手順Next steps