Componentes e versões Apache disponíveis para Azure HDInsightApache components and versions available for Azure HDInsight

Neste artigo, você aprende sobre os componentes e versões ambientais Apache Hadoop em Azure HDInsight e o Pacote de Segurança Empresarial.In this article, you learn about the Apache Hadoop environment components and versions in Azure HDInsight and the Enterprise Security Package. Também aprende a verificar as versões de componentes Hadoop em HDInsight.You also learn how to check the Hadoop component versions in HDInsight.

Componentes Apache disponíveis com diferentes versões HDInsightApache components available with different HDInsight versions

O Azure HDInsight suporta várias versões de cluster Hadoop que podem ser implementadas a qualquer momento.Azure HDInsight supports multiple Hadoop cluster versions that can be deployed at any time. Em 4 de abril de 2017, a versão padrão do cluster utilizada pelo Azure HDInsight foi de 3.6.On April 4, 2017, the default cluster version used by Azure HDInsight was 3.6.

As versões componentes associadas às versões hdInsight cluster estão listadas na tabela seguinte.The component versions associated with HDInsight cluster versions are listed in the following table.

Nota

A versão predefinitiva do serviço HDInsight pode mudar sem aviso prévio.The default version for the HDInsight service might change without notice. Se tiver uma dependência de versão, especifique a versão HDInsight quando criar os seus clusters com o .NET SDK com o Azure PowerShell e o Clássico CLI do Azure.If you have a version dependency, specify the HDInsight version when you create your clusters with the .NET SDK with Azure PowerShell and the Azure classic CLI.

ComponenteComponent HDInsight 4.0HDInsight 4.0 HDInsight 3.6 (padrão)HDInsight 3.6 (default)
Apache Hadoop e YARNApache Hadoop and YARN 3.1.13.1.1 2.7.32.7.3
Apache TezApache Tez 0.9.10.9.1 0.7.00.7.0
Porco-apacheApache Pig 0.16.10.16.1 0.16.00.16.0
Colmeia ApacheApache Hive 3.1.03.1.0 1.2.1 (2.1.0 sobre consulta interativa ESP)1.2.1 (2.1.0 on ESP Interactive Query)
Colmeia Apache TezApache Tez Hive2 - 0.8.40.8.4
Apache RangerApache Ranger 1.1.01.1.0 0.7.00.7.0
Apache HBaseApache HBase 2.1.62.1.6 1.1.21.1.2
Apache SqoopApache Sqoop 1.4.71.4.7 1.4.61.4.6
Apache OozieApache Oozie 4.3.14.3.1 4.2.04.2.0
Apache ZookeeperApache Zookeeper 3.4.63.4.6 3.4.63.4.6
Apache StormApache Storm - 1.1.01.1.0
Apache MahoutApache Mahout - 0.9.0+0.9.0+
Fénix-apacheApache Phoenix 55 4.7.04.7.0
Apache SparkApache Spark 2.4.42.4.4 2.3.2.2.3.2.
Apache LivyApache Livy 0,50.5 0.4.0.4.
Apache KafkaApache Kafka 2.1.12.1.1 1.11.1
Apache AmbariApache Ambari 2.7.02.7.0 2.6.02.6.0
Apache ZeppelinApache Zeppelin 0.8.00.8.0 0.7.30.7.3
MonoMono 4.2.14.2.1 4.2.14.2.1

Nota

HDInsight 4.0: Spark 2.4 e Kafka 2.1 estão totalmente suportados.HDInsight 4.0: Spark 2.4 and Kafka 2.1 are fully supported. No entanto, os tipos de cluster Spark 2.3 e Kafka 1.1 não são reparados.However, Spark 2.3 and Kafka 1.1 cluster types are not serviced. HDInsight 3.6: Spark 2.3 e Kafka 1.1 estão totalmente suportados.HDInsight 3.6: Spark 2.3 and Kafka 1.1 are fully supported.

Verifique se existem informações sobre a versão do componente ApacheCheck for current Apache component version information

As versões de componentes ambientais Hadoop associadas às versões hdInsight cluster podem mudar com atualizações para HDInsight.The Hadoop environment component versions associated with HDInsight cluster versions can change with updates to HDInsight. Para verificar os componentes hadoop e verificar quais versões estão a ser utilizadas para um cluster, utilize a AMBAri REST API.To check the Hadoop components and to verify which versions are being used for a cluster, use the Ambari REST API. O comando GetComponentInformation recupera informações sobre componentes de serviço.The GetComponentInformation command retrieves information about service components. Para mais informações, consulte a documentação apache Ambari.For more information, see the Apache Ambari documentation.

Notas de versãoRelease notes

Para obter notas de lançamento adicionais sobre as versões mais recentes do HDInsight, consulte as notas de lançamento do HDInsight.For additional release notes on the latest versions of HDInsight, see HDInsight release notes.

Versões HDInsight suportadasSupported HDInsight versions

Suporte expiração e reforma para versões HDInsightSupport expiration and retirement for HDInsight versions

A expiração do suporte significa que a Microsoft já não fornece suporte para a versão HDInsight específica.Support expiration means that Microsoft no longer provides support for the specific HDInsight version. E já não está disponível através do portal Azure para a criação de clusters.And it's no longer available through the Azure portal for cluster creation. Estas versões ainda podem ser criadas utilizando o CLI Azure ou os vários SDKs.These versions can still be created by using the Azure CLI or the various SDKs.

A reforma significa que os aglomerados existentes de uma versão HDInsight continuam a funcionar como está.Retirement means that existing clusters of an HDInsight version continue to run as is. Novos clusters desta versão não podem ser criados através de qualquer meio, que inclui os CLI e SDKs.New clusters of this version can't be created through any means, which includes the CLI and SDKs. Outras características do plano de controlo, como o dimensionamento manual e a autoscalagem, também podem não funcionar após a reforma da versão.Other control plane features, such as manual scaling and autoscaling, also might not work after version retirement. O suporte não está disponível para versões aposentadas.Support isn't available for retired versions.

As tabelas a seguir listam as versões de HDInsight.The following tables list the versions of HDInsight. As datas de validade e aposentadoria também são fornecidas quando são conhecidas.The support expiration and retirement dates are also provided when they're known.

Versões disponíveisAvailable versions

Esta tabela lista as versões de HDInsight que estão disponíveis no portal Azure e através de outros métodos de implementação como PowerShell e o .NET SDK.This table lists the versions of HDInsight that are available in the Azure portal and via other deployment methods like PowerShell and the .NET SDK.

Versão HDInsightHDInsight version SO da VMVM OS Data da versãoRelease date Prazo de validade do suporteSupport expiration date Data da reformaRetirement date Elevada disponibilidadeHigh availability Disponibilidade no portal AzureAvailability in the Azure portal
HDInsight 4.0HDInsight 4.0 Ubuntu 16.0.4 LTSUbuntu 16.0.4 LTS Setembro de 24, 2018September 24, 2018 SimYes SimYes
HDInsight 3.6HDInsight 3.6 Ubuntu 16.0.4 LTSUbuntu 16.0.4 LTS 4 de abril de 2017April 4, 2017 *30 de junho de 2021*June 30, 2021 30 de junho de 2021June 30, 2021 SimYes SimYes

*Estamos a alargar o prazo de suporte para certos tipos de cluster HDInsight 3.6*We are extending the support timeframe for certain HDInsight 3.6 cluster types

Tipo de ClusterCluster Type Versão-quadroFramework version Expiração do suporte atualCurrent support expiration Nova data de validade do suporteNew support expiration date
HDInsight 3.6 HadoopHDInsight 3.6 Hadoop 2.7.32.7.3 Dez 31, 2020Dec 31, 2020 30 de junho de 2021June 30, 2021
HDInsight 3.6 FaíscaHDInsight 3.6 Spark 2.32.3 Dez 31, 2020Dec 31, 2020 30 de junho de 2021June 30, 2021
HDInsight 3.6 FaíscaHDInsight 3.6 Spark 2.22.2 Aposentado em 30 de junho de 2020Retired on June 30, 2020
HDInsight 3.6 FaíscaHDInsight 3.6 Spark 2.12.1 Aposentado em 30 de junho de 2020Retired on June 30, 2020
HDInsight 3.6 KafkaHDInsight 3.6 Kafka 1.11.1 Dez 31, 2020Dec 31, 2020 30 de junho de 2021June 30, 2021
HDInsight 3.6 KafkaHDInsight 3.6 Kafka 1,01.0 Aposentado a 30 de junho de 2020.Retired on June 30, 2020.
HDInsight 3.6 HBaseHDInsight 3.6 HBase 1.11.1 Dez 31, 2020Dec 31, 2020 30 de junho de 2021June 30, 2021
Consulta interativa HDInsight 3.6HDInsight 3.6 Interactive Query 2.12.1 Dez 31, 2020Dec 31, 2020 30 de junho de 2021June 30, 2021
Tempestade HDInsight 3.6HDInsight 3.6 Storm 1.11.1 Dez 31, 2020Dec 31, 2020 30 de junho de 2021June 30, 2021
Serviços HDInsight 3.6 MLHDInsight 3.6 ML Services 9.39.3 Dez 31, 2020Dec 31, 2020 Dez 31, 2020Dec 31, 2020

Nota

Depois de expirado o suporte para uma versão cluster, pode não estar disponível através do portal Azure.After support for a cluster version expires, it might not be available through the Azure portal. Em alguns casos, as versões de cluster continuam disponíveis utilizando o parâmetro versão no comando Windows PowerShell New-AzHDInsightCluster e no .NET SDK até à data de reforma da versão.In some cases, cluster versions continue to be available by using the Version parameter in the Windows PowerShell New-AzHDInsightCluster command and the .NET SDK until the version retirement date.

Versões aposentadasRetired versions

Esta tabela lista as versões de HDInsight que não estão disponíveis no portal Azure.This table lists the versions of HDInsight that aren't available in the Azure portal.

Versão HDInsightHDInsight version Versão HDPHDP version SO da VMVM OS Data da versãoRelease date Prazo de validade do suporteSupport expiration date Data da reformaRetirement date Elevada disponibilidadeHigh availability Disponibilidade no portal AzureAvailability in the Azure portal
HDInsight 3.5HDInsight 3.5 HDP 2.5HDP 2.5 Ubuntu 16.0.4 LTSUbuntu 16.0.4 LTS 30 de setembro de 2016September 30, 2016 5 de setembro de 2017September 5, 2017 28 de junho de 2018June 28, 2018 SimYes NãoNo
HDInsight 3.4HDInsight 3.4 HDP 2.4HDP 2.4 Ubuntu 14.0.4 LTSUbuntu 14.0.4 LTS 29 de março de 2016March 29, 2016 29 de dezembro de 2016December 29, 2016 9 de janeiro de 2018January 9, 2018 SimYes NãoNo
HDInsight 3.3HDInsight 3.3 HDP 2.3HDP 2.3 Windows Server 2012 R2Windows Server 2012 R2 2 de dezembro de 2015December 2, 2015 27 de junho de 2016June 27, 2016 31 de julho de 2018July 31, 2018 SimYes NãoNo
HDInsight 3.3HDInsight 3.3 HDP 2.3HDP 2.3 Ubuntu 14.0.4 LTSUbuntu 14.0.4 LTS 2 de dezembro de 2015December 2, 2015 27 de junho de 2016June 27, 2016 31 de julho de 2017July 31, 2017 SimYes NãoNo
HDInsight 3.2HDInsight 3.2 HDP 2.2HDP 2.2 Ubuntu 12.04 LTS ou Windows Server 2012 R2Ubuntu 12.04 LTS or Windows Server 2012 R2 18 de fevereiro de 2015February 18, 2015 1 de março de 2016March 1, 2016 1 de abril de 2017April 1, 2017 SimYes NãoNo
HDInsight 3.1HDInsight 3.1 HDP 2.1HDP 2.1 Windows Server 2012 R2Windows Server 2012 R2 24 de junho de 2014June 24, 2014 18 de maio de 2015May 18, 2015 30 de junho de 2016June 30, 2016 SimYes NãoNo
HDInsight 3.0HDInsight 3.0 HDP 2.0HDP 2.0 Windows Server 2012 R2Windows Server 2012 R2 11 de fevereiro de 2014February 11, 2014 17 de setembro de 2014September 17, 2014 30 de junho de 2015June 30, 2015 SimYes NãoNo
HDInsight 2.1HDInsight 2.1 HDP 1.3HDP 1.3 Windows Server 2012 R2Windows Server 2012 R2 28 de outubro de 2013October 28, 2013 12 de maio de 2014May 12, 2014 31 de maio de 2015May 31, 2015 SimYes NãoNo
HDInsight 1.6HDInsight 1.6 HDP 1.1HDP 1.1 28 de outubro de 2013October 28, 2013 26 de abril de 2014April 26, 2014 31 de maio de 2015May 31, 2015 NãoNo NãoNo

Nota

Os clusters altamente disponíveis com dois nós de cabeça são implantados por padrão para a versão 2.1 hdInsight e posterior.Highly available clusters with two head nodes are deployed by default for HDInsight version 2.1 and later. Não estão disponíveis para clusters HDInsight versão 1.6.They aren't available for HDInsight version 1.6 clusters.

Acordo de nível de serviço para versões de cluster HDInsightService-level agreement for HDInsight cluster versions

O acordo de nível de serviço é definido como uma janela de suporte.The service-level agreement is defined as a support window. Uma janela de suporte é o período de tempo em que uma versão HDInsight é suportada pelo Microsoft Customer Service and Support.A support window is the time period that an HDInsight version is supported by Microsoft Customer Service and Support. Se a versão tiver passado a data de validade do suporte, o cluster HDInsight fica fora da janela de suporte.If the version has passed the support expiration date, the HDInsight cluster is outside the support window. A expiração de suporte para a versão X HDInsight (depois de uma versão X+1 mais recente estar disponível) é a mais recente de:Support expiration for HDInsight version X (after a newer X+1 version is available) is the later of:

  • Fórmula 1: Adicione 180 dias à data em que a versão X do cluster HDInsight foi lançada.Formula 1: Add 180 days to the date when the HDInsight cluster version X was released.
  • Fórmula 2: Adicione 90 dias à data em que a versão do cluster HDInsight X+1 é disponibilizada no portal Azure.Formula 2: Add 90 days to the date when the HDInsight cluster version X+1 is made available in the Azure portal.

A data de aposentadoria é a data após a qual a versão cluster não pode ser criada no HDInsight.The retirement date is the date after which the cluster version can't be created on HDInsight. A partir de 31 de julho de 2017, não é possível redimensionar um cluster HDInsight após a data da sua reforma.As of July 31, 2017, you can't resize an HDInsight cluster after its retirement date.

Configuração padrão do nó e tamanhos de máquina virtual para clustersDefault node configuration and virtual machine sizes for clusters

Para obter mais informações sobre quais as máquinas virtuais SKUs a selecionar para o seu cluster, consulte os detalhes da configuração do cluster Azure HDInsight.For more information on which virtual machine SKUs to select for your cluster, see Azure HDInsight cluster configuration details.

Passos seguintesNext steps