Aracılığıyla paylaş


AKS üzerinde Azure HDInsight sürüm notları

Bu makale, AKS sürüm güncelleştirmelerinde en son Azure HDInsight hakkında bilgi sağlar. Önceki sürümler hakkında bilgi için bkz . AKS'de Azure HDInsight arşivlenmiş sürüm notları. Sürüm notlarına abone olmak istiyorsanız bu GitHub deposundaki sürümleri izleyin.

Özet

AKS üzerinde HDInsight, Azure Kubernetes Service (AKS) üzerinde çalışan modern, güvenilir, güvenli ve tam olarak yönetilen bir Hizmet Olarak Platformdur (PaaS). AKS üzerinde HDInsight, kapsayıcıları yönetme ve izleme yükü olmadan Apache Spark™, Apache Flink®️ ve Trino gibi popüler Açık Kaynak Analiz iş yüklerini dağıtmanıza olanak tanır.

Apache Spark ve Trino'nun güçlü sorgu altyapısını kullanarak Apache Flink, veri mühendisliği ve makine öğrenmesi aracılığıyla akışa yayılan uçtan uca, petabayt ölçeğinde Büyük Veri uygulamaları oluşturabilirsiniz.

AKS'nin güçlü geliştirici odağında HDInsight ile birleştirilen tüm bu özellikler, derin teknik uzmanlığa sahip kuruluşların ve dijital yerlilerin ihtiyaçlarına uygun uygulamalar oluşturmasını ve çalıştırmasını sağlar. AKS üzerinde HDInsight, geliştiricilerin açık kaynak yazılım tarafından sağlanan tüm zengin yapılandırmalara ve diğer ekosistem tekliflerini sorunsuz bir şekilde dahil etmek için genişletilebilirlik özelliğine erişmesine olanak tanır. Bu teklif, geliştiricilerin uygulamalarını en iyi maliyetle en iyi performansı elde etmek için test etmelerini ve ayarlamalarını sağlar.

Not

AKS sürüm oluşturma ve desteğinde HDInsight hakkında bilgi edinmek için sürüm oluşturma şemasına bakın.

Bu sürüm için şu anda genel önizleme aşamasında olan özelliklerin tüm ayrıntıları için Yenilikler sayfasına başvurabilirsiniz.

Önemli

AKS üzerinde HDInsight, aşamalı bölge dağıtımı içeren güvenli dağıtım uygulamalarını kullanır. Yeni sürümün veya yeni sürümün tüm bölgelerde kullanılabilir olması 10 iş günü kadar sürebilir.

Sürüm Bilgileri

Sürüm tarihi: 20 Mart 2024

Bu sürüm aşağıdakiler için geçerlidir

  • Küme Havuzu Sürümü: 1.1
  • Küme Sürümü: 1.1.1
  • AKS sürümü: 1.27

Yeni Özellikler

Apache Flink Uygulama Modu Kümesi

Uygulama modu kümeleri, büyük ve uzun süre çalışan işler için ayrılmış kaynakları destekleyecek şekilde tasarlanmıştır. Yoğun kaynak kullanan veya kapsamlı veri işleme görevleriniz varsa, Uygulama Modu Kümesi'ni kullanabilirsiniz. Bu mod, belirli Apache Flink uygulamaları için ayrılmış kaynaklar ayırarak büyük iş yüklerini etkili bir şekilde işlemek için gerekli bilgi işlem gücüne ve belleğe sahip olduklarından emin olmanıza olanak tanır.

Daha fazla bilgi için bkz . AKS üzerinde HDInsight üzerinde Apache Flink Uygulama Modu kümesi.

AKS üzerinde HDInsight için Özel Kümeler

Özel kümeler ve giden küme ayarlarıyla artık AKS küme havuzlarında ve kümelerinde HDInsight'tan giriş ve çıkış trafiğini denetleyebilirsiniz.

  • Yük dengeleyici ile giden küme havuzunu kullanmayı tercih ettiğinizde çıkış trafiğini denetlemek için Azure Güvenlik Duvarı veya Ağ Güvenlik Grupları'nı (NSG) kullanın.
  • Çıkış trafiğini alt ağ düzeyinde denetlemek için Giden küme havuzunu Kullanıcı tanımlı yönlendirme ile kullanın.
  • Özel AKS kümesi özelliğini kullanma - AKS denetim düzlemi veya API sunucusunun iç IP adresleri olduğundan emin olmak için. AKS düğüm havuzlarında (kümeler) AKS Denetim düzlemi / API sunucusu ile HDInsight arasındaki ağ trafiği yalnızca özel ağda kalır.
  • Küme için genel IP'ler oluşturmaktan kaçının. Kümelerinizde özel giriş özelliğini kullanın.

Daha fazla bilgi için bkz . AKS Kümesi havuzlarında ve kümesinde HDInsight'tan gelen ağ trafiğini denetleme.

Yerinde Yükseltme

Kümelerinizi ve küme havuzlarınızı en son yazılım güncelleştirmeleriyle yükseltin. Bu, kümeleri yeniden oluşturmadan en son küme paketi düzeltmelerinin, güvenlik güncelleştirmelerinin ve AKS düzeltme eklerinin keyfini çıkarabileceğiniz anlamına gelir. Daha fazla bilgi için bkz . AKS kümelerinde ve küme havuzlarında HDInsight'ınızı yükseltme.

Önemli

Tüm bu en son özelliklerden yararlanmak için 1.1 ve küme sürümü 1.1.1 ile yeni bir küme havuzu oluşturmanız gerekir.

Bilinen sorunlar

  • İş yükü kimliği sınırlaması:
    • İş yükü kimliğine geçiş yaparken bilinen bir sınırlama vardır. Bu sınırlama, FIC işlemlerinin izne duyarlı yapısından kaynaklanır. Kullanıcılar kaynak grubunu silerek küme silme işlemi gerçekleştiremez. Küme silme istekleri, FIC/silme izinlerine sahip uygulama/kullanıcı/sorumlu tarafından tetiklenmelidir. FIC silme işlemi başarısız olursa üst düzey küme silme işlemi de başarısız olur.
    • Kullanıcı Tarafından Atanan Yönetilen Kimlikler (UAMI) desteği – UAMI başına 20 FIC sınırı vardır. Bir kimlikte yalnızca 20 Federasyon Kimlik Bilgisi oluşturabilirsiniz. AKS kümesindeki HDInsight'ta FIC (Federasyon Kimliği Kimlik Bilgileri) ve SA'nın bire bir eşlemesi vardır ve bir MSI için yalnızca 20 SA oluşturulabilir. Daha fazla küme oluşturmak istiyorsanız, sınırlamayı aşmak için farklı MSI'ler sağlamanız gerekir.
    • Federasyon kimliği kimlik bilgilerinin oluşturulması şu anda bu bölgelerde oluşturulan kullanıcı tarafından atanan yönetilen kimliklerde desteklenmemektedir

İşletim Sistemi sürümü

  • Mariner İşletim Sistemi 2.0

İş yükü sürümleri

İş Yükü Sürüm
Trino 426
Flink 1.17.0
Apache Spark 3.3.1

Desteklenen Java ve Scala sürümleri

İş Yükü Java Scala
Trino JDK 17.0.7'i açın
Flink JDK 11.0.21'i açın 2.12.7
Spark JDK 1.8.0_345'i açın 2.12.15

Önizleme aşağıdaki bölgelerde kullanılabilir.

Başka sorularınız varsa Azure Desteği'ne başvurun veya Destek seçenekleri sayfasına bakın. Ürüne özgü geri bildirimleriniz varsa bize aka.ms/askhdinsight yazın.

Sonraki adımlar