Aracılığıyla paylaş


Azure portalı ile AKS üzerinde HDInsight'ta Apache Flink® kümesi oluşturma

Önemli

Bu özellik şu anda önizlemededir. Microsoft Azure Önizlemeleri için Ek Kullanım Koşulları, beta, önizleme aşamasında olan veya henüz genel kullanıma sunulmamış Azure özellikleri için geçerli olan daha fazla yasal hüküm içerir. Bu belirli önizleme hakkında bilgi için bkz . AKS üzerinde Azure HDInsight önizleme bilgileri. Sorular veya özellik önerileri için lütfen AskHDInsight'ta ayrıntıları içeren bir istek gönderin ve Azure HDInsight Topluluğu hakkında daha fazla güncelleştirme için bizi takip edin.

Azure portalında Apache Flink kümesi oluşturmak için aşağıdaki adımları tamamlayın.

Önkoşullar

Aşağıdaki bölümlerde yer alan önkoşulları tamamlayın:

Önemli

  • Yeni küme havuzunda küme oluşturmak için, kaynak önkoşulunun bir parçası olarak oluşturulan kullanıcı tarafından atanan yönetilen kimliğe AKS agentpool MSI "Yönetilen Kimlik İşleci" rolü atayın. Gerekli izinlere sahip olmanız durumunda, oluşturma sırasında bu adım otomatikleştirilmiştir.
  • AKS aracı havuzu yönetilen kimliği, küme havuzu oluşturma sırasında oluşturulur. AKS aracı havuzu yönetilen kimliğini (küme havuzu adınız)-agentpool ile tanımlayabilirsiniz. Rolü atamak için bu adımları izleyin.

Küme havuzu dağıtımı tamamlandıktan sonra Flink kümeleri oluşturulabilir. Mevcut bir küme havuzunu kullanmaya başlamanız durumunda adımların üzerinden geçmemize izin verin

  1. Azure portalında, AKS'de HDInsight küme havuzları/HDInsight/HDInsight yazın ve küme havuzları sayfasına gitmek için AKS küme havuzlarında Azure HDInsight'ı seçin. AKS küme havuzlarında HDInsight sayfasında, içinde yeni bir Flink kümesi oluşturmak istediğiniz küme havuzunu seçin.

    Azure portalında arama çubuğunu gösteren diyagram.

  2. Belirli bir küme havuzu sayfasında + Yeni küme'ye tıklayın ve aşağıdaki bilgileri sağlayın:

    Özellik Açıklama
    Abonelik Bu alan, Küme Havuzu için kaydedilen Azure aboneliğiyle otomatik olarak doldurulur.
    Kaynak Grubu Bu alan otomatik olarak doldurulur ve küme havuzundaki kaynak grubunu gösterir.
    Bölge Bu alan otomatik olarak doldurulur ve küme havuzunda seçilen bölgeyi gösterir.
    Küme Havuzu Bu alan otomatik olarak doldurulur ve kümenin oluşturulduğu küme havuzu adını gösterir. Farklı bir havuzda küme oluşturmak için portalda bu küme havuzunu bulun ve + Yeni küme'ye tıklayın.
    AKS Havuzu Sürümünde HDInsight Bu alan otomatik olarak doldurulur ve kümenin oluşturulduğu küme havuzu sürümünü gösterir.
    AKS Sürümünde HDInsight Yeni kümenin AKS'sinde HDInsight'ın ikincil sürümünü veya düzeltme eki sürümünü seçin.
    Küme türü Açılan listedeN Flink'i seçin.
    Küme adı Yeni kümenin adını girin.
    Kullanıcı tarafından atanan yönetilen kimlik Açılan listeden kümeyle kullanılacak yönetilen kimliği seçin. Yönetilen Hizmet Kimliği'nin (MSI) sahibiyseniz ve MSI'nin kümede Yönetilen Kimlik operatörü rolü yoksa, AKS aracı havuzu MSI'den gereken izni atamak için kutunun altındaki bağlantıya tıklayın. MSI zaten doğru izinlere sahipse bağlantı gösterilmez. Bkz. MSI için gereken diğer rol atamaları için önkoşullar.
    Storage account Açılan listeden, Flink kümesiyle ilişkilendirilecek depolama hesabını seçin ve kapsayıcı adını belirtin. Yönetilen kimliğe, küme oluşturma sırasında 'Depolama Blob Veri Sahibi' rolü kullanılarak belirtilen depolama hesabına daha fazla erişim verilir.
    Sanal ağ Kümenin sanal ağı.
    Alt ağ Kümenin sanal alt ağı.
  3. Flink SQL için Hive kataloğunu etkinleştirme.

    Özellik Açıklama
    Hive kataloğunu kullanma Dış Hive meta veri deposu kullanmak için bu seçeneği etkinleştirin.
    Hive için SQL Veritabanı Açılan listeden hive-meta veri deposu tablolarının ekleneceği SQL Veritabanı seçin.
    SQL yöneticisi kullanıcı adı SQL Server yöneticisi kullanıcı adını girin. Bu hesap meta veri deposu tarafından SQL veritabanıyla iletişim kurmak için kullanılır.
    Key Vault Açılan listeden, SQL server yönetici kullanıcı adı için parola içeren bir gizli dizi içeren Key Vault'a tıklayın. Küme oluşturma için kullanılan MSI için anahtar izinleri, gizli izinler ve sertifika izinleri gibi gerekli tüm izinlere sahip bir erişim ilkesi ayarlamanız gerekir. MSI'nin bir Key Vault Yönetici istrator rolüne ihtiyacı var, IAM kullanarak gerekli izinleri ekleyin.
    SQL parola gizli dizisi adı SQL veritabanı parolasının depolandığı Key Vault'tan gizli dizi adını girin.

    Temel sekmeyi gösteren ekran görüntüsü.

    Not

    Varsayılan olarak, Hive kataloğu için Depolama hesabını küme oluşturma sırasında kullanılan depolama hesabı ve kapsayıcıyla aynı şekilde kullanırız.

  4. Devam etmek için İleri: Yapılandırma'ya tıklayın.

  5. Yapılandırma sayfasında aşağıdaki bilgileri sağlayın:

    Özellik Açıklama
    Düğüm boyutu Flink düğümleri için hem baş hem de çalışan düğümleri için kullanılacak düğüm boyutunu seçin.
    Düğüm sayısı Flink kümesi için düğüm sayısını seçin; varsayılan olarak baş düğümler ikidir. Çalışan düğümleri boyutlandırması, Flink için görev yöneticisi yapılandırmalarının belirlenmesine yardımcı olur. İş yöneticisi ve geçmiş sunucusu baş düğümlerdedir.
  6. Hizmet Yapılandırması bölümünde aşağıdaki bilgileri sağlayın:

    Özellik Açıklama
    Görev yöneticisi CPU Tamsayı. Görev yöneticisi CPU'larının boyutunu girin (çekirdek cinsinden).
    MB cinsinden görev yöneticisi belleği Görev yöneticisi bellek boyutunu MB olarak girin. En az 1800 MB.
    İş yöneticisi CPU Tamsayı. İş yöneticisi için CPU sayısını girin (çekirdek olarak).
    MB cinsinden iş yöneticisi belleği Bellek boyutunu MB olarak girin. En az 1800 MB.
    Geçmiş sunucusu CPU'sunu Tamsayı. İş yöneticisi için CPU sayısını girin (çekirdek olarak).
    MB cinsinden geçmiş sunucusu belleği Bellek boyutunu MB olarak girin. En az 1800 MB.

    yapılandırmalar sekmesini gösteren ekran görüntüsü.

    Not

    • Geçmiş sunucusu gerektiğinde etkinleştirilebilir/devre dışı bırakılabilir.
    • Zamanlama tabanlı otomatik ölçeklendirme Flink'te desteklenir. Çalışan düğümlerinin sayısını gerektiği gibi zamanlayabilirsiniz. Örneğin, varsayılan çalışan düğümü sayısı 3 olan bir zamanlama tabanlı otomatik ölçeklendirme etkinleştirilir. Hafta içi 09:00 ILE 20:00 UTC arasında çalışan düğümleri 10 olarak zamanlanır. Günün ilerleyen bölümlerinde varsayılan olarak 3 düğüm (20:00 UTC ile sonraki gün 09:00 UTC arasında) arasında olması gerekir. Hafta sonları 09:00 -20:00 UTC arası çalışan düğümleri 4'tır.
  7. Otomatik Ölçeklendirme ve SSH bölümünde aşağıdakileri güncelleştirin:

    Özellik Açıklama
    Otomatik Ölçeklendirme Seçimden sonra, ölçeklendirme işlemleri için zamanlamayı yapılandırmak üzere zamanlamaya dayalı otomatik ölçeklendirmeyi seçebilirsiniz.
    SSH'yi etkinleştirme Seçimden sonra, Secure Shell kullanarak Flink CLI için erişim noktaları olan gerekli toplam SSH düğümü sayısını seçebilirsiniz. İzin verilen en fazla SSH düğümü sayısı 5'tir.

    Otomatik ölçeklendirme hizmeti yapılandırmasını gösteren ekran görüntüsü.

    Otomatik ölçeklendirme kurallarını gösteren ekran görüntüsü.

  8. Sonraki sayfaya devam etmek için İleri: Tümleştirme düğmesine tıklayın.

  9. Tümleştirme sayfasında aşağıdaki bilgileri sağlayın:

    Özellik Açıklama
    Log Analytics Bu özellik yalnızca küme havuzu ilişkili log analytics çalışma alanına sahipse kullanılabilir ve toplanacak günlükler etkinleştirildikten sonra seçilebilir.
    Azure Prometheus Bu özellik, ölçümleri ve günlükleri Azure İzleyici çalışma alanına göndererek Analizler ve Günlükleri doğrudan kümenizde görüntülemektir.

    tümleştirmeler sekmesini gösteren ekran görüntüsü.

  10. Sonraki sayfaya geçmek için İleri: Etiketler düğmesine tıklayın.

  11. Etiketler sayfasında aşağıdaki bilgileri sağlayın:

    Özellik Açıklama
    Ad isteğe bağlı. Küme kaynaklarınız ile ilişkili tüm kaynakları kolayca tanımlamak için AKS'de HDInsight gibi bir ad girin.
    Değer Bunu boş bırakabilirsiniz.
    Kaynak Seçili tüm kaynaklar'ı seçin.
  12. Devam etmek için İleri: Gözden geçir + oluştur'u seçin.

  13. Gözden geçir ve oluştur sayfasında, sayfanın üst kısmındaki Doğrulama başarılı iletisini bulun ve Oluştur'a tıklayın.

Kümenin oluşturulduğu Dağıtım işlem aşamasında sayfası görüntülenir. Kümenin oluşturulması 5-10 dakika sürer. Küme oluşturulduktan sonra " Dağıtımınız tamamlandı" iletisi görüntülenir. Sayfadan uzaklaşırsanız Geçerli durum için Bildirimlerinizi de kontrol edebilirsiniz.

Not

Apache, Apache Flink, Flink ve ilişkili açık kaynak proje adları Apache Software Foundation'ın (ASF) ticari markalarıdır.