HDInsight kümelerini Apache Ambari Web arabiriminden yönetme

Apache ambarı, bir Apache Hadoop kümesinin yönetimini ve izlenmesini basitleştirir. Bu basitleştirme, Web Kullanıcı arabirimi ve REST API kullanımı kolay bir şekilde yapılır. Ambarı HDInsight kümelerine dahil edilmiştir ve kümeyi izlemek ve yapılandırma değişiklikleri yapmak için kullanılır.

Bu belgede, bir HDInsight kümesiyle ambarı Web Kullanıcı arabirimini kullanmayı öğreneceksiniz.

Apache ambarı nedir?

Apache ambarı , kullanımı kolay bir Web Kullanıcı arabirimi sağlayarak Hadoop yönetimini basitleştirir. Hadoop kümelerini yönetmek ve izlemek için ambarı kullanabilirsiniz. Geliştiriciler, bu özellikleri, AMBARı REST API 'lerinikullanarak uygulamalarıyla tümleştirebilir.

Bağlantı

Ambarı Web Kullanıcı arabirimi, adresindeki HDInsight kümenizde kullanılabilir; https://CLUSTERNAME.azurehdinsight.net burada CLUSTERNAME kümenizin adıdır.

Önemli

HDInsight üzerinde ambarı 'na bağlanmak için HTTPS gerekir. Kimlik doğrulaması istendiğinde, küme oluşturulduğunda verdiğiniz yönetici hesabı adını ve parolasını kullanın. Kimlik bilgileriniz istenmezse, istemci ve Azure HDInsight kümeleri arasında bağlantı sorunu olmadığını doğrulamak için ağ ayarlarınızı denetleyin.

SSH tüneli (proxy)

Kümenizin ambarı doğrudan Internet üzerinden erişilebilir olsa da, ambarı Web kullanıcı arabiriminden (örneğin, JobTracker gibi) bazı bağlantılar Internet 'te gösterilmez. Bu hizmetlere erişmek için bir SSH tüneli oluşturmanız gerekir. Daha fazla bilgi için bkz. HDInsight Ile SSH tüneli kullanma.

Ambarı Web Kullanıcı arabirimi

Uyarı

Tüm ambarı Web Kullanıcı arabiriminin özellikleri HDInsight üzerinde desteklenmez. Daha fazla bilgi için bu belgenin Desteklenmeyen işlemler bölümüne bakın.

Ambarı Web Kullanıcı arabirimine bağlanırken, sayfada kimlik doğrulaması yapmanız istenir. Küme oluşturma sırasında kullandığınız küme Yönetici kullanıcısı (varsayılan yönetici) ve parolayı kullanın.

Sayfa açıldığında, üstteki çubuğun üzerine göz önünde yer. Bu çubuk aşağıdaki bilgileri ve denetimleri içerir:

Apache ambarı panosuna genel bakış

Öğe Açıklama
Ambarı logosu Kümeyi izlemek için kullanılabilecek panoyu açar.
Küme adı # Ops Devam eden ambarı işlemlerinin sayısını görüntüler. Küme adının seçilmesi veya # Ops , arka plan işlemlerinin bir listesini görüntüler.
uyarı sayısı Küme için uyarıları veya kritik uyarıları görüntüler.
Pano Panoyu görüntüler.
Hizmetler Kümedeki hizmetler için bilgi ve yapılandırma ayarları.
Ana bilgisayarlar Kümedeki düğümlerin bilgileri ve yapılandırma ayarları.
Uyarılar Bilgi, uyarı ve kritik uyarıların günlüğü.
Yönetici Kümede yüklü olan yazılım yığını/Hizmetleri, hizmet hesabı bilgileri ve Kerberos güvenliği.
Yönetici düğmesi Ambarı yönetimi, Kullanıcı ayarları ve oturumu kapatma.

İzleme

Uyarılar

Aşağıdaki liste, ambarı tarafından kullanılan ortak uyarı durumlarını içerir:

  • Tamam
  • Uyarı
  • BAŞLATMA
  • BILINMEYEN

Tamam dışındaki uyarılar, uyarı sayısını göstermek için sayfanın en üstündeki # Uyarı girişine neden olur. Bu girdinin belirlenmesi, uyarıları ve bunların durumlarını görüntüler.

Uyarılar, Uyarılar sayfasından görüntülenebilen çeşitli varsayılan gruplar halinde düzenlenir.

Apache ambarı uyarıları Sayfa Özeti

Grupları Eylemler menüsünü kullanarak yönetebilir ve Uyarı gruplarını yönet' i seçebilirsiniz.

Apache ambarı uyarı gruplarını yönetme

Uyarı yöntemlerini yönetebilir ve Bildirimleri Yönet' i seçerek Eylemler menüsünde uyarı bildirimleri oluşturursunuz. Geçerli tüm bildirimler görüntülenir. Buradan bildirim oluşturun. Bildirimler, belirli bir uyarı/önem derecesi oluştuğunda e-posta veya SNMP aracılığıyla gönderilebilir. Örneğin, Yarn varsayılan grubundaki uyarılardan herhangi biri kritik olarak ayarlandığında bir e-posta iletisi gönderebilirsiniz.

Apache ambarı oluşturma uyarı bildirimi

son olarak, eylemler menüsünde uyarı yönetme Ayarlar seçme, bir bildirimin bir bildirim gönderilmeden önce kaç kez oluşması gerektiğini ayarlamanıza olanak sağlar. Bu ayar, geçici hatalara yönelik bildirimleri engellemek için kullanılabilir.

Ücretsiz SendGrid hesabıkullanan bir uyarı bildirimi hakkında öğretici için bkz. Azure HDInsight 'ta Apache ambarı e-posta bildirimlerini yapılandırma.

Küme

Panonun ölçümler sekmesi, kümenizin durumunu bir bakışta izlemeyi kolaylaştıran bir dizi pencere öğesi içerir. CPU kullanımı gibi birkaç pencere öğesi tıklandığında ek bilgi sağlar.

Ölçümlerle Apache ambarı panosu

Heatmaps sekmesi, metrikleri renkli hecekmaps olarak, yeşil 'ten kırmızıya ve kırmızı bir şekilde görüntüler.

Isı haritalarını ile Apache ambarı panosu

Küme içindeki düğümler hakkında daha fazla bilgi için konaklar' ı seçin. Ardından ilgilendiğiniz belirli bir düğümü seçin.

Apache ambarı ana bilgisayar Özeti ayrıntıları

Hizmetler

Panodaki Hizmetler kenar çubuğu, kümede çalışan hizmetlerin durumuyla ilgili hızlı öngörüler sağlar. Yapılması gereken durum veya eylemleri göstermek için çeşitli simgeler kullanılır. Örneğin, bir hizmetin geri dönüştürülmesi gerekiyorsa sarı bir geri dönüşüm simgesi görüntülenir.

Apache ambarı Hizmetleri yan çubuğu

Not

Görünen hizmetler, HDInsight küme türleri ve sürümleri arasında farklılık gösterir. Burada görüntülenecek hizmetler kümeniz için görüntülenecek hizmetlerden farklı olabilir.

Bir hizmetin seçilmesi, hizmet hakkında daha ayrıntılı bilgiler görüntüler.

Apache ambarı hizmeti Özet bilgileri

Bazı hizmetler sayfanın üst kısmında bir hızlı bağlantılar bağlantısı görüntüler. Bu bağlantı, aşağıdaki gibi hizmete özgü Web 'e erişmek için kullanılabilir:

  • iş geçmişi -MapReduce iş geçmişi.
  • Kaynak Yöneticisi -yarn kaynak YÖNETICISI Kullanıcı arabirimi.
  • Süs Code -Hadoop Dağıtılmış dosya sistemi (suo) süs Yot Kullanıcı arabirimi.
  • Oozie Web Kullanıcı arabirimi -OOZIE Kullanıcı arabirimi.

Bu bağlantılardan herhangi birini seçmek, tarayıcınızda seçili sayfayı görüntüleyen yeni bir sekme açar.

Not

Bir hizmetin hızlı bağlantılar girişini seçmek bir "sunucu bulunamadı" hatası döndürebilir. Bu hatayla karşılaşırsanız, bu hizmet için hızlı bağlantılar girişini KULLANıRKEN bir SSH tüneli kullanmanız gerekir. Bilgi için bkz. HDInsight Ile SSH tüneli kullanma

Yönetim

Ambari kullanıcıları, grupları ve izinleri

Kullanıcılar, gruplar ve izinlerle çalışma de desteklene. Yerel yönetim için bkz. Kullanıcıları Apache Ambari Görünümleri için yetkilendirme. Etki alanına katılmış kümeler için bkz. Etki alanına katılmış HDInsight kümelerini yönetme.

Uyarı

Linux tabanlı HDInsight kümeniz üzerinde Ambari watchdog (hdinsightwatchdog) parolasını silmeyin veya değiştirmeyebilirsiniz. Parolayı değiştirmek, betik eylemlerini kullanma veya kümeniz ile ölçeklendirme işlemleri gerçekleştirme becerisini bozar.

Ana bilgisayarlar

Konaklar sayfası, kümede yer alan tüm konakları listeler. Konakları yönetmek için aşağıdaki adımları izleyin.

Apache Ambari konakları sayfasına genel bakış

Not

HdInsight kümeleriyle bir konak ekleme, bu konakları geri alan ve yeniden alan bir konak kullanılmamalı.

  1. Yönetmek istediğiniz ana bilgisayarı seçin.

  2. Yapmak istediğiniz eylemi seçmek için Eylemler menüsünü kullanın:

    Öğe Açıklama
    Tüm bileşenleri başlat Konakta tüm bileşenleri başlat.
    Tüm bileşenleri durdurma Konakta tüm bileşenleri durdurun.
    Tüm bileşenleri yeniden başlatın Konakta tüm bileşenleri durdurun ve başlatabilirsiniz.
    Bakım modunu açma Konak için uyarıları bastırıyor. Uyarı oluşturan eylemler yapıyorsanız bu mod etkinleştirilmelidir. Örneğin, bir hizmeti durdurma ve başlatma.
    Bakım modunu kapatma Ana bilgisayarı normal uyarıya döndürür.
    Durdur Konakta DataNode veya NodeManagers'ı durdurur.
    Başlangıç Konakta DataNode veya NodeManagers'ı başlatır.
    Yeniden başlat Konakta DataNode veya NodeManagers'ı durdurur ve başlatır.
    Decommission Bir konak kümeden kaldırır. HDInsight kümelerde bu eylemi kullanmayın.
    Yeniden kabul Kümeye daha önce alınmış bir konak ekler. HDInsight kümelerde bu eylemi kullanmayın.

Hizmetler

Pano veya Hizmetler sayfasında, tüm hizmetleri durdurmak ve başlatmak için hizmet listesinin altındaki Eylemler düğmesini kullanın.

Apache Ambari hizmet eylemleri listesi.

Uyarı

Küme sağlama sırasında Betik Eylemi kullanılarak yeni hizmetler eklenmeli. Betik Eylemlerini kullanma hakkında daha fazla bilgi için bkz. Betik Eylemleri kullanarak HDInsight kümelerini özelleştirme.

Eylemler düğmesi tüm hizmetleri yeniden başlatarken, genellikle belirli bir hizmeti başlatmak, durdurmak veya yeniden başlatmak istersiniz. Tek bir hizmette eylem yapmak için aşağıdaki adımları kullanın:

  1. Pano veya Hizmetler sayfasından bir hizmet seçin.

  2. Özet sekmesinin üst kısmında Hizmet Eylemleri düğmesini kullanın ve gerçekleştirin eylemi seçin. Bu eylem tüm düğümlerde hizmeti yeniden başlatıyor.

    Apache Ambari tek tek hizmet eylemleri

    Not

    Küme çalışırken bazı hizmetlerin yeniden başlatılması uyarılara neden olabilir. Uyarılardan kaçınmak için, yeniden başlatmayı gerçekleştirmeden önce hizmet için Bakım modunu etkinleştirmek üzere Hizmet Eylemleri düğmesini kullanabilirsiniz.

  3. Bir eylem seçildikten sonra, sayfanın üst kısmında yer alan # op girişi artarak bir arka plan işlemi olduğunu gösterir. Görüntülenecek şekilde yapılandırılmışsa, arka plan işlemlerinin listesi görüntülenir.

    Not

    Hizmet için Bakım modunu etkinleştirdiysek, işlem tamam olduktan sonra Hizmet Eylemleri düğmesini kullanarak devre dışı bırakmayı unutmayın.

Bir hizmeti yapılandırmak için aşağıdaki adımları kullanın:

  1. Pano veya Hizmetler sayfasından bir hizmet seçin.

  2. Yapılandırmalar sekmesini seçin. Geçerli yapılandırma görüntülenir. Önceki yapılandırmaların listesi de görüntülenir.

    Apache Ambari hizmet yapılandırması

  3. Yapılandırmayı değiştirmek için görüntülenen alanları kullanın ve kaydet'i seçin. Veya önceki bir yapılandırmayı seçin ve ardından Önceki ayarlara geri dönmek için Geçerli hale gel'i seçin.

Ambari görünümleri

Ambari Görünümleri, geliştiricilerin Apache Ambari Görünümler Çerçevesi'ni kullanarak Ambari Web kullanıcı arabirimine kullanıcı arabirimi öğeleri takmasına olanak sağlar. HDInsight, Hadoop küme türleriyle aşağıdaki görünümleri sağlar:

  • Hive Görünümü: Hive Görünümü, Hive sorgularını doğrudan web tarayıcınızdan çalıştırmanıza olanak sağlar. Sorguları kaydedebilir, sonuçları indirebilirsiniz, sonuçları küme depolama alanına kaydedebilir veya sonuçları yerel sisteminize indirebilirsiniz. Hive Görünümlerini kullanma hakkında daha fazla bilgi için bkz. HDInsight ile Apache Hive Görünümleri Kullanma.

  • Tez Görünümü: Tez Görünümü, işleri daha iyi anlamanızı ve iyileştirmenizi sağlar. Tez işlerinin nasıl yürütül olduğu ve hangi kaynakların kullanıldıkları hakkında bilgi görüntüebilirsiniz.

Desteklenmeyen işlemler

HDInsight'ta aşağıdaki Ambari işlemleri desteklenmiyor:

  • Ölçüm Toplayıcı hizmetini taşıma. Ölçüm Toplayıcısı hizmetiyle ilgili bilgileri görüntülerken, Hizmet Eylemleri menüsündeki eylemlerden biri Ölçümleri Taşı toplayıcısı'dır. Bu eylem HDInsight ile desteklenmiyor.

Sonraki adımlar