Havuzları yapılandırma

Bu makalede, bir havuz oluşturup düzenlediğinizde kullanılabilen yapılandırma seçenekleri açıklanmaktadır.

Havuzu Yapılandır

Havuz boyutu ve otomatik sonlandırma

Bir havuz oluşturduğunuzda, boyutunu denetlemek için üç parametre ayarlayabilirsiniz: en az boş örnek, en fazla kapasite ve boşta örnek otomatik sonlandırma.

Minimum boş örnek

Havuzun boşta kaldığı minimum örnek sayısı. Bu örneklerin sonlandırılması, Boşta örnek otomatik sonlandırmada belirtilen ayardan bağımsız olarak. Bir küme boşta tüketir Havuzdaki örnekler, Azure Databricks korumak için ek örnekler sağlar En düşük.

Minimum boş örnek yapılandırması

Maksimum kapasite

Havuzun sağlayabildiği en fazla örnek sayısı. Ayarlanırsa, bu değer tüm örnekleri kısıtlar (boşta + kullanılır). Havuzu kullanan bir küme, Otomatik ölçeklendirmesırasında bu sayıdan daha fazla örnek isterse, istek bir hata vererek başarısız olur .

Maksimum kapasite yapılandırması

Bu yapılandırma isteğe bağlıdır. Azure Databricks bir değeri yalnızca aşağıdaki koşullarda ayarlamayı öneririz:

  • Altında kalması gereken bir örnek kotasına sahipsiniz.
  • Bir iş kümesinin başka bir iş kümesini etkileyerek korunmasını istiyorsunuz. Örneğin, örnek kotasının 100 olduğunu ve işleri çalıştırması gereken A ve B takımlarınızın olduğunu varsayalım. İki ekibin 100 kotasını paylaştığı şekilde, en fazla 50 ve havuz 50 B ile A havuzu oluşturabilirsiniz.
  • Büyük maliyetli olmanız gerekir.

Boşta örnek otomatik sonlandırma

Minimum boşta olan örneklerde ayarlanan değerin üzerindeki örneklerin, havuz tarafından sonlandırılmadan önce boşta kalabileceği süre (dakika cinsinden).

Boşta örnek otomatik sonlandırma yapılandırması

Örnek türleri

Bir havuz, yeni kümeler ve kullanımda olan örnekler için kullanıma yönelik olan boş örneklerden oluşur kümeler çalıştırılarak. Bu örneklerin tümü, şu durumlarda seçilen örnek sağlayıcı türündedir. Havuz oluşturuluyor.

Havuzun örnek türü düzenlenemiyor. Eklenen kümeler bir havuza sürücü ve çalışan düğümleri için aynı örnek türünü kullanın. Farklı örnek türlerinin aileleri, bellek kullanımı yoğun veya yoğun işlem yoğunluğu gibi farklı kullanım örneklerine uyum verebilir lerine.

Örnek türleri

Azure Databricks her zaman bir yılın kullanım dışı bırakma bildirimini bir örnek türü için izleme desteği olmadan önce sağlar.

Not

Güvenlik gereksinimleriniz işlem yalıtımıiçeriyorsa, çalışan türü olarak bir Standard_F72s_V2 örneği seçin. Bu örnek türleri, tüm fiziksel ana bilgisayarı kullanan yalıtılmış sanal makineleri temsil eder ve örneğin, ABD Savunma etki düzeyi 5 (IL5) iş yüklerinin desteklenmesi için gereken yalıtım düzeyini sağlar.

Databricks Runtime sürümünü Önyükle

Havuzdaki boşta örneklere yüklenecek bir Databricks Runtime sürümünü seçerek kümeyi başlatabilirsiniz. Bir Kullanıcı havuz tarafından desteklenen bir küme oluştururken bu çalışma zamanını seçerse, bu küme önceden yüklenmiş bir Databricks Runtime sürümü kullanmayan havuz tarafından desteklenen bir kümeden daha hızlı bir şekilde başlatılır.

Bu seçeneğin hiçbiri , küme tarafından kapanmak üzere ayarlandığında Databricks Runtime sürümünün havuzdaki boşta örneklere talep üzerine indirilmesine neden olur. Küme, havuzdaki örnekleri serbest bıraktığında, Databricks Runtime sürümü bu örneklerde önbelleğe alınır. Aynı Databricks Runtime sürümünü kullanan bir sonraki küme oluşturma işlemi bu önbelleğe alma davranışından yararlanabilir, ancak bu durum garanti edilmez.

Önceden yüklenen çalışma zamanı sürümü

Havuz etiketleri

Havuz etiketleri, kuruluşunuzdaki çeşitli gruplar tarafından kullanılan bulut kaynaklarının maliyetini kolayca izlemenize olanak sağlar. Bir havuz oluştururken etiketleri anahtar-değer çiftleri olarak belirtebilir ve bu etiketleri VM 'Ler ve disk birimleri gibi bulut kaynaklarına uygular Azure Databricks.

Kolaylık sağlaması için Azure Databricks her havuza üç varsayılan etiket uygular: Vendor , DatabricksInstancePoolId, ve DatabricksInstancePoolCreatorId . Ayrıca, bir havuz oluştururken özel etiketler ekleyebilirsiniz. En fazla 41 özel etiket ekleyebilirsiniz.

Özel etiket devralma

Havuz ile desteklenen kümeler, varsayılan ve özel etiketleri havuz yapılandırmasından alırlar. Havuz etiketlerinin ve küme etiketlerinin birlikte nasıl çalıştığı hakkında ayrıntılı bilgi için bkz. küme, havuz ve çalışma alanı etiketlerini kullanarak kullanımı izleme.

Özel havuz etiketlerini yapılandırma

  1. Havuz Yapılandırması sayfasının en altında bulunan Etiketler sekmesini seçin.

  2. Özel etiket için bir anahtar-değer çifti belirtin.

    Etiket anahtar-değer çifti

  3. Ekle'ye tıklayın.

Yerel depolamayı otomatik ölçeklendirme

Genellikle belirli bir işin ne kadar disk alanı olacağını tahmin etmek zor olabilir. Sizi kaydetmek için oluşturma sırasında havuzunuza kaç gigabayt 'tan yönetilen disk İliştirilmek zorunda kalmaktan Azure Databricks, tüm Azure Databricks havuzlarında yerel depolamayı Otomatik ölçeklendirmeye otomatik olarak izin vermez.

Yerel depolama alanını otomatik ölçeklendirmeyle Azure Databricks, sizin için kullanılabilir boş disk alanı miktarını izler. Havuzun örnekleri. Bir örnek diskte çok düşük çalışıyorsa, yeni bir yönetilen disk otomatik olarak eklenir disk alanı tükendiğinden önce. Diskler toplam disk alanı olan 5 TB 'a kadar bir sınıra bağlı sanal makine (sanal makinenin ilk yerel depolama alanı dahil).

Bir sanal makineye bağlı yönetilen diskler yalnızca sanal makine Azure 'a döndürüldü. Diğer bir deyişle, yönetilen diskler, olduğu sürece bir sanal makineden hiçbir zaman ayrılmamış havuzun bir parçası.

Spot örnekleri

Maliyeti kaydetmek için, tüm nokta radyo düğmesini işaretleyerek spot örnekleri kullanmayı seçebilirsiniz.

Spot örnek Azure

Havuzdaki kümeler tüm düğümler, sürücü ve çalışan için spot örneklerle başlatılır (havuz olmayan kümeler için karma isteğe bağlı sürücü ve spot örnek çalışanları yerine).

Spot örneklerin olmaması nedeniyle çıkarılırsa, isteğe bağlı örnekler çıkarılan örnekleri değiştirmez.