Temmuz 2020

Bu özellikler ve Azure Databricks platformu geliştirmeleri Temmuz 2020'de yayımlandı.

Not

Sürümler hazırlanır. Azure Databricks hesabınız ilk yayın tarihinden sonraki bir haftaya kadar güncelleştirilmeyebilir.

Web terminali (Genel Önizleme)

29 Ağustos 2020: Sürüm 3.25

Web terminali, Vim veya Emacs gibi düzenleyiciler de dahil olmak üzere kabuk komutlarını çalıştırmak için küme üzerinde CAN ATTACH TO iznine sahip kullanıcılar için kullanışlı ve son derece etkileşimli bir yol sağlar. Web terminalinin örnek kullanımları arasında kaynak kullanımını izleme ve Linux paketlerini yükleme sayılabilir.

Ayrıntılar için bkz . Azure Databricks web terminalinde kabuk komutlarını çalıştırma.

Yeni, daha güvenli genel başlangıç betiği çerçevesi (Genel Önizleme)

29 Temmuz - 4 Ağustos 2020: Sürüm 3.25

Yeni genel başlatma betiği çerçevesi, eski genel başlatma betiklerine göre önemli geliştirmeler getirir:

• Init betikleri daha güvenlidir ve oluşturma, görüntüleme ve silme için yönetici izinleri gerektirir.
• Betikle ilgili başlatma hataları günlüğe kaydedilir.
• Birden çok başlatma betiklerinin yürütme sırasını ayarlayabilirsiniz.
• Init betikleri kümeyle ilgili ortam değişkenlerine başvurabilir.
• Init betikleri, yönetici ayarları sayfası veya yeni Genel Başlatma Betikleri REST API'sini kullanarak oluşturulabilir ve yönetilebilir.

Databricks, bu geliştirmelerden yararlanmak için mevcut eski genel başlatma betiklerini yeni çerçeveye geçirmenizi önerir.

Ayrıntılar için bkz . Genel başlatma betiklerini kullanma.

IP erişim listeleri genel kullanıma sunuldu

29 Temmuz - 4 Ağustos 2020: Sürüm 3.25

IP Erişim Listesi API'si genel kullanıma sunuldu.

GA sürümü, değerlerin yeniden adlandırılması list_type olan bir değişiklik içerir:

• WHITELIST - ALLOW
• BLACKLIST - BLOCK

Ip Erişim Listesi API'sini kullanarak Azure Databricks çalışma alanlarınızı, kullanıcıların hizmete yalnızca güvenli çevresi olan mevcut şirket ağları üzerinden bağlanması için yapılandırın. Azure Databricks yöneticileri, izin verme ve engelleme listeleri de dahil olmak üzere onaylı bir IP adresleri kümesi tanımlamak için IP Erişim Listesi API'sini kullanabilir. Web uygulamasına ve REST API'lerine tüm gelen erişim, kullanıcının yetkili bir IP adresinden bağlanmasını gerektirir ve kullanıcılarınız VPN kullanmadığı sürece çalışma alanlarına kafe veya havaalanı gibi bir genel ağdan erişilemeyeceğini garanti eder.

Bu özellik Premium planı gerektirir.

Daha fazla bilgi için bkz . Çalışma alanları için IP erişim listelerini yapılandırma.

Yeni dosya karşıya yükleme iletişim kutusu

29 Temmuz - 4 Ağustos 2020: Sürüm 3.25

Artık küçük tablosal veri dosyalarını (CSV'ler gibi) karşıya yükleyebilir ve not defteri Dosya menüsünden Veri ekle'yi seçerek bunlara bir not defterinden erişebilirsiniz. Oluşturulan kod, verilerin Pandas veya DataFrames'e nasıl yükleneceklerini gösterir. Yönetici, Yönetici Konsolu Gelişmiş sekmesinde bu özelliği devre dışı bırakabilir.

Daha fazla bilgi için bkz . DBFS'de dosyalara göz atma.

SCIM API filtresi ve sıralama iyileştirmeleri

29 Temmuz - 4 Ağustos 2020: Sürüm 3.25

SCIM API'sinde artık şu filtreleme ve sıralama geliştirmeleri yer alır:

• Yönetici kullanıcılar, kullanıcıları active özniteliklerine göre filtreleyebilir.
• Tüm kullanıcılar ve sortOrdersorgu parametrelerini kullanarak sortBy sonuçları sıralayabilir. Sıralama, varsayılan olarak kimliğe göre yapılır.

Azure Kamu bölgeleri eklendi

25 Temmuz 2020, Saat 20:00

Azure Databricks kısa süre önce US Gov Arizona ve US Gov Virginia bölgelerinde ABD kamu kuruluşları ve iş ortakları için kullanıma sunuldu.

Databricks Runtime 7.1 GA

21 Temmuz 2020, Saat 20:00

Databricks Runtime 7.1, Databricks Runtime 7.0 üzerinde aşağıdakiler dahil olmak üzere birçok ek özellik ve geliştirme getirir:

• Google BigQuery bağlayıcısı
• %pip not defteri oturumunda yüklü Python kitaplıklarını yönetme komutları
• Koalas yüklü
• Aşağıdakiler dahil olmak üzere birçok Delta Lake geliştirmesi:
  • Kullanıcı tanımlı işleme meta verilerini ayarlama
  • Geçerli tarafından yazılan son işlemenin sürümünü alma SparkSession
  • İşlem günlüğünü kullanarak Yapılandırılmış Akış tarafından oluşturulan Parquet tablolarını _spark_metadata dönüştürme
  • MERGE INTO performans geliştirmeleri

Ayrıntılar için databricks Runtime 7.1 (desteklenmeyen) sürüm notlarının tamamına bakın.

Databricks Runtime 7.1 ML GA

21 Temmuz 2020, Saat 20:00

Machine Learning için Databricks Runtime 7.1, Databricks Runtime 7.1'in üzerine kurulmuştur ve aşağıdaki yeni özellikleri ve kitaplık değişikliklerini getirir:

• pip ve conda magic komutları varsayılan olarak etkindir
• spark-tensorflow-distributor: 0.1.0
• yastık 7.0.0 -> 7.1.0
• pytorch 1.5.0 -> 1.5.1
• torchvision 0.6.0 -> 0.6.1
• horovod 0.19.1 -> 0.19.5
• mlflow 1.8.0 -> 1.9.1

Ayrıntılar için ml için Databricks Runtime 7.1 (desteklenmeyen) sürüm notlarının tamamına bakın.

Databricks Runtime 7.1 Genomics GA

21 Temmuz 2020, Saat 20:00

Genomiks için Databricks Runtime 7.1, Databricks Runtime 7.1'in üzerine kurulmuştur ve aşağıdaki yeni özellikleri getirir:

• LOCO dönüşümü
• GloWGR çıkış yeniden şekillendirme işlevi
• RNASeq, eşleşmeyen hizalamaları çıkış olarak oluşturur

Databricks Connect 7.1 (Genel Önizleme)

17 Temmuz 2020, Saat 20:00

Databricks Bağlan 7.1 artık genel önizleme aşamasındadır.

IP Erişim Listesi API'si güncelleştirmeleri

15-21 Temmuz 2020: Sürüm 3.24

Aşağıdaki IP Erişim Listesi API'sinin özellikleri değiştirildi:

• updator_user_id - updated_by
• creator_user_id - created_by

Python not defterleri şimdi hücre başına birden çok çıkışı destekliyor

15-21 Temmuz 2020: Sürüm 3.24

Python not defterleri artık hücre başına birden çok çıkışı destekliyor. Bu, bir hücrede istediğiniz sayıda görüntüleme, displayHTML veya yazdırma deyimine sahip olabileceğiniz anlamına gelir. Ham verileri ve çizimi aynı hücrede veya hataya ulaşmadan önce başarılı olan tüm çıkışları görüntüleme özelliğinden yararlanın.

Bu özellik Databricks Runtime 7.1 veya üzerini gerektirir ve Databricks Runtime 7.1'de varsayılan olarak devre dışıdır. ayarını yaparak spark.databricks.workspace.multipleResults.enabled trueetkinleştirin.

Not defteri kodunu ve sonuç hücrelerini yan yana görüntüleme

15-21 Temmuz 2020: Sürüm 3.24

Yeni Yan Yana not defteri görüntüleme seçeneği, kodu ve sonuçları yan yana görüntülemenizi sağlar. Bu görüntüleme seçeneği "Standart" seçeneğine ("Kod" adıyla) ve "Yalnızca Sonuçlar" seçeneğine katılır.

İş zamanlamalarını duraklatma

15-21 Temmuz 2020: Sürüm 3.24

İşler zamanlamalarında artık işleri duraklatma ve sürdürmeyi kolaylaştıran Duraklat ve Duraklat'ı Kaldır düğmeleri vardır. Artık değişiklikleri yaparken ek iş çalıştırmaları başlatmadan bir iş zamanlaması üzerinde değişiklik yapabilirsiniz. Şimdi Çalıştır tarafından tetiklenen geçerli çalıştırmalar veya çalıştırmalar etkilenmez. Ayrıntılar için bkz . bir iş zamanlamasını duraklatma ve sürdürme.

İşler API'si uç noktaları çalışma kimliğini doğrular

15-21 Temmuz 2020: Sürüm 3.24

jobs/runs/cancel ve jobs/runs/output API uç noktaları artık parametresinin run_id geçerli olduğunu doğrular. Geçersiz parametreler için bu API uç noktaları artık 500 kodu yerine HTTP durum kodu 400 döndürmektedir.

Databricks REST API GA'sına yetki vermek için Microsoft Entra Id belirteçleri

15-21 Temmuz 2020: Sürüm 3.24

Çalışma Alanı API'sinde kimlik doğrulaması yapmak için Microsoft Entra ID belirteçlerini kullanmak genel kullanıma sunuldu. Microsoft Entra ID belirteçleri, yeni çalışma alanlarının oluşturulmasını ve kurulumunu otomatikleştirmenizi sağlar. Hizmet sorumluları, Microsoft Entra Id'deki uygulama nesneleridir. İş akışlarını otomatikleştirmek için Azure Databricks çalışma alanlarınızdaki hizmet sorumlularını da kullanabilirsiniz. Ayrıntılar için bkz . Microsoft Entra Id (eski adıYla Azure Active Directory) belirteçleri.

Not defterlerinde SQL'i otomatik olarak biçimlendirme

15-21 Temmuz 2020: Sürüm 3.24

Artık sql not defteri hücrelerini bir klavye kısayolundan, komut bağlam menüsünden ve not defteri Düzenle menüsünden biçimlendirebilirsiniz (SQL Hücrelerini Biçimlendir'i Düzenle'yi > seçin). SQL biçimlendirmesi, çok az çabayla kodu okumayı ve korumayı kolaylaştırır. HEM SQL not defterleri hem de %sql hücreler için çalışır.

Maven ve CRAN kitaplıkları için yeniden oluşturulabilir yükleme sırası

1-9 Temmuz 2020: Sürüm 3.23

Azure Databricks artık Maven ve CRAN kitaplıklarını kümeye yüklendikleri sırayla işler.

Belirteç Yönetimi API’si ile kullanıcılarınızın kişisel erişim belirteçlerinin denetleyin (Genel Önizleme)

1-9 Temmuz 2020: Sürüm 3.23

Artık Azure Databricks yöneticileri, kullanıcılarının Azure Databricks kişisel erişim belirteçlerini yönetmek için Belirteç Yönetimi API'sini kullanabilir:

• Kullanıcıların kişisel erişim belirteçlerini izleme ve iptal etme.
• Çalışma alanınızda gelecekteki belirteçlerin ömrünü denetleyin.
• Hangi kullanıcıların belirteç oluşturabileceğini ve kullanabileceğini denetleme.

Bkz. Kişisel erişim belirteçlerini izleme ve yönetme.

Kesilen not defteri hücrelerini geri yükleme

1-9 Temmuz 2020: Sürüm 3.23

Artık (Z) klavye kısayolunu kullanarak veya Kesilen Hücreleri Düzenle'yi > seçerek kesilen not defteri hücrelerini geri yükleyebilirsiniz. Bu işlev, silinen hücreleri geri almak için buna benzer.

Yönetici olmayan kullanıcılara iş atama yönetebilir izni

1-9 Temmuz 2020: Sürüm 3.23

Artık, işlerde yönetici olmayan kullanıcıları ve grupları YÖNETİP YÖNETİLEYİn iznine atayabilirsiniz. Bu izin düzeyi, kullanıcıların izinleri atama, sahibi değiştirme ve küme yapılandırmasını değiştirme (örneğin, kitaplık ekleme ve küme belirtimini değiştirme) dahil olmak üzere iş üzerindeki tüm ayarları yönetmesine olanak tanır. Bkz. İşe erişimi denetleme.

Yönetici olmayan Azure Databricks kullanıcıları SCIM API’sinden faydalanarak kullanıcı adına göre görüntüleyebilir ve filtreleyebilir

1-9 Temmuz 2020: Sürüm 3.23

Yönetici olmayan kullanıcılar artık SCIM /Users uç noktasını kullanarak kullanıcı adlarını görüntüleyebilir ve kullanıcıları kullanıcı adına göre filtreleyebilir.

İş çalıştırma ayrıntılarını görüntülediğinizde küme belirtimini görüntüleyecek bağlantı

1-9 Temmuz 2020: Sürüm 3.23

Şimdi bir iş çalıştırmasının ayrıntılarını görüntülediğinizde, küme belirtimini görüntülemek için küme yapılandırma sayfasının bağlantısını tıklatabilirsiniz. Daha önce, URL'den iş kimliğini kopyalamanız ve aramak için küme listesine gitmeniz gerekirdi.