2021 Databricks SQL sürüm notları

Aşağıda, Ocak ile Aralık 2021 arasında Databricks SQL'deki iyileştirmeler ve güncelleştirmeler özetlenmiştir.

15 Aralık 2021, Cumartesi

• Databricks SQL Genel Kullanıma Sunuldu. Bu, verileri, yapay zekayı ve BI iş yüklerini tek bir yerde bir arada sunan ilk lakehouse platformunu sağlamada önemli bir kilometre taşını işaret eder. GA ile, görev açısından kritik iş yükleri için Databricks'ten en yüksek düzeyde kararlılık, destek ve kurumsal hazırlık bekleyebilirsiniz. Daha fazla bilgi edinmek için GA duyuru blogu okuyun.
• Uyarılar artık sorgulardan bağımsız olarak zamanlanır. Yeni bir uyarı oluşturduğunuzda ve sorgu oluşturduğunuzda, uyarı için bir zamanlama da oluşturmanız istenir. Mevcut bir uyarınız varsa, özgün sorgudaki zamanlamayı çoğalttık. Bu değişiklik, hem Sahip Olarak Çalıştır hem de Görüntüleyici Olarak Çalıştır sorguları için uyarılar ayarlamanıza da olanak tanır. Sahip Olarak Çalıştır sorgular, sorgu sahibinin kimlik bilgileriyle belirlenen uyarı zamanlaması üzerinde çalıştırılır. Görüntüleyici Olarak Çalıştır sorgular, uyarı oluşturucusunun kimlik bilgileriyle belirlenen uyarı zamanlaması üzerinde çalıştırılır. Bkz. Databricks SQL uyarıları nedir? ve Sorgu Zamanlama.
• Artık hem SQL düzenleyicisi hem de panolarında parametreleri yeniden sıralayabilirsiniz.
• Isı haritası görselleştirmeleri oluşturma belgeleri genişletildi. Bkz. Isı Haritası seçenekleri.

9 Aralık 2021, Cumartesi

• tablo görselleştirmesi oluşturduğunuzda, artık sütunun yazı tipi rengini statik bir değere veya sütunun alanının değerlerine göre bir değer aralığına ayarlayabilirsiniz. Sabit değer eşik ile karşılaştırılır. Örneğin, değerleri 500000aşan sonuçları renklendirmek için > 500,000yerine > 500000eşiğini oluşturun. Bkz. Sütun renklerini koşullu biçimlendirme.
• Sekmeli SQL düzenleyicisi şema tarayıcısında bulunan simgeler artık tablolar ve görünümler arasında ayrım yapmanızı sağlar.

1 Aralık 2021, Cumartesi

• Artık SQL yapılandırma parametrelerini çalışma alanı düzeyinde uygulayabilirsiniz. Bu parametreler çalışma alanında bulunan tüm mevcut ve yeni SQL uç noktalarına otomatik olarak uygulanır. bkz. SQL parametrelerini yapılandırma.

18 Kasım 2021

• Bir sorgunun geçmişini görüntülediğinizde, artık sorguları çalıştıran hizmet sorumlusu üzerinde filtreleyebilirsiniz. Bkz. Sorgu geçmişini görüntüleme.

• Artık kenar çubuğu kısayolunu kullanarak SQL düzenleyicisini açabilirsiniz. SQL Düzenleyicisini açmak için SQL Düzenleyicisiöğesine tıklayın.
• Veri Bilimi & Mühendislik kümeleri oluşturma izniniz varsa, artık kenar çubuğunda Oluştur'ye tıklayıp SQL Uç Noktası'e tıklayarak bir SQL uç noktası oluşturabilirsiniz.
• Yöneticiler artık sorgunun, panonun veya uyarının sahipliğini kullanıcı arabirimi aracılığıyla farklı bir kullanıcıya aktarabilir. Bkz.
• Sorgunun sahipliğini aktarma
• Eski gösterge panelinin sahipliğini aktarma
• Uyarının sahipliğini aktarma

4 Kasım 2021

• Haritası (Koroplet) görselleştirme görselleştirmede, göstergedeki renkler için en fazla gradyan adım sayısı 11'den 20'ye çıkarıldı. Varsayılan, Min renk ve Max renkdahil olmak üzere 5 gradyan adımıdır.
• Sekmeli SQL düzenleyicisi artık toplu sekme yönetimini destekliyor. Bir sekmeye sağ tıklarsanız, Diğer kişileri kapat seçeneğiniSolkapat , Sağkapat ve Tümkapat seçeneğini görürsünüz. İlk veya son sekmeye sağ tıklarsanız Sol kapat veya sağ Kapat seçeneklerini göremeyeceğinizi unutmayın.

28 Ekim 2021, Cumartesi

• Bir tabloyu Katalog Gezgini'nde görüntülediğinizde, tabloyla etkileşimi basitleştirmek için iki seçeneğiniz vardır:
• Tüm sütunları seçip ilk 1000 satırı döndüren bir sorgu oluşturmak için > Sorgu Oluştur'a tıklayın.
• Konfigürasyon sayfasını açmak ve ilgili sütunları seçmek, ardından bu sütunları kullanarak bazı temel bilgiler sağlayan bir pano ve destekleyici sorgular oluşturmak ve pano düzeyinde parametreler ile diğer özellikleri sergilemek için Oluştur > Hızlı Pano üzerine tıklayın.

19 Ekim 2021, Cumartesi

• Yeni klavye kısayolları artık sekmeli düzenleyicide kullanılabilir:
• Yeni sekmeyi aç:
  • Windows: Cmd+Alt+T
  • Mac: Cmd+Option+T
• Geçerli sekmeyi kapat
  • Windows: Cmd+Alt+W
  • Mac: Cmd+Option+W
• Sorgu iletişim kutusunu aç
  • Windows: Cmd+Alt+O
  • Mac: Cmd+Option+O

23 Eylül 2021, Cumartesi

• Artık mevcut bir panoyu kopyalayarak yeni bir pano oluşturabilirsiniz. Panoda ve tüm yukarı akış sorgularında CAN RUN, CAN EDIT ve CAN MANAGE iznine sahip olduğunuz sürece. Bkz. Eski panoyu kopyalama.
• Artık GROUP BY birden çok Y ekseni sütunu içeren bir görselleştirmede kullanabilirsiniz. Bkz. Dağılım grafiği.
• Artık {{ @@yPercent}} kullanarak normal olmayan yığılmış çubuk grafikteki veri etiketlerini biçimlendirebilirsiniz. Bkz. Çubuk grafiği.
• SAML kimlik doğrulamasını kullanırsanız ve SAML kimlik bilgilerinizin süresi birkaç dakika içinde dolarsa, artık sorgu yürütmeden veya panoyu yenilemeden önce proaktif olarak yeniden oturum açmanız istenir. Bu, sorgu yürütme sırasında süresi dolan bir kimlik bilgisi nedeniyle kesintiyi önlemeye yardımcı olur.

20 Eylül 2021, Cumartesi

• Artık İzinler REST API'sini kullanarak panoların, sorguların ve uyarıların sahipliğini aktarabilirsiniz. Bkz. Sorgu ACL'leri.

16 Eylül 2021, Cumartesi

• Sorgu sonuçlarında, BIGINT sonuçlar artık 9007199254740991'den büyük olduğunda dize olarak serileştirilir. Bu, sorgu sonuçlarında BIGINT sonuçlarının kesilmesi sorununu giderir. Diğer tamsayı sonuçları yine de sayı olarak serileştirilir. Eksen etiketleri ve araç ipuçlarındaki sayı biçimlendirmesi, dize olarak serileştirilmiş BIGINT sonuçlara uygulanmaz. Databricks SQL'deki veri türleri hakkında daha fazla bilgi için bkz. türüBIGINT.

7 Eylül 2021, Cumartesi

Databricks, bir hafta süresince değişiklikleri uygulamaya koyuyor. Çalışma alanınız 7 Eylül'e kadar bu değişiklikler için etkinleştirilmemiş olabilir.

• Databricks SQL artık Genel Önizleme aşamasındadır ve yeni çalışma alanlarındaki tüm kullanıcılar için etkinleştirilmiştir.

• Yöneticiler, Databricks SQL erişim yetkilendirmesini (API'dedatabricks-sql-access) kullanıcılara veya gruplara atayarak Hangi kullanıcıların Databricks SQL erişimine sahip olduğunu yönetebilir. Varsayılan olarak, yeni kullanıcılar bu yetkilendirmeye sahiptir.

Yöneticiler, kullanıcı veya grubu yalnızca Databricks SQL erişimiyle sınırlayabilir ve kullanıcı veya gruptan Çalışma Alanı Erişimi yetkilendirmesini (API'deworkspace-access) kaldırarak Veri Bilimi & Engineering veya Databricks Mozaik AI'ya erişmesini engelleyebilir. Varsayılan olarak, yeni kullanıcılar bu yetkilendirmeye sahiptir.

• Başlangıç Uç Noktası adlı küçük bir klasik SQL uç noktası tüm çalışma alanlarında önceden yapılandırılmıştır, böylece panolar, görselleştirmeler ve sorgular oluşturmaya hemen başlayabilirsiniz. Daha karmaşık iş yüklerini işlemek için boyutunu (gecikme süresini azaltmak için) veya temel küme sayısını (daha fazla eşzamanlı kullanıcıyı işlemek için) kolayca artırabilirsiniz. Maliyetleri yönetmek için başlangıç uç noktası 120 dakika boşta kaldığında sonlandıracak şekilde yapılandırılır.

2 Eylül 2021, Cumartesi

• Panoda CAN EDIT iznine sahip kullanıcılar artık panonun yenileme zamanlamasını ve abonelik listesini yönetebilir. Daha önce CAN MANAGE izni gerekiyordu. Daha fazla bilgi için bkz. Panoyu otomatik olarak yenileme.

• Varsayılan olarak, görselleştirmeler artık döndürülen sonuç sayısına göre dinamik olarak yeniden boyutlandırmaz, ancak sonuç sayısından bağımsız olarak aynı yüksekliği korur. Önceki davranışa geri dönmek ve görselleştirmeyi dinamik olarak yeniden boyutlandırmak üzere yapılandırmak için panodaki görselleştirme ayarlarında Panel yüksekliğini dinamik olarak yeniden boyutlandırın seçeneğini etkinleştirin. Daha fazla bilgi için bkz. Tablo seçenekleri.
• Aynı hesaptaki birden fazla çalışma alanına erişiminiz varsa, Çalışma alanlarını Databricks SQL içinden değiştirebilirsiniz. Azure Databricks çalışma alanınızın sol alt köşesindekiHesap Simgesi'ne tıklayın ve sonra buna geçmek için bir çalışma alanı seçin.

1 Temmuz 2021, Saat 20:00

• Yeni Katalog Gezgini, veritabanları ve tablolardaki izinleri kolayca keşfetmenize ve yönetmenize olanak tanır. Kullanıcılar şema ayrıntılarını görüntüleyebilir, örnek verileri önizleyebilir ve tablo ayrıntılarını ve özelliklerini görebilir. Yöneticiler veri nesnesi sahiplerini görüntüleyebilir ve değiştirebilir ve veri nesnesi sahipleri izinleri verebilir ve iptal edebilir. Ayrıntılar için bkz. Katalog Gezgini nedir?.
• Yatay grafiklerdeki Y eksenleri, tablolardakiyle aynı sıralamayı yansıtacak şekilde güncelleştirildi. Daha önce ters sıralamayı seçtiyseniz, yeni sıralamayı tersine çevirmek için Y ekseni sekmesindeki Ters Sıralama iki durumlu düğmesini kullanabilirsiniz.

23 Haziran 2021

• HIZMET sorumlularıyla SQL uç noktalarını kolayca yapılandırın. Artık genel SQL uç noktaları ayarında hizmet sorumlusu yapılandırmanıza yardımcı olan bir denetim vardır. Bkz. Bir hizmet sorumlusu yapılandırın.
• Geçici görünümler artık desteklenmektedir.

17 Haziran 2021

• Photon, Databricks'in yeni vektörleştirilmiş yürütme altyapısı, yeni oluşturulan SQL uç noktaları (ui ve REST API) için varsayılan olarak açıktır. Foton saydam bir şekilde hız yapar
  • Parquet ve Delta tablolarına yazma işlemleri gerçekleştirir.
  • Birçok SQL sorgusu. Bkz. Sınırlamaları.
• CREATE GROUP, DROP GROUP, ALTER GROUP, SHOW GROUPSve SHOW USERS komutlarıyla kullanıcıları ve grupları kolayca yönetin. Ayrıntılar için bkz. Güvenlik deyimleri ve Deyim Gösterimi.
• Sorgu düzenleyicisi şema tarayıcısı 100'den fazla tablo içeren şemalarda daha hızlı ve hızlıdır. Bu tür şemalarda, şema tarayıcısı tüm sütunları otomatik olarak yüklemez; tablo listesi yine de her zamanki gibi görünür, ancak sütunlar yalnızca bir tabloya tıkladığınızda yüklenir. Bu değişiklik, önerileri göstermek için bu bilgilere bağlı olduğundan sorgu düzenleyicisinde sorgu otomatik tamamlama özelliğini etkiler. Tabloyu genişletip sütunlarını yükleyene kadar bu öneriler kullanılamaz.

3 Haziran 2021

• Yeni etkinleştirilen Azure Databricks çalışma alanlarının yöneticileri artık varsayılan olarak Databricks SQL yetkilendirmesini alır ve artık yönetici konsolunu kullanarak kendilerine Databricks SQL erişim hakkı vermeleri gerekmez.
• Photon artık genel önizleme aşamasındadır ve yeniSQL uç noktaları için varsayılan olarak etkindir.
• Çok kümeli yük dengeleme artık genel önizleme aşamasındadır.
• Artık CAN EDIT iznini kullanarak kuruluşunuzun diğer üyeleriyle panolarda ve sorgularda işbirliğini etkinleştirebilirsiniz. Erişim denetim listelerini görmek içinbakın.

26 Mayıs 2021

• SQL Analytics, Databricks SQL olarak yeniden adlandırılır. Bu değişikliğin müşteriye yönelik aşağıdaki etkileri vardır:

  • Web kullanıcı arabirimindeki referanslar güncelleştirildi.

  • Databricks SQL'e erişim izni verme yetkisi yeniden adlandırıldı:

    • kullanıcı arabirimi: Databricks SQL erişimi (daha önce SQL Analytics erişimi)
    • SCIM API: databricks-sql-access (önceki sql-analytics-access)

    Önceki yetkilendirmeye sahip kullanıcılar, gruplar ve hizmet sorumluları yeni yetkilendirmeye geçirildi.

  • Databricks SQL ile ilgili denetim günlüğü olaylarının etiketleri değişti:

    • Databricks SQL olaylarının ön eki artık databrickssql.
    • changeSqlAnalyticsAcl artık changeDatabricksSqlAcl.

• Pano güncelleştirmeleri

  • Pano dışa aktarma dosya adı, UUID yerine pano adı + zaman damgası olarak güncellendi.
  • Dışarı aktarma kayıtları sınırı 22k'den 64k'ya yükseltildi.

13 Mayıs 2021

• Databricks SQL artık sütun türlerini tahmin etmeye çalışmıyor. Daha önce, xxxx-yy-dd biçimindeki bir sütun, tanımlama kodu olsa bile otomatik olarak tarih olarak işlendi. Artık bu sütun otomatik olarak tarih olarak işlenmez. İsterseniz sorguda bunu belirtmelisiniz. Bu değişiklik, önceki davranışa dayalı bazı görselleştirmelerin artık çalışmamasına neden olabilir. Bu sürümde, önceki davranışa dönmek için >Ayarlar>Geriye Dönük Uyumluluk seçeneğini değiştirebilirsiniz. Gelecek bir sürümde bu özelliği kaldıracağız.

• Sorgu düzenleyicisinde artık bir sorgu ilerleme durumu göstergesi vardır. Durum değişiklikleri artık sürekli güncelleştirilen bir ilerleme çubuğunda görünür.

  

Düzeltilen sorunlar

• SQL düzenleyicisi. SQL düzenleyicisi artık sorgu sekmeleri arasında geçiş yaparken seçili metni ve kaydırma konumunu kalıcı hale gelecek.
• SQL düzenleyicisi. SQL düzenleyicisindeki bir sorguda 'Çalıştır'a tıklarsanız, başka bir sayfaya gider ve sorgu yürütülürken dönerseniz düzenleyici doğru sorgu durumunu görüntüler. Siz başka bir sayfadayken sorgu tamamlanırsa, SORGU sonuçları SQL düzenleyicisi sayfasına geri döndüğünüzde kullanılabilir.
• Artık MySQL 8.0'ı dış meta veri deposu olarak kullanabilirsiniz.
• Delta tablolarındaki DESCRIBE DETAIL komutları artık java.lang.ClassCastException: java.sql.Timestamp cannot be cast to java.time.Instant. ile başarısız olmaz
• INT96 zaman damgalarıyla Parquet dosyalarını okumak artık başarısızlıkla sonuçlanmıyor.
• Bir kullanıcı sorgu üzerinde CAN RUN iznine sahip olduğunda ve sorgu başka bir kullanıcı tarafından oluşturulduysa, sorgu geçmişi sorgunun çalıştırıcısını kullanıcı olarak görüntüler.
• Artık bir grafik işlenirken null değerler yoksayılır ve grafiklerin kullanılabilirliği iyileştirilir. Örneğin, daha önce, bir çubuk grafikteki çubuklar null değerler bulunduğunda çok küçük görünür. Artık eksenler yalnızca null olmayan değerlere göre ayarlanır.