Aracılığıyla paylaş

Dokuda Apache Spark çalışma zamanlarının yaşam döngüsü

  • Makale

Microsoft Fabric çalışma zamanı, Apache Spark tabanlı Azure ile tümleşik bir platformdur. Veri mühendisliği ve veri bilimi iş akışlarının yürütülmesini ve yönetilmesini kolaylaştırır. Kapsamlı bir çözüm sunmak için hem özel hem de açık kaynak kaynaklarından temel öğeleri sentezler. Kısa olması için Apache Spark tarafından desteklenen Microsoft Fabric Çalışma Zamanı'na Doku Çalışma Zamanı adıyla atıfta bulunuruz.

Sürüm temposu

Apache Spark genellikle 6-9 ayda bir ikincil sürümler yayınlar. Microsoft Fabric Spark ekibi, en yüksek kalite ve tümleştirmenin yanı sıra sürekli destek sağlamanın yanı sıra alacrity ile yeni çalışma zamanı sürümleri sunmaya kararlıdır. Her sürüm yaklaşık 110 bileşenden oluşur. Çalışma zamanı Apache Spark'ın ötesine genişledikçe Azure ekosisteminde sorunsuz tümleştirme sağlarız.

Mükemmellik taahhüdüyle, yeni önizleme çalışma zamanı sürümlerine dikkatle yaklaşarak yaklaşık 3 ay içinde deneysel bir önizlemeyi hedefleyeceğiz, ancak sonunda zaman çizelgelerini büyük/küçük harf temelinde belirliyoruz. Bu, Java, Scala, Python, R ve Delta Lake gibi her Spark sürümünün kritik bileşenlerini değerlendirmeyi içerir. Kapsamlı değerlendirmeden sonra, çalışma zamanının kullanılabilirliğini ve çeşitli aşamalarda ilerleme durumunu gösteren ayrıntılı bir zaman çizelgesi oluştururuz. Genel olarak hedefimiz Apache Spark için Microsoft Fabric çalışma zamanları için standart bir yaşam döngüsü yolu oluşturmaktır.

İpucu

Şu anda Çalışma Zamanı 1.3 olan üretim iş yükünüz için her zaman en son GA çalışma zamanı sürümünü kullanın.

Aşağıdaki tabloda, desteklenen Azure Synapse çalışma zamanı sürümleri için çalışma zamanı adı ve yayın tarihleri listelenmektedir.

Çalışma zamanı adı Yayın aşaması Destek Bitiş Tarihi
Apache Spark 3.5 tabanlı Çalışma Zamanı 1.3 GA 30 Eylül 2026, Cumartesi
Apache Spark 3.4 tabanlı Çalışma Zamanı 1.2 GA 31 Mart 2026 Salı
Apache Spark 3.3 tabanlı Çalışma Zamanı 1.1 EOSA 31 Mart 2025 Pazartesi

Doku'da çalışma zamanının yaşam döngüsünü gösteren diyagram.

Ürün Mühendisliği Grubu'ndan Apache Spark Runtimes in Fabric'in Yaşam Döngüsü hakkında Fabric Espresso Videosunu izleyin

Diyagramda, deneysel genel önizleme sürümünden kullanımdan kaldırılmasına kadar çalışma zamanı sürümünün yaşam döngüsü özetlenmiştir.

Aşama Açıklama Tipik Yaşam Döngüsü
Deneysel genel önizleme Deneysel genel önizleme aşaması, yeni bir çalışma zamanı sürümünün ilk sürümünü işaretler. Bu aşamada, kullanıcılara apache Spark ve Delta Lake'in en son sürümlerini denemeleri ve belgelenmiş sınırlamalar bulunmasına rağmen geri bildirim sağlamaları istenir. Microsoft Azure Önizleme koşulları geçerlidir. Bkz . Kullanım Koşullarını Önizleme. 2-3 ay*
Genel önizleme Daha fazla geliştirme yapıldıktan ve sınırlamalar en aza indikten sonra çalışma zamanı önizleme aşamasına ilerler. Microsoft Azure Önizleme koşulları geçerlidir. Bkz . Kullanım Koşullarını Önizleme. 3 ay*
Genel Kullanılabilirlik (GA) Çalışma zamanı sürümü Genel Kullanılabilirlik (GA) ölçütlerini karşıladıktan sonra genel kullanıma sunulduktan sonra üretim iş yükleri için uygundur. Bu aşamaya ulaşmak için çalışma zamanının performans, platformla tümleştirme, güvenilirlik değerlendirmeleri ve kullanıcıların ihtiyaçlarını karşılama becerisi açısından katı gereksinimleri karşılaması gerekir. 24 ay
Uzun Vadeli Destek (LTS) Genel Kullanılabilirlik (GA) sürümünden sonra, Spark sürümünün belirli gereksinimlerine bağlı olarak bir çalışma zamanı Uzun Süreli Destek (LTS) aşamasına geçebilir. Bu LTS aşaması duyurulabilir ve müşteriler için beklenen destek süresi ayrıntılı olarak açıklanır ve bu genellikle ek bir yıllık tam destektir. 12 ay*
Destek sonu tarihi duyuruldu Bir çalışma zamanı destek sonuna ulaştığında, başka güncelleştirme veya destek almaz. Genellikle, çalışma zamanının kullanımdan kaldırılmasından önce altı aylık bir bildirim verilir. Bu destek sonu tarihi, belirli bir tablo, desteğin sona ermesini işaret eden kullanım süresi sonu tarihiyle güncelleştirilerek belgelenmiştir. Kullanımdan kaldırma gününden 6 ay önce
Destek sonu tarihi. Çalışma Zamanı Desteklenmiyor ve Kullanım Dışı Daha önce duyurulan destek sonu tarihi geldikten sonra çalışma zamanı resmi olarak desteklenmiyor olur. Bu, hiçbir güncelleştirme veya hata düzeltmesi alamayacağı ve ekip tarafından resmi destek sağlanamayacağı anlamına gelir. Tüm destek biletleri otomatik olarak çözülür. Desteklenmeyen bir çalışma zamanı kullanmak kullanıcının kendi riski altındadır. Çalışma zamanı Doku çalışma alanı ayarlarından ve Ortam öğesinden kaldırılarak çalışma alanı düzeyinde kullanılması imkansız hale gelir. Ayrıca, çalışma zamanı da ortamlardan kaldırılır ve desteklenen çalışma zamanı sürümü için yeni bir ortam oluşturma seçeneği yoktur. Mevcut ortamlarda çalışan mevcut Spark İşleri yürütülemez. Yok
Çalışma zamanı kaldırıldı Çalışma zamanı desteklenmeyen aşamaya ulaştığında, bu çalışma zamanını kullanan tüm ortamlar ortadan kalkar. Bu çalışma zamanıyla ilişkili arka uçla ilgili tüm bileşenler de kaldırılır. Destek sonu tarihinden birkaç gün sonra

* Her aşamada beklenen çalışma zamanı süresi. Bu zaman çizelgeleri örnek olarak sağlanır ve çeşitli faktörlere bağlı olarak değişebilir. Yaşam döngüsü zaman çizelgeleri Microsoft'un takdirine bağlı olarak değiştirilebilir.

Sürüm oluşturma

Anlamsal Sürüm Oluşturma ile yakından ilişkili olan çalışma zamanı sürüm numaralandırmamız biraz farklı bir yaklaşım izler. Çalışma zamanı ana sürümü Apache Spark ana sürümüne karşılık gelir. Bu nedenle, Çalışma Zamanı 1 Spark sürüm 3'e karşılık gelir. Benzer şekilde, yaklaşan Çalışma Zamanı 2, Spark 4.0 ile uyumlu olacaktır. Geçerli çalışma zamanları arasında, farklı kitaplıkların eklenmesi veya kaldırılması da dahil olmak üzere değişikliklerin gerçekleşebileceğini unutmayın. Buna ek olarak, platformumuz kullanıcıların istenen kitaplıkları yüklemesini sağlayan bir kitaplık yönetimi özelliği sunar.

İlgili içerik