Dokuda Yansıtma nedir?

Dokuda Yansıtma, çeşitli sistemlerdeki verileri tek bir analiz platformunda bir araya getiren düşük maliyetli ve düşük gecikme süreli bir çözümdür. Çeşitli Azure veritabanlarından ve dış veri kaynaklarından mevcut veri varlığınızı doğrudan Fabric'in OneLake'ine çoğaltabilirsiniz.

OneLake'de sorgulanabilir biçimdeki en güncel verilerle artık Spark ile analiz çalıştırma, not defterlerini yürütme, veri mühendisliği, Power BI Raporları aracılığıyla görselleştirme ve daha fazlası gibi Doku'daki tüm farklı hizmetleri kullanabilirsiniz.

Fabric'te Yansıtma, kullanıcıların analiz ihtiyaçlarınızı basitleştirmek için tasarlanmış yüksek oranda tümleşik, uçtan uca ve kullanımı kolay bir ürünün keyfini çıkarmalarını sağlar. Microsoft ile açık kaynak Delta Lake tablo biçimini okuyabilen teknoloji çözümleri arasında açıklık ve işbirliği için oluşturulan Yansıtma, OneLake'te verilerinizin tüm analiz gereksinimleriniz için kullanılabilen bir çoğaltmasını oluşturmanıza olanak tanıyan düşük maliyetli ve düşük gecikme süresine sahip bir anahtar teslim çözümüdür.

Delta tabloları daha sonra her yerde Fabric ile kullanılabilir ve kullanıcıların Fabric'e geçişlerini hızlandırmalarına olanak tanır.

Kumaşlarda Yansıtma neden kullanılır?

Günümüzde birçok kuruluş silolarda görev açısından kritik operasyonel veya analitik verilere sahiptir.

Bugün bu verilere erişmek ve bu verilerle çalışmak için karmaşık ETL (Dönüştürme Yükünü Ayıkla) işlem hatları, iş süreçleri ve karar silolarının oluşturulması gerekir:

• Önemli, sürekli değişen verilere kısıtlı ve sınırlı erişim
• İnsanlar, süreç ve teknoloji arasındaki sürtüşmeler
• Veri işlem hatları ve işlemler oluşturmak için uzun bekleme süreleri, kritik öneme sahip veriler için önemli bir sorundur.
• İçgörüleri rahatça analiz etmek ve paylaşmak için ihtiyacınız olan araçları kullanma özgürlüğü yoktur
• Veri paylaşmak ve üzerinde işbirliği yapmak için uygun bir temelin olmaması
• Tüm analitik senaryolar için yaygın ve açık veri biçimleri yoktur: BI, AI, Tümleştirme, Mühendislik ve hatta Uygulamalar

Dokuda Yansıtma, içgörüler ve kararlar için değer elde etme süresini hızlandırmak ve teknoloji çözümleri arasındaki veri silolarını bölmek için kolay bir deneyim sağlar:

• BI ve AI için yerleşik analizler içeren verilerin ve meta verilerin SaaS veri gölüne neredeyse gerçek zamanlı çoğaltılması

Microsoft Fabric platformu, basitliği ve tümleştirmeyi yepyeni bir düzeye taşıyan Hizmet Olarak Yazılım (SaaS) temeli üzerine kurulmuştur. Microsoft Fabric hakkında daha fazla bilgi edinmek için bkz . Microsoft Fabric nedir?

Yansıtma, Fabric çalışma alanınızda üç öğe oluşturur.

• Yansıtma, verilerin ve meta verilerin OneLake'e çoğaltılması ve Parquet'e dönüştürülmesi için analize hazır bir biçimde yönetilir. Bu, veri mühendisliği, veri bilimi ve daha fazlası gibi aşağı akış senaryolarına olanak tanır.
• SQL analiz uç noktası
• Varsayılan semantik model

SQL sorgu düzenleyicisine ek olarak, SQL Server Management Studio (SSMS), Visual Studio Code için mssql uzantısı ve hatta GitHub Copilotgibi araçları içeren geniş bir ekosistem vardır.

Paylaşım , hassas bilgilere erişimi denetleyebileceğinizden emin olmak için erişim denetimi ve yönetim kolaylığı sağlar. Paylaşım, kuruluşunuz genelinde güvenli ve demokratik bir karar alma olanağı da sağlar.

Yansıtma türleri

Fabric, aynalama yoluyla verileri OneLake'e getirmek için üç farklı yaklaşım sunar.

• Veritabanı yansıtma – Microsoft Fabric'teki veritabanı yansıtma, tüm veritabanlarının ve tabloların çoğaltılmasına olanak sağlayarak çeşitli sistemlerdeki verileri tek bir analiz platformunda bir araya getirmenizi sağlar.
• Meta veri yansıtma – Dokudaki meta veri yansıtma, verileri fiziksel olarak taşımak yerine meta verileri (katalog adları, şemalar ve tablolar gibi) eşitler. Bu yaklaşım kısayollardan yararlanarak verilerin kaynağında kalmasını sağlarken Doku'da kolayca erişilebilir olmasını sağlar.
• Açık yansıtma – Fabric'teki açık yansıtma, açık Delta Lake tablo formatına dayalı olarak yansıtmayı genişletmek için tasarlanmıştır. Bu özellik, tüm geliştiricilerin açık yansıtma yaklaşımına ve genel API'lere bağlı olarak, uygulama değişiklik verilerini doğrudan Microsoft Fabric'teki yansıtılmış bir veritabanı öğesine yazmasına olanak tanır.

Şu anda aşağıdaki dış veritabanları kullanılabilir:

Veritabanı yansıtma yoluyla neredeyse gerçek zamanlı replikasyon nasıl çalışır?

Yansıtma, işletimsel veri kaynağınıza güvenli bir bağlantı oluşturularak etkinleştirilir. Veritabanının tamamının mı yoksa tek tek tabloların mı çoğaltılacağını seçersiniz ve Yansıtma otomatik olarak verilerinizi eşitlenmiş durumda tutar. Kurulumdan sonra veriler analiz tüketimi için sürekli olarak OneLake'e çoğaltılır.

Yansıtmanın temel tenetleri şunlardır:

• Dokuda Yansıtma'yı etkinleştirmek, karmaşık ETL işlem hatları oluşturmaya, diğer işlem kaynaklarını ayırmaya ve veri taşımayı yönetmeye gerek kalmadan basit ve sezgiseldir.

• Fabric'te yansıtma tam olarak yönetilen bir hizmettir, bu nedenle yansıtılmış bağlantının çoğaltılması için barındırma, bakım veya yönetme konusunda endişelenmeniz gerekmez.

Meta veri yansıtma nasıl çalışır?

Yansıtma yalnızca veri çoğaltmayı etkinleştirmekle kalmaz, aynı zamanda tam veri çoğaltması yerine kısayollar veya meta veri yansıtma yoluyla da elde edilebilir ve verilerin fiziksel olarak taşınmadan veya çoğaltılmadan kullanılabilir olmasını sağlar. Bu bağlamda yansıtma, gerçek verilerin kendisi yerine yalnızca katalog adları, şemalar ve tablolar gibi meta verilerin çoğaltılması anlamına gelir. Bu yaklaşım, Fabric'e farklı kaynaklardan gelen verilere yineleme yapmadan erişim sağlar, veri yönetimini basitleştirir ve depolama gereksinimlerini minimize eder.

Örneğin, Unity Kataloğu'nda kayıtlı verilere erişirken Fabric, Azure Databricks'ten yalnızca katalog yapısını yansıtır ve bu, temel alınan verilere kısayollar aracılığıyla kolayca erişilmesine olanak tanır. Bu yöntem, kaynak verilerdeki tüm değişikliklerin veri taşımaya gerek kalmadan Doku'ya anında yansıtılmasını, gerçek zamanlı eşitlemenin korunmasını ve güncel bilgilere erişimde verimliliğin artırılmasını sağlar.

Açık yansıtma nasıl çalışır?

Veri çoğaltmayı kolaylaştıran yansıtmanın yanı sıra, veri kaynağınıza güvenli bir bağlantı oluşturarak mevcut bir veri sağlayıcısını seçebilir veya verileri yansıtılmış veritabanına aktarmak için kendi uygulamanızı yazabilirsiniz. Genel API aracılığıyla veya Doku portalı aracılığıyla açık yansıtılmış bir veritabanı oluşturduktan sonra, OneLake'te açık yansıtma belirtimi başına değişiklik verilerini alabildiğiniz bir giriş bölgesi URL'si elde edebilirsiniz.

Veriler uygun biçimde iniş bölgesine ulaştığında, çoğaltma çalışmaya başlar ve güncellemeler, eklemeler ve silmelerle yapılan değişikliklerin delta tablolarına yansıtılması için birleştirme karmaşıklığını yönetir. Bu yöntem, giriş alanına yazılan verilerin hemen işlenmesini ve Fabric'de verilerin güncel kalmasını sağlar.

Paylaşma

Paylaşım erişim denetimi ve yönetim kolaylığı sağlarken Satır düzeyi güvenlik (RLS) ve Nesne düzeyi güvenlik (OLS) gibi güvenlik denetimleri ve daha fazlası hassas bilgilere erişimi denetleyebileceğinizden emin olur. Paylaşım, kuruluşunuz genelinde güvenli ve demokratik bir karar alma olanağı da sağlar.

Paylaşım sayesinde kullanıcılar, diğer kullanıcılara veya bir grup kullanıcıya çalışma alanına ve diğer öğelerine erişim vermeden yansıtılmış veritabanına erişim izni verir. Birisi yansıtılmış bir veritabanını paylaştığında, SQL analiz uç noktasına ve ilişkili varsayılan anlam modeline erişim de verir.

Daha fazla bilgi için, Yansıtılmış veritabanınızı paylaşma ve izinleri yönetme bölümüne bakın.

Veritabanları arası sorgular

Yansıtılmış veritabanınızdaki veriler OneLake'de depolandığında, tek bir T-SQL sorgusunda yansıtılmış veritabanlarından, ambarlardan ve Lakehouses'un SQL analiz uç noktalarındaki verileri birleştirerek veritabanları arası sorgular yazabilirsiniz. Daha fazla bilgi için bkz . Veritabanları arası sorgu yazma.

Örneğin, üç bölümlü adlandırma kullanarak yansıtılmış veritabanlarından ve ambarlardan tabloya başvurabilirsiniz. Aşağıdaki örnekte, ambardaki ContosoSalesTable için üç parçalı ismi kullanın ContosoWarehouse. Standart SQL üç bölümlü adlandırma kuralının ilk bölümü, diğer veritabanları veya ambarlardaki yansıtılmış veritabanının adıdır.

SELECT * 
FROM ContosoWarehouse.dbo.ContosoSalesTable AS Contoso
INNER JOIN Affiliation
ON Affiliation.AffiliationId = Contoso.RecordTypeID;

Yansıtma maliyeti

Veritabanı yansıtma ve açık yansıtma için Fabric işlem ve Kapasite tabanlı sınıra kadar OneLake depolama ücretsizdir.

• Çoğaltmalar için depolama, kapasite boyutuna bağlı olarak belirli bir sınıra kadar ücretsizdir. Yansıtma, satın aldığınız her kapasite birimi (CU) için ücretsiz bir terabayt yansıtma depolama alanı sunar. Örneğin, bir F64 kapasitesi satın alırsanız, yalnızca yansıtma için kullanılan 64 terabaytlık ücretsiz depolama alanı elde edersiniz. OneLake depolama alanı, ücretsiz Yansıtma depolama sınırı aşılırsa veya kapasite duraklatıldığında faturalandırılır. Daha fazla bilgi için Microsoft Fabric Fiyatlandırmabölümüne bakın.
• Verilerinizi Fabric OneLake'e çoğaltmak için kullanılan doku işlemi ücretsizdir ve kapasite kullanmaz. Yansıtma işleminin bir parçası olarak OneLake'e yapılan istekler normal OneLake işlem tüketimi olarak kapasite tüketir. SQL, Power BI veya Spark kullanarak verileri sorgulama işlemi normal fiyatlarla ücretlendirilir.

Yansıtılmış veritabanı verilerinizle Veri Madenciliği

Microsoft Fabric, verilerinizin kolayca erişilebilir, iyi düzenlenmiş ve yüksek kaliteli olmasını sağlamak için çeşitli veri mühendisliği özellikleri sağlar. Fabric Veri Mühendisliği şunları yapabilirsiniz:

• Lakehouse kullanarak verilerinizi Spark olarak oluşturma ve yönetme
• Lakehouse'unuza veri aktarmak için veri işleme süreçleri tasarlama
• Spark kümesine toplu iş/akış işi göndermek için Spark iş tanımlarını kullanma
• Veri alımı, hazırlama ve dönüştürme için kod yazmak için not defterlerini kullanma

Yansıtılmış veritabanı verilerinizle Veri Bilimi

Microsoft Fabric, kullanıcıların veri zenginleştirme ve iş içgörüleri amacıyla uçtan uca veri bilimi iş akışlarını tamamlamalarını sağlamak için Doku Veri Bilimi sunar. Veri bilimi sürecinin tamamında veri keşfetme, hazırlama ve temizlemeden denemelere, modellemeye, model puanlama ve tahmine dayalı içgörülerin BI raporlarına sunulmasına kadar çok çeşitli etkinlikleri tamamlayabilirsiniz.

Microsoft Fabric kullanıcıları Veri Bilimi iş yüklerine erişebilir. Buradan, çeşitli ilgili kaynakları bulabilir ve bunlara erişebilirler. Örneğin makine öğrenmesi Denemeleri, Modeller ve Not Defterleri oluşturabilirler. Ayrıca Veri Bilimi Giriş sayfasında mevcut Not Defterlerini içeri aktarabilir.

Fabric'de SQL veritabanı

Ayrıca, Fabric portalı içindeki Microsoft Fabric'te (Önizleme) doğrudan bir SQL veritabanı oluşturabilir ve yönetebilirsiniz. Azure SQL Veritabanı'na dayalı olarak, Doku'daki SQL veritabanı analiz amacıyla otomatik olarak yansıtılır ve Doku'da işlemsel veritabanınızı kolayca oluşturmanıza olanak tanır. SQL veritabanı, OLTP iş yükleri için Doku'nun merkezi olup, Fabric'in kaynak denetimi entegrasyonu ile entegre olabilir.

İlgili içerik

• Microsoft Fabric nedir?
• Microsoft Fabric'te varsayılan Power BI anlam modelinde verileri modelleme
• Göl evi için SQL analiz uç noktası nedir?
• Direct Lake'e genel bakış