Microsoft Fabric için Data Factory'de Kopyalama işi (önizleme) nedir?
Fabric'teki Data Factory, kullanıcıların görsel olarak sezgisel bir arabirim aracılığıyla 100'den fazla yerleşik bağlayıcıdan (hem kaynaklar hem de hedefler) verileri sorunsuz bir şekilde tümleştirmesini sağlar. Veri işlem hatlarında çalışan Kopyalama etkinliği, veri alımını kolaylaştırır. Bu arada, Veri Akışı 2. Nesil veri dönüştürmelerini destekler ve işlem hatları tümleştirme akışını düzenler.
Kopyalama işinin avantajları
Veri işlem hatlarındaki Kopyalama etkinliği toplu/toplu işlemlerle veri alımını işlerken Data Factory'de veri işlem hatları oluşturmak, daha dik bir öğrenme eğrisi ile alanda yeni olan birçok kullanıcı için zorlayıcı olmaya devam eder. Bu nedenle, veri alımı deneyimini herhangi bir kaynaktan herhangi bir hedefe daha kolay ve kullanıcı dostu bir işleme yükselterek Kopyalama işini tanıtmaktan heyecan duyuyoruz. Artık verilerinizi kopyalamak hiç olmadığı kadar kolay. Ayrıca, Kopyalama işi hem toplu kopyalama hem de artımlı kopyalama dahil olmak üzere çeşitli veri teslim stillerini destekler ve özel gereksinimlerinizi karşılama esnekliği sunar.
Kopyalama işinin diğer veri taşıma yöntemlerine göre bazı avantajları şunlardır:
- Sezgisel Deneyim: Ödün vermeden sorunsuz veri kopyalamayı deneyimleyerek her zamankinden daha kolay hale getirme.
- Verimlilik: El ile müdahaleyi azaltarak artımlı kopyalamayı zahmetsizce etkinleştirin. Bu verimlilik, daha az kaynak kullanımına ve daha hızlı kopyalama sürelerine dönüşür.
- Esneklik: Basitliğin keyfini çıkarırken, veri taşımanızı denetleme esnekliğine de sahip olursunuz. Tek seferlik bir görev veya yinelenen bir işlem için hangi tabloların ve sütunların kopyalanacağına karar verme, verileri eşleme, okuma/yazma davranışı tanımlama ve gereksinimlerinize uygun zamanlamalar ayarlama.
- Sağlam performans: Büyük ölçekli paralellik ile veri aktarımını etkinleştiren ve sisteminiz için veri taşıma aktarım hızını en üst düzeye çıkaran sunucusuz bir kurulum.
Desteklenen bağlayıcılar
Şu anda Bulut veri aktarımı veya ağ geçidi aracılığıyla şirket içi veri deposundan veri kopyalama için Kopyalama işini kullanabilirsiniz. Kopyalama işi, aşağıdaki veri depolarını hem kaynak hem de hedef olarak destekler:
- Azure SQL DB
- Şirket içi SQL Server
- Doku Ambarı
- Fabric Lakehouse
- Amazon S3
- Azure Data Lake Storage Gen2
- Azure Blob Depolama
- SQL Server için Amazon RDS
Ürün ekibi daha fazla bağlayıcı desteği keşfediyor, bu nedenle güncelleştirmeleri izlemeye devam edin.
Kopyalama davranışı
Aşağıdaki veri teslim stilleri arasından seçim yapabilirsiniz.
- Tam kopyalama modu: Her kopyalama işi çalıştırıldığında kaynaktan hedefe aynı anda tüm veriler kopyalanır.
- Artımlı kopyalama modu: İlk iş çalıştırması tüm verileri kopyalar ve sonraki iş çalıştırmaları yalnızca son çalıştırmadan sonraki değişiklikleri kopyalar. Değiştirilen veriler hedef deponuza eklenir.
Verilerin hedef deponuza nasıl yazileceğini de seçebilirsiniz.
Varsayılan olarak, Kopyalama İşi verileri hedefinize ekler , böylece değişiklik geçmişini kaçırmazsınız. Ancak, yazma davranışını upsert veya üzerine yazmak için de ayarlayabilirsiniz.
- Verileri depolama deposuna kopyalarken: Tablolardan veya dosyalardan yeni satırlar hedefteki yeni dosyalara kopyalanır. Hedef depoda aynı ada sahip bir dosya zaten varsa, dosyanın üzerine yazılır.
- Verileri veritabanına kopyalarken: Tablolardan veya dosyalardan yeni satırlar hedef tablolara eklenir. Yazma davranışını upsert (SQL DB veya SQL Server'da) olarak değiştirebilir veya üzerine yazabilirsiniz (Fabric Lakehouse tablolarında).
Artımlı sütun
Artımlı kopyalama modunda, değişiklikleri tanımlamak için her tablo için bir artımlı sütun seçmeniz gerekir. Kopyalama İşi, yalnızca yeni veya güncelleştirilmiş verileri kopyalamak için değerini son çalıştırmadan aynı değerle karşılaştırarak bu sütunu filigran olarak kullanır. Artımlı sütunun bir zaman damgası veya artan bir INT olması gerekir.
Bölgesel kullanılabilirlik
Kopyalama işi, işlem hattıyla aynı bölgesel kullanılabilirliğe sahiptir.
Fiyatlandırma
Kopyalama işi aynı faturalama ölçümlerini kullanır: Aynı tüketim oranına sahip Veri Taşıma.