Bagikan melalui

Format Iceberg di Azure Data Factory dan Azure Synapse Analytics

  • Artikel

BERLAKU UNTUK: Azure Data Factory Azure Synapse Analytics

Tip

Cobalah Data Factory di Microsoft Fabric, solusi analitik all-in-one untuk perusahaan. Microsoft Fabric mencakup semuanya mulai dari pergerakan data hingga ilmu data, analitik real time, kecerdasan bisnis, dan pelaporan. Pelajari cara memulai uji coba baru secara gratis!

Ikuti artikel ini saat Anda ingin menulis data ke dalam format Iceberg.

Format Iceberg didukung untuk konektor berikut:

Anda dapat menggunakan himpunan data Iceberg dalam aktivitas Salin.

Properti himpunan data

Untuk daftar lengkap bagian dan properti yang tersedia untuk menentukan himpunan data, lihat artikel Himpunan Data. Bagian ini menyediakan daftar properti yang didukung oleh himpunan data format Iceberg.

Properti Deskripsi Wajib
jenis Properti jenis himpunan data harus diatur ke Iceberg. Ya
lokasi Pengaturan lokasi file. Tiap konektor berbasis file memiliki jenis lokasinya sendiri dan properti yang didukung di location. Ya

Di bawah ini adalah contoh himpunan data Iceberg di Azure Data Lake Storage Gen2:

{
    "name": "IcebergDataset",
    "properties": {
        "type": "Iceberg",
        "linkedServiceName": {
            "referenceName": "<Azure Data Lake Storage Gen2 linked service name>",
            "type": "LinkedServiceReference"
        },
        "schema": [ < physical schema, optional, auto retrieved during authoring >
        ],
        "typeProperties": {
            "location": {
                "type": "AzureBlobFSLocation",
                "fileSystem": "filesystemname",
                "folderPath": "folder/subfolder",
            }
        }
    }
}

Properti aktivitas salin

Untuk daftar lengkap bagian dan properti yang tersedia untuk menentukan aktivitas, lihat artikel Alur. Bagian ini menyediakan daftar properti yang didukung oleh sink Iceberg.

Gunung es sebagai sink

Properti berikut ini didukung di bagian sink aktivitas salin.

Properti Deskripsi Wajib
jenis Properti jenis sumber aktivitas salin harus diatur ke IcebergSink. Ya
formatSettings Grup properti. Lihat tabel pengaturan tulis Iceberg di bawah ini. No
storeSettings Grup properti tentang cara menulis data ke penyimpanan data. Setiap konektor berbasis file memiliki pengaturan tulis tersendiri yang didukung pada storeSettings. No

Pengaturan tulis Iceberg yang didukung di bawah formatSettings:

Properti Deskripsi Wajib
jenis Jenis formatSettings harus diatur ke IcebergWriteSettings. Ya

Berikut adalah beberapa konektor umum dan format yang terkait dengan format teks yang dibatasi:

Konten terkait