Az Azure Data Factory új archívuma
Az Azure Data Factory folyamatosan fejlődik. Ha naprakész szeretne lenni a legújabb fejlesztésekkel kapcsolatban, tekintse meg az aktuális Újdonságok oldalt, amely az alábbiakról nyújt tájékoztatást:
- A legújabb kiadások.
- Ismert problémák.
- Hibajavítások.
- Elavult funkciók.
- Változásokra vonatkozó tervek.
Ez az archív lap megőrzi a régebbi hónapok frissítéseit.
Tekintse meg a What's New videó archívumot az összes havi frissítésünkhöz.
2023. szeptember
Pipelines
A metaadat-alapú folyamatok támogatása a dinamikus teljes és növekményes feldolgozáshoz az Azure SQL-ben További információ
2023. augusztus
Adatváltozások rögzítése
- Azure Synapse Analytics-cél rendelkezésre állása a legfelső szintű CDC-erőforrásban További információ
- Snowflake-összekötő a leképezési Adatfolyam támogatja az adatrögzítés módosítását a nyilvános előzetes verzióban További információ
Adatfolyam
- Folyamatváltozókhoz elérhető egész számtípus További információ
- A snowflake CDC-forrásösszekötő a legfelső szintű CDC-erőforrásban érhető el További információ
- A paraméterezés natív felhasználói felülete további társított szolgáltatásokhoz További információ
Adatáthelyezés
- Felügyelt privát végpontok támogatása az Application Gatewayhez és a rugalmas MySQL-kiszolgálóhoz További információ
- Felügyelt virtuális hálózat élettartamának (TTL) általános rendelkezésre állása További információ
Integrációs modul
A saját üzemeltetésű integrációs modul mostantól támogatja az önálló interaktív szerkesztést (előzetes verzió) További információ
2023. július
Adatváltozások rögzítése
A legfelső szintű CDC-erőforrás mostantól támogatja a sémafejlődést. További információ
Adatfolyam
A sémaegyesítési lehetőség a delta fogadóban mostantól támogatja a sémafejlődést a leképezési Adatfolyam. További információ
Adatáthelyezés
- A folyamat deaktiválással rendelkező részének megjegyzése. További információ
- A folyamat visszatérési értéke általánosan elérhető. További információ
Fejlesztői hatékonyság
A dokumentációs keresés mostantól megtalálható az Azure Data Factory keresési eszköztárában. További információ
2023. június
Folyamatos integráció és folyamatos üzembe helyezés
Az npm-csomag mostantól támogatja az előre letöltött csomagot ARM-sablonok létrehozásához. Ha a tűzfalbeállítás blokkolja az npm-csomag közvetlen letöltését, előre betöltheti a csomagot, és engedélyezheti, hogy az npm-csomag helyi verziót használjon. Ez egy szuper lökést ad a CI/CD-folyamatnak tűzfallal rendelkező környezetben.
Régióbővítés
Az Azure Data Factory már elérhető Svédország középső régiójában. Az ETL-munkafolyamatot ebben az új régióban is megtalálhatja, ha a régiót használja a modern adattárház tárolására és kezelésére. További információ
Adatáthelyezés
Mostantól támogatott a kimenő forgalom védelme az Azure Data Factory kimenő hálózati szabályaival. További információ
Összekötők
Az Amazon S3-összekötő mostantól fogadóhelyként is támogatott a leképezési Adatfolyam használatával. További információ
Adatfolyam
A delimitedText és JSON-források választható forrásbeállításai a legfelső szintű CDC-erőforrásban jelennek meg. A data factory legfelső szintű CDC-erőforrása mostantól támogatja a tagolt és JSON-források opcionális forráskonfigurációit. Most már kiválaszthatja a tagolt források oszlop-/sorhatárolóit, és beállíthatja a JSON-források dokumentumtípusát. További információ
2023. május
Data Factory a Microsoft Fabricben
A Microsoft Fabric Data Factory felhőalapú adatáthelyezési és adatátalakítási szolgáltatásokat biztosít, amelyek lehetővé teszik a legösszetettebb adat-előállítói és ETL-forgatókönyvek megoldását. Célja, hogy az adat-előállítói élmény könnyen használható, hatékony és valóban nagyvállalati szintű legyen.
2023. április
Adatfolyam
Egyszerűen törölhet több tömböt az ADF-adatfolyamokban. Az ADF frissítette a Lapított átalakítást, amely mostantól rendkívül egyszerűvé teszi több tömb regisztrációjának törlését egyetlen simított átalakítási lépésből. További információ
Folyamatos integráció és folyamatos üzembe helyezés
A véglegesítési üzenetet mostantól Git módban is testre szabhatja. Írja be a végrehajtott módosítások részletes leírását, és a Git-adattárba mentjük.
Összekötők
Az Azure Blob Storage-összekötő mostantól támogatja a névtelen hitelesítést. További információ
2023. március
Összekötők
Az Azure Data Lake Storage Gen2-összekötő mostantól támogatja a közös hozzáférésű jogosultságkód-hitelesítést. További információ
február 2023.
Adatáthelyezés
- Az Azure Blob Storage-hoz támogatott névtelen hitelesítési típus További információ
- Frissített SAP-sablon az SAP-adatok ADLSGen2-be való áthelyezéséhez Delta formátumban További információ
Vezénylés
- Folyamat kimeneti értékének beállítása (nyilvános előzetes verzió) További információ
- Workflow Orchestration Manager (nyilvános előzetes verzió) További információ
Fejlesztői hatékonyság
Sötét téma támogatása hozzáadva (nyilvános előzetes verzió) További információ
2023. január
Adatfolyam
- A folyamatok mostantól támogatják a sémaeltolódást További információ
- Az SQL CDC növekményes kivonata mostantól támogatja a numerikus oszlopokat További információ
Adatáthelyezés
Új legfelső szintű CDC-erőforrás – natív CDC-konfiguráció 3 egyszerű lépésben További információ
Vezénylés
Synapse-jegyzetfüzetek és Synapse Spark-feladatdefiníciók natív vezénylése További információ
Régióbővítés
- Folytatódó régióbővítés – Kína északi 3. régiója már támogatott További információ
- Folytatódó régióbővítés – Svájc nyugati régiója már támogatott További információ
Az SQL Server Integration Servicest (SSIS)
Az SSIS-hez készült expressz virtuális hálózati injektálás mostantól általánosan elérhető További információ
Fejlesztői hatékonyság
- Támogatás hozzáadva a kezdőlapon található erőforrások előnyben részesítéséhez
- Oszlopszélesség mentése folyamatfigyeléshez
- Szűrőfrissítések monitorozása a gyorsabb keresés érdekében
- Folyamatsablon-katalógus közvetlen indítása az Azure Portalon
2022. december
Adatfolyam
SQL change data capture (CDC) növekményes kivonat – támogatja a numerikus oszlopokat a leképezési adatfolyamban További információ
Adatáthelyezés
Az SSIS expressz virtuális hálózati injektálása az Azure Data Factoryben általánosan elérhető További információ
Régióbővítés
Folyamatos régióbővítés – Az Azure Data Factory mostantól elérhető Kínában Észak-3 További információ
2022. november
Adatfolyam
- A növekményes csak az SAP CDC-ben érhető el – csak az SAP-rendszer módosításainak lekérése kezdeti teljes terhelés nélkül További információ
- Forráspartíciók az SAP CDC kezdeti teljes adatbetöltésében a teljesítmény javítása érdekében További információ
- Új folyamatsablon – Több objektum betöltése nagy mennyiségű SAP-ból az SAP CDC-n keresztül További információ
Adatáthelyezés
- Az Azure Databricks támogatása privát kapcsolaton keresztül egy Data Factory által felügyelt virtuális hálózatról További információ
Felhasználói felület
2 Folyamattervező fejlesztései hozzáadva az ADF Studio előzetes verziójához
- Dinamikus tartalomfelirat – a dinamikus tartalom beállításának megkönnyítése a folyamattevékenységekben a kifejezésszerkesztő használata nélkül További információ
- Hibaüzenetek áthelyezése az állapotoszlopba – egyszerűbbé teszi a hibák megtekintését, ha egy sikertelen folyamat futtatása jelenik meg További információ
Folyamatos integráció és folyamatos üzembe helyezés
Az automatikus közzétételi konfigurációban a közzététel letiltása gomb elérhető az utolsó automatikus közzétételi üzembe helyezés felülírásának érvénytelenítéséhez További információ
2022. október
Videó összefoglalása
Adatfolyam
- Akár 1000 sor exportálása adatfolyam-előnézetből További információ
- Sql CDC a leképezési Adatfolyam már elérhető (nyilvános előzetes verzió) További információ
- Speciális elemzések zárolásának feloldása a Microsoft 365 Leképezési Adatfolyam Összekötővel További információ
- Az SAP Change Data Capture (CDC) mostantól általánosan elérhető További információ
Fejlesztői hatékonyság
- Közösségi hozzájárulások elfogadása a sablongyűjteményben További információ
- Új kialakítás az Azure Portalon – könnyen felfedezheti, hogyan indíthatja el az ADF Studio-t További információ
- A Learning Center mostantól elérhető az Azure Data Factory studióban További információ
- Egy kattintással kipróbálhatja az Azure Data Factoryt További információ
Vezénylés
- Részletes számlázási nézet érhető el az ADF-hez – részletes számlázási információk folyamatonként (nyilvános előzetes verzió) További információ
- A szkripttevékenység végrehajtásának időtúllépése mostantól konfigurálható További információ
Régióbővítés
Folytatódó régióbővítés – A Qatar Central mostantól támogatott További információ
Folyamatos integráció és folyamatos üzembe helyezés
Az üzembe helyezés során nem módosult folyamatindítók kizárása mostantól általánosan elérhető További információ
Szeptember 2022.
Videó összefoglalása
Adatfolyam
- További információ az Amazon S3-forrásösszekötőről
- A Google Sheets REST-alapú összekötője forrásként (előzetes verzió) hozzáadva További információ
- Maximális oszlopoptimalizálás az adatfolyamban További információ
- SAP Change Data Capture capabilities in Mapping Adatfolyam (Előzetes verzió) – Adatváltozások kinyerése és átalakítása AZ SAP-rendszerekből a hatékonyabb adatfrissítés érdekében További információ
- Adatok írása keresőmezőbe a Dynamics 365/CRM-összekötőkben támogatott alternatív kulcsokkal az adatfolyamok leképezéséhez További információ
Adatáthelyezés
Az Oracle NUMBER típusának megfelelő egész számmá konvertálásának támogatása a forrásban További információ
Figyelés
- További monitorozási fejlesztések az Azure Data Factoryben További információ
- A betöltési fejlesztések monitorozása – a folyamat újrafuttatása csak kibontott adatok beolvasásával
- A folyamattevékenység-futtatási nézethez hozzáadott lapozás az összes tevékenységrekord megjelenítéséhez a folyamatfuttatásban
- A fogyasztás javulásának monitorozása – betöltési ikon hozzáadva a használati jelentés teljes kiszámításához
- További rendezési oszlopok a figyelésben – a rendezés hozzáadva a folyamat nevéhez, a futtatáshoz és az állapothoz
- A figyelésbe mentett időzóna-beállítások
- A Gantt-diagramnézet mostantól támogatott az integrációs modul monitorozásában További információ
Vezénylés
A webes tevékenység DELETE metódusa mostantól támogatja a törzs HTTP-kéréssel való küldését További információ
Felhasználói felület
- A paraméterezés natív felhasználói felületi támogatása 6 további társított szolgáltatáshoz – SAP ODP, ODBC, Microsoft Access, Informix, Snowflake és DB2 További információ
- A Studio Előzetes verzióban hozzáadott folyamattervezői fejlesztések – a felhasználók megtekinthetik a munkafolyamatot olyan folyamatobjektumokon belül, mint a Mindegyik, Ha ezután stb. Tudj meg többet
2022. augusztus
Videó összefoglalása
Adatfolyam
- Az Appfigures-összekötő forrásként (előzetes verzió) hozzáadva További információ
- Öntött transzformáció hozzáadva – adattípusok vizuális konvertálása További információ
- Új felhasználói felület beágyazott adathalmazokhoz – az adatforrások egyszerű megkereséséhez hozzáadott kategóriák További információ
Adatáthelyezés
Szolgáltatásnév-hitelesítési típus hozzáadva az Azure Blob Storage-hoz További információ
Fejlesztői hatékonyság
- A tevékenység alapértelmezett időkorlátja 7 napról 12 órára módosult További információ
- Új data factory létrehozási élmény – egy kattintással másodpercen belül készen áll a gyár További információ
- Kifejezésszerkesztő felhasználói felületének frissítése – kategorikus fülek hozzáadva a könnyebb használat érdekében További információ
Folyamatos integráció és folyamatos teljesítés (CI/CD)
Ha a CI/CD integrálja az ARM-sablont, ahelyett, hogy kikapcsolná az összes eseményindítót, kizárhatja azokat az eseményindítókat, amelyek nem változnak az üzembe helyezés során További információ
2022. július
Videó összefoglalása
Adatfolyam
- Asana-összekötő forrásként hozzáadva További információ
- Három új adatátalakítási függvény már támogatott További információ
- collectUnique() – Egyedi értékek új gyűjteményének létrehozása egy tömbben.
- substringIndex() – Bontsa ki a sztringet egy elválasztó n előfordulása előtt.
- topN() – Az adatok rendezése után adja vissza a felső n eredményt.
- Az adatforrás-változási forgatókönyvek frissítésében elérhető forrásból való visszavétel További információ
- Felhasználó által definiált függvények (GA) – Újrafelhasználható és testre szabott kifejezések létrehozása az összetett logika újra- és újraépítésének elkerülése érdekében További információ – videó
- Egyszerűbb konfiguráció az adatfolyam-futtatókörnyezetben – a kis, közepes és nagy számítási méret kiválasztásával előre konfigurálhatja az integrációs modul beállításait További információ
Folyamatos integráció és folyamatos teljesítés (CI/CD)
Vegye fel az ARM-sablonban támogatott globális paramétereket. További információ
Fejlesztői hatékonyság
Az Azure Data Factory studio előzetes funkcióinak része lehet – Ismerje meg a legújabb Azure Data Factory-képességeket, és elsőként ossza meg visszajelzését További információ
2022. június
Videó összefoglalása
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Adatfolyam | Az adatfolyamok esetében támogatott fuzzy join | A fuzzy join mostantól támogatott az adatfolyamok illesztési átalakításában konfigurálható hasonlósági pontszámmal az illesztési feltételeken. További információ |
Szerkesztési képességek a forrásvetítésben | A forrásprovenció szerkesztési képességei elérhetők az Adatfolyamban a sémák egyszerű módosításához További információ | |
Hibakezelés érvényesítése | Az igényes hibakezelés mostantól támogatott az adatfolyamokban az adatminőség és az adatérvényesítés érdekében További információ | |
Adatáthelyezés | További 4 összekötő natív paraméterezése | Natív felhasználói felületi támogatást adtunk hozzá a paraméterezéshez a következő társított szolgáltatásokhoz: Azure Data Lake Gen1, Azure PostgreSQL, Google AdWords és PostgreSQL. További információ |
AZ SAP Change Data Capture (CDC) képességei az új SAP ODP-összekötőben (nyilvános előzetes verzió) | Az SAP Change Data Capture (CDC) funkciói mostantól támogatottak az új SAP ODP-összekötőben. További információ | |
Integrációs modul | Élettartam felügyelt virtuális hálózaton (nyilvános előzetes verzió) | Az élettartam beállítható a felügyelt VNET-ben kiosztott számításokra. További információ |
Figyelés | Folyamat újrafuttatása új paraméterekkel | Most már újrafuttathatja a folyamatokat új paraméterértékekkel az Azure Data Factoryben. További információ |
Vezénylés | A "turnOffAsync" tulajdonság elérhető a webes tevékenységben | A webes tevékenység támogatja az aszinkron kérés-válasz mintát, amely HTTP GET-t hív meg a HTTP 202-válasz válaszfejlécének Hely mezőjében. Segítségével a webes tevékenység automatikusan lekérdezheti a figyelési végpontot, amíg a feladat le nem fut. A "turnOffAsync" tulajdonság támogatja ezt a viselkedést olyan esetekben, amikor nincs szükség lekérdezésre További információ |
2022. május
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Adatfolyam | Felhasználó által definiált függvények az adatfolyamok leképezéséhez | Az Azure Data Factory nyilvános előzetes verziójú, felhasználó által definiált függvényeket és adatfolyam-kódtárakat vezet be. A felhasználó által definiált függvények testre szabható kifejezések, amelyekkel több leképezési adatfolyam logikáját újra felhasználhatja. A felhasználó által definiált függvények egy adatfolyam-kódtárnak nevezett gyűjteményben élnek, hogy könnyen csoportosíthassák a testre szabott függvények közös készletét. További információ |
2022. április
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Adatfolyam | Az adatelőnézet és a hibakeresés fejlesztései az adatfolyamok leképezésében | Az AutoResolve Azure integrációs modult (IR) használó hibakeresési munkamenetek mostantól 10 másodperc alatt elindulnak. Az adatfolyamok leképezése új frissítéseket jelenít meg az adatelőnézet panelen. Most az oszlopfejlécek kiválasztásával rendezheti a sorokat az adatelőnézet nézetében. Az oszlopokat interaktív módon mozgathatja. Az adatok előnézeti eredményeit CSV-ként is mentheti a CSV exportálásával. További információ |
A Dataverse-összekötő az adatfolyamok leképezéséhez érhető el | A Dataverse-összekötő forrásként és fogadóként érhető el az adatfolyamok leképezéséhez. További információ | |
Felhasználóiadatbázis-sémák támogatása az Azure Synapse Analytics- és PostgreSQL-összekötőkkel való előkészítéshez az adatfolyam-fogadóban | Az adatfolyam-fogadó mostantól támogatja a felhasználói adatbázisséma használatát az Azure Synapse Analytics és a PostgreSQL-összekötőkben való előkészítéshez. További információ | |
Figyelés | A Data Factory monitorozási élményének több frissítése | A Data Factory monitorozási felületének új frissítései közé tartozik az eredmények CSV-be való exportálása, az összes szűrő törlése és a futtatás megnyitása egy új lapon. Az oszlop- és eredmény gyorsítótárazása is javult. További információ |
Felhasználói felület | Új regionális formátumtámogatás | A nyelv és a területi formátum kiválasztása a beállításokban befolyásolja az adatok( például dátumok és időpontok) megjelenését az Azure Data Factory Studio monitorozásában. A Monitorozás időformátuma például "2022. ápr. 2., 15:40:29" lesz, amikor az angolt választja regionális formátumként, a "2022. ápr. 2., 15:40:29" pedig a francia formátumot választja regionális formátumként. Ezek a beállítások csak az Azure Data Factory Studio felhasználói felületét érintik, és nem módosítják/ módosítják a tényleges adatokat és időzónát. |
2022. március
Videó összefoglalása
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Adatfolyam | A szkriptvonalak és a paraméteres társított szolgáltatás támogatja a leképezési adatfolyamok hozzáadását | Mostantól egyszerűen észlelheti az adatfolyam-szkript módosításait a Gitben az adatfolyam JSON-definíciójában lévő ScriptLines használatával. A paraméteres társított szolgáltatások mostantól az adatfolyamokban is használhatók rugalmas általános kapcsolati mintákhoz. További információ |
Folyamatok általános rendelkezésre állása (GA) | A folyamatok mostantól általánosan elérhetők az adatfolyamlogika újrafelhasználható részeinek létrehozásához, amelyeket más folyamatokban beágyazott átalakításokként oszthat meg. A folyamatfolyamok lehetővé teszik a kinyerési-átalakítási és betöltési (ETL-) feladatokat, hogy egyéni vagy közös logikai összetevőkből állnak. További információ | |
A Változáscsatorna-összekötők öt adatfolyamforrás-átalakítással érhetők el | A változáscsatorna-összekötők az azure Cosmos DB, az Azure Blob Storage, az Azure Data Lake Storage Gen1, az Azure Data Lake Storage Gen2 és a közös adatmodell (CDM) adatfolyam-átalakításaiban érhetők el. További információ | |
Az adatelőnézet és a hibakeresés fejlesztései az adatfolyamok leképezésében | Új funkciók lettek hozzáadva az adatelőnézethez és az adatfolyamok leképezésének hibakeresési élményéhez. További információ | |
SFTP-összekötő az adatfolyam leképezéséhez | Az SFTP-összekötő forrásként és fogadóként is elérhető az adatfolyam leképezéséhez. További információ | |
Adatáthelyezés | Az Always Encrypted támogatása SQL-hez kapcsolódó összekötőkhöz a felügyelt virtuális hálózat keresési tevékenységében | Az Always Encrypted az SQL Server, az Azure SQL Database, az Azure SQL Managed Instance és a Synapse Analytics esetében támogatott a felügyelt virtuális hálózat keresési tevékenységében. További információ |
Integrációs modul | Új felhasználói felületi elrendezés az Azure IR létrehozási és szerkesztési lapján | Az integrációs modul létrehozási és szerkesztési lapjának felhasználói felületi elrendezése mostantól a Beállítások, a Virtuális hálózat és az Adatfolyam-futtatókörnyezet lapstílusát használja. További információ |
Vezénylés | Adatok átalakítása a szkripttevékenység használatával | Szkripttevékenységekkel SQL-szkripteket hívhat meg az SQL Database-ben, az Azure Synapse Analyticsben, az SQL Serverben, az Oracle-ben vagy a Snowflake-ben. További információ |
Webes tevékenység időtúllépésének javítása | A webes tevékenységek válaszidejének időtúllépését úgy konfigurálhatja, hogy ne lehessen időtúllépést végrehajtani, ha a válaszidőszak több mint egy perc, különösen szinkron API-k esetén. További információ |
február 2022.
Videó összefoglalása
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Adatfolyam | Az adatfolyamok leképezésében támogatott paraméteres társított szolgáltatások | Most már használhatja a paraméteres társított szolgáltatásokat az adatfolyamok leképezésében, hogy általánossá és rugalmassá tegye az adatfolyam-folyamatokat. További információ |
Az SQL Database növekményes forráskivonata elérhető az adatfolyamban (nyilvános előzetes verzió) | Új lehetőség lett hozzáadva az adatfolyam-leképezési SQL Database-forrásokhoz, amelynek neve növekményes kinyerés engedélyezése (előzetes verzió). Most már csak az SQL Database-forrásokon módosult sorokat tudja automatikusan lekérni adatfolyamok használatával. További információ | |
Négy új összekötő érhető el az adatfolyamok leképezéséhez (nyilvános előzetes verzió) | A Data Factory mostantól négy új összekötőt (nyilvános előzetes verziót) támogat az adatfolyamok leképezéséhez: Quickbase-összekötő, Smartsheet-összekötő, TeamDesk-összekötő és Zendesk-összekötő. További információ | |
Az azure Cosmos DB (SQL API) az adatfolyam leképezéséhez mostantól támogatja a beágyazott módot | A leképezési adatfolyamhoz készült Azure Cosmos DB (SQL API) mostantól beágyazott adatkészleteket is használhat. További információ | |
Adatáthelyezés | Metaadat-alapú adatbetöltési folyamatok lekérése a Data Factory Adatmásolási eszközén 10 percen belül (GA) | A nagy méretű adatmásolási folyamatokat metaadat-alapú megközelítéssel 10 percen belül létrehozhatja az Adatok másolása eszközben. További információ |
Elérhető a Data Factory Google AdWords-összekötő API-frissítése | A Data Factory Google AdWords-összekötője mostantól támogatja az új AdWords API-verziót. Nincs szükség műveletre az új összekötő felhasználója számára, mert alapértelmezés szerint engedélyezve van. További információ | |
Folyamatos integráció és folyamatos teljesítés (CI/CD) | Bérlők közötti Azure DevOps-támogatás | Tárház konfigurálása az Azure DevOps Gittel nem ugyanabban a bérlőben, mint az Azure Data Factory。 További információ |
Régióbővítés | A Data Factory már elérhető az USA 3. nyugati régiójában és a Nyugat-Jio Indiában | A Data Factory két új régióban érhető el: az USA 3. nyugati régiójában és a nyugati Jio Indiában. Az ETL-munkafolyamatot ezekben az új régiókban is áthelyezheti, ha ezeket a régiókat használja a modern adattárház tárolására és kezelésére. Ezeket a régiókat üzletmenet-folytonossági és vészhelyreállítási célokra is használhatja, ha a földrajzi régión belül egy másik régióból kell feladatátvételt végeznie. További információ |
Biztonság | Csatlakozás egy Azure DevOps-fiókhoz egy másik Entra ID-bérlőben | A Data Factory-példányt egy másik Azure AD-bérlőben lévő Azure DevOps-fiókhoz csatlakoztathatja forráskontroll céljából. További információ |
Január 2022.
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Adatfolyam | A gyors újrafelhasználás mostantól automatikus minden Olyan Azure-beli IRS-ben, amely az Élettartamot (TTL) használja | A továbbiakban nem kell manuálisan megadnia a "gyors újrafelhasználás" kifejezést. A Data Factory-leképezési adatfolyamok mostantól a TTL beállítása után öt másodperc alatt elindíthatják a további adatfolyam-tevékenységeket. További információ |
Az egyéni érvényesség leírásának lekérése | Az Igény transzformációban megadhatja a saját dinamikus leírási üzenetét. Az új assertErrorMessage() függvény használatával lekérheti a sorról sorra üzenetet, és tárolhatja a céladatokban. További információ | |
Automatikus sémaészlelés a Parse-átalakításban | Az Elemzés átalakításhoz hozzáadott új funkció megkönnyíti egy beágyazott összetett mező sémájának automatikus észlelését egy sztringoszlopon belül. Válassza a Séma észlelése gombot a célséma automatikus beállításához. További információ | |
A Dynamics 365-összekötő támogatása fogadóként és forrásként is | Mostantól közvetlenül a Dynamics 365-höz csatlakozhat, hogy nagy léptékben átalakítsa a Dynamics-adatokat a Dynamics 365 új leképezési adatfolyam-összekötőjével. További információ | |
Az Always Encrypted SQL-kapcsolatok mostantól elérhetők az adatfolyamokban | Az Always Encrypted mostantól az SQL Server, az SQL Database, a felügyelt SQL-példány és az Azure Synapse átalakításait is képes forrásként használni adatfolyamok használatakor. További információ | |
Adatáthelyezés | A Data Factory Azure Databricks Delta Lake-összekötője támogatja az új hitelesítési típusokat | A Data Factory Databricks Delta Lake-összekötő mostantól két további hitelesítési típust támogat: a rendszer által hozzárendelt felügyelt identitáshitelesítést és a felhasználó által hozzárendelt felügyelt identitáshitelesítést. További információ |
A Data Factory Copy tevékenység több további összekötőben is támogatja a upsertet | A Data Factory Copy tevékenység mostantól támogatja a upsertet, miközben az SQL Serverre, az SQL Database-be, a felügyelt SQL-példányra és az Azure Synapse-ra nyeli az adatokat. További információ |
2021. december
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Adatfolyam | Dynamics-összekötő natív forrásként és fogadóként az adatfolyamok leképezéséhez | A Dynamics-összekötő mostantól forrásként és fogadóként is használható az adatfolyamok leképezéséhez. További információ |
Natív változásadat-rögzítés (CDC) mostantól natívan támogatott | A CDC mostantól natív módon támogatott az Azure Cosmos DB, a Blob Storage, az 1. generációs Data Lake Storage, a Data Lake Storage Gen2 és a CDM data factoryjében. További információ | |
Flowlets nyilvános előzetes verzió | A nyilvános adatfolyamok előzetes verziója lehetővé teszi, hogy az adatfolyam-fejlesztők újrahasználható összetevőket építsenek ki, hogy könnyen összeállíthatók legyenek az adatátalakítási logikák. További információ | |
Adatok leképezése – nyilvános előzetes verzió | A Map Data előzetes verziója lehetővé teszi, hogy az üzleti felhasználók oszlopleképezést és átalakításokat definiáljanak az Azure Synapse lake-adatbázisok betöltéséhez. További információ | |
Több kimeneti célhely a Power Queryből | Mostantól több kimeneti célhelyet is megfeleltethet a Power Queryből a Data Factoryben, hogy rugalmas ETL-mintákat biztosítsunk az állampolgári adat integrátorok számára. További információ | |
Külső hívásátalakítás támogatása | Az adatfolyamok leképezésének funkciójának kiterjesztése a külső hívás átalakításával. Most már hozzáadhatja saját egyéni kódját REST-végpontként, vagy sorról sorra hívhat meg egy válogatott, harmadik féltől származó szolgáltatássort. További információ | |
Az Azure Synapse-leképezési adatfolyamok gyors újrafelhasználásának engedélyezése TTL-támogatással | Az Azure Synapse-leképezési adatfolyamok mostantól támogatják a gyors újrafelhasználást azáltal, hogy beállítanak egy TTL-t az Azure IR-ben. A beállítás használatával a további adatfolyam-tevékenységek öt másodperc alatt végrehajthatók. További információ | |
Átalakítási igény érvényesítése | Egyszerűen adhat hozzá adatminőség-, adattartomány-érvényesítési és metaadat-ellenőrzéseket a Data Factory-folyamatokhoz az Igény szerinti átalakítás használatával az adatfolyamok leképezésében. További információ | |
IntelliSense-támogatás a kifejezésszerkesztőben a hatékonyabb folyamatkészítési élmény érdekében | A kifejezésszerkesztő és a dinamikus tartalomkészítés IntelliSense-támogatása hatékonyabbá teszi a Data Factory és az Azure Synapse-folyamat fejlesztőit, miközben összetett kifejezéseket írnak az adatfolyamaikba. További információ |
2021. november
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Folyamatos integráció és folyamatos teljesítés (CI/CD) | GitHub-integrációs fejlesztések | A Data Factory és a GitHub integrációjának fejlesztései erőforrástípusonként 1000 Data Factory-erőforrás, például adathalmazok és folyamatok korlátait szüntetik meg. A nagy adat-előállítók esetében ez a változás segít enyhíteni a GitHub API sebességkorlátjának hatását. További információ |
Adatfolyam | Egyéni hibakód és hibaüzenet beállítása a Feladat tevékenységgel | A feladattevékenység lehetővé teszi, hogy az ETL-fejlesztők beállítják a Data Factory-folyamatok hibaüzenetét és egyéni hibakódját. További információ |
Külső hívásátalakítás | Az adatfolyamok külső hívásátalakításának leképezése lehetővé teszi az ETL-fejlesztők számára, hogy REST-végpontok vagy külső API-szolgáltatások által biztosított átalakításokat és adatdúsításokat használjanak. További információ | |
Synapse gyors újrafelhasználása | Amikor adatfolyamot hajt végre a Synapse Analyticsben, használja a TTL szolgáltatást. A TTL-funkció a gyors újrafelhasználási funkciót használja, így a szekvenciális adatfolyamok néhány másodpercen belül végrehajtásra kerülnek. Az Azure IR konfigurálásakor beállíthatja a TTL-t. További információ | |
Adatáthelyezés | Copy tevékenység támogatja az ADATOK FTP-ből vagy SFTP-ből történő olvasását adattömb nélkül | Az FTP- vagy SFTP-kiszolgálóról történő adatmásoláskor automatikusan meghatározza a fájl hosszát vagy a megfelelő eltolást. Ezzel a képességgel a Data Factory automatikusan csatlakozik az FTP- vagy SFTP-kiszolgálóhoz a fájl hosszának meghatározásához. A hossz meghatározása után a Data Factory több adattömbre osztja a fájlt, és párhuzamosan olvassa be őket. További információ |
UTF-8 BOM-támogatás nélkül a Copy tevékenység | Copy tevékenység támogatja az adatok írását a típus kódolásávalUTF-8 BOM nélkül JSON- és tagolt szöveges adathalmazokhoz. | |
Többkarakteres oszlopelválasztó támogatása | Copy tevékenység támogatja a többdiagramos oszlophatárolók használatát a tagolt szöveges adathalmazokhoz. | |
Integrációs modul | Bármilyen folyamat futtatása három lépésben az SQL Server Integration Services (SSIS) használatával a Data Factoryben | Megtudhatja, hogyan használhatja a Data Factory és az SSIS legjobb képességeit egy folyamatban. A paraméteres tulajdonságokkal rendelkező SSIS-mintacsomag segít az első lépésekben. A Data Factory Studióval az SSIS-csomag egyszerűen áthúzható egy folyamatba, és az SSIS-csomag végrehajtása tevékenység részeként használható. Ez a funkció lehetővé teszi, hogy a Data Factory-folyamatot egy SSIS-csomaggal futtassa saját üzemeltetésű IRS-en vagy SSIS IRS-en. A futásidejű paraméterértékek biztosításával együtt használhatja a Data Factory és az SSIS hatékony képességeit. Ez a cikk három lépést mutat be bármilyen folyamat futtatásához, amely bármilyen végrehajtható lehet, például alkalmazás, program, segédprogram vagy kötegfájl bárhol. További információ |
2021. október
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Adatfolyam | Az Azure Data Explorer és az Amazon Web Services (AWS) S3-összekötői | A Microsoft adatintegráció csapata két új összekötőt adott ki az adatfolyamok leképezéséhez. Az Azure Synapse használata esetén mostantól közvetlenül csatlakozhat az AWS S3-gyűjtőkhöz adatátalakítások céljából. A Data Factoryben és az Azure Synapse-ban is natív módon csatlakozhat az Azure Data Explorer-fürtökhöz az adatfolyamok leképezése során. További információ |
A Power Query-tevékenység előzetes verziót hagy a ga-hoz | A Data Factory Power Query folyamattevékenysége általánosan elérhető. Ez az új funkció kibővített adat-előkészítést és adatmozgatást biztosít a Data Factory böngésző felhasználói felületén belül a polgárok integrálói számára, hogy integrált felhasználói élményt nyújtsunk az adatmérnökök számára. A Data Factory Power Query-adatmegoldó funkciója hatékony, könnyen használható folyamatfunkciót biztosít a legösszetettebb adatintegráció és ETL-minták egyetlen szolgáltatásban történő megoldásához. További információ | |
Új stringify adatátalakítás az adatfolyamok leképezésében | Az adatfolyamok leképezése egy Stringify nevű új adatátalakítást ad hozzá, amely megkönnyíti az összetett adattípusok, például a szerkezetek és tömbök sztringűrlaptá alakítását. Ezek az adattípusok ezután elküldhetők strukturált kimeneti célhelyekre. További információ | |
Integrációs modul | Express virtuális hálózat injektálása SSIS IR-hez (nyilvános előzetes verzió) | Az SSIS integrációs modul mostantól támogatja az expressz virtuális hálózat injektálását. További információ: Az SSIS IR virtuális hálózati injektálásának áttekintése Standard és expressz virtuális hálózati injektálás SSIS IR-hez Expressz virtuális hálózat injektálása SSIS IR-hez |
Biztonság | Az Azure Key Vault integrációjának fejlesztése | A Key Vault-integráció mostantól legördülő listákat tartalmaz, így a felhasználók kiválaszthatják a titkos értékeket a társított szolgáltatásban. Ez a képesség növeli a termelékenységet, mert a felhasználóknak nem kell beírniuk a titkos kulcsokat, ami emberi hibát okozhat. |
Felhasználó által hozzárendelt felügyelt identitás támogatása a Data Factoryben | A hitelesítő adatok biztonsága minden vállalat számára kulcsfontosságú. A Data Factory csapata elkötelezett az adatmérnöki folyamat biztonságossá és egyszerűvé tétele iránt az adatmérnökök számára. A felhasználó által hozzárendelt felügyelt identitás (előzetes verzió) mostantól minden olyan összekötőben és társított szolgáltatásban támogatott, amely támogatja az Azure AD-alapú hitelesítést. További információ |
2021. szeptember
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Folyamatos integráció és folyamatos teljesítés | Bővített CI/CD-képességek | Most már létrehozhat egy új Git-ágat a Data Factory bármely más ága alapján. További információ |
Adatáthelyezés | Amazon Relational Database Service (RDS) Oracle-forrásokhoz | Az Amazon RDS for Oracle-források összekötője mostantól a Data Factoryben és az Azure Synapse-ban is elérhető. További információ |
Amazon RDS SQL Server-forrásokhoz | Az SQL Server-források összekötőhöz készült Amazon RDS mostantól a Data Factoryben és az Azure Synapse-ban is elérhető. További információ | |
Párhuzamos másolás támogatása az Azure Database for PostgreSQL-ből | Az Azure Database for PostgreSQL-összekötő mostantól támogatja a párhuzamos másolási műveleteket. További információ | |
Adatfolyam | A Data Lake Storage Gen2 használata elő- és utófeldolgozási parancsok végrehajtásához | A Hadoop Elosztott fájlrendszer elő- és utófeldolgozási parancsai most már végrehajthatók a Data Lake Storage Gen2 fogadóinak használatával az adatfolyamokban. További információ |
Az Azure IR meglévő példányainak adatfolyam-tulajdonságainak szerkesztése | Az Azure IR frissült, hogy lehetővé tegye a meglévő IRS-ek adatfolyam-tulajdonságainak szerkesztését. Mostantól anélkül módosíthatja az adatfolyam számítási tulajdonságait, hogy új Azure IR-t kellene létrehoznia. További információ | |
Az Azure Synapse TTL-beállítása a folyamattevékenységek végrehajtási indítási idejének javítása érdekében | Az Azure Synapse TTL-t adott hozzá az Azure IR-hez, hogy az adatfolyam-folyamatok tevékenységei másodpercek alatt megkezdhessék a végrehajtást, ami jelentősen csökkenti az adatfolyam-folyamatok futásidejét. További információ | |
Integrációs modul | Data Factory által felügyelt virtuális hálózat – GA | Most már kiépítheti az Azure IR-t egy felügyelt virtuális hálózat részeként, és privát végpontokkal biztonságosan csatlakozhat a támogatott adattárakhoz. Az adatforgalom az Azure Private Linksen keresztül halad át, amely biztonságos kapcsolatot biztosít az adatforráshoz. Emellett megakadályozza az adatok nyilvános internetre való kiszivárgását is. További információ |
Vezénylés | SLA üzembe helyezése és biztosítása adatfolyamokhoz | Az új eltelt időfolyamat-futtatási metrika a Data Factory-riasztásokkal kombinálva lehetővé teszi az adatfolyamat-fejlesztők számára, hogy jobb SLA-kat nyújtsanak ügyfeleiknek. Most már megadhatja, hogy mennyi ideig futjon egy folyamat, és proaktív módon értesítjük, ha a folyamat a vártnál hosszabb ideig fut. További információ |
Feladattevékenység (nyilvános előzetes verzió) | Az új feladattevékenység lehetővé teszi, hogy szándékosan, bármilyen okból hibát jelez egy folyamatban. Használhatja például a Feladat tevékenységet, ha egy keresési tevékenység nem ad vissza egyező adatot, vagy egy egyéni tevékenység belső hibával fejeződik be. További információ |
2021. augusztus
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Folyamatos integráció és folyamatos teljesítés | CI/CD-fejlesztések a GitHub-támogatással az Azure Governmentben és a 21Vianet által üzemeltetett Microsoft Azure-ban | Az Azure for US Governmentben és a 21Vianet által üzemeltetett Azure-ban a GitHub támogatását is hozzáadtuk. További információ |
Adatáthelyezés | Az Azure Cosmos DB API for MongoDB-összekötő támogatja a 3.6-os és a 4.0-s verziót a Data Factoryben | A Data Factory Azure Cosmos DB API for MongoDB-összekötő mostantól támogatja a kiszolgáló 3.6-os és 4.0-s verzióját. További információ |
Az adatok azure Synapse-be való betöltéséhez használható COPY utasítás továbbfejlesztése | A Data Factory Azure Synapse-összekötő mostantól támogatja a szakaszos másolási és másolási forrást a *.* helyettesítő karakterrel a COPY utasításhoz. További információ | |
Adatfolyam | A REST-végpontok forrásként és fogadóként érhetők el az adatfolyamban | A Data Factory és az Azure Synapse adatfolyamai mostantól forrásként és fogadóként is támogatják a REST-végpontokat, és teljes mértékben támogatják mind a JSON-, mind az XML-hasznos adatokat. További információ |
Integrációs modul | A diagnosztikai eszköz a saját üzemeltetésű integrációs modulhoz érhető el | A saját üzemeltetésű integrációs modul diagnosztikai eszközének célja, hogy jobb felhasználói élményt nyújtson, és segítsen a felhasználóknak a lehetséges problémák megtalálásában. Az eszköz számos tesztforgatókönyvet futtat a saját üzemeltetésű integrációs modult futtató gépen. Minden forgatókönyvben gyakori problémákra jellemző állapot-ellenőrzési esetek vannak. További információ |
Vezénylés | Egyéni eseményindító speciális ga szűrési beállítással | Most már létrehozhat egy eseményindítót, amely az Azure Event Gridben közzétett egyéni témakörre válaszol. Speciális szűréssel részletesen szabályozhatja, hogy milyen eseményekre kell válaszolnia. További információ |
2021. július
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Adatáthelyezés | Metaadat-alapú adatbetöltési folyamatok lekérése a Data Factory Adatmásolási eszközén 10 percen belül (nyilvános előzetes verzió) | Most már 10 percen belül létrehozhat nagy méretű adatmásolási folyamatokat metaadatalapú megközelítéssel az Adatok másolása eszközön (nyilvános előzetes verzió). További információ |
Adatfolyam | Új leképezési függvények hozzáadva az adatfolyam-átalakítási függvényekhez | Az adatfolyam-átalakítási függvények új készlete lehetővé teszi az adatmérnökök számára a térkép adattípusainak és összetett leképezési struktúráinak egyszerű létrehozását, olvasását és frissítését. További információ |
Integrációs modul | Öt új régió érhető el a Data Factory által felügyelt virtuális hálózaton (nyilvános előzetes verzió) | A Data Factory által felügyelt virtuális hálózatban (nyilvános előzetes verzió) öt új régió, a China East2, a China North2, az USA arizonai kormánya, az USA kormánya Texas és az USA kormánya, Virginia érhető el. |
Fejlesztői hatékonyság | A Data Factory kezdőlapja fejlesztései | A Data Factory kezdőlapja át lett tervezve jobb kontraszttal és újracsordulási képességekkel. A kezdőlapon bemutatunk néhány szakaszt, amelyek segítenek a hatékonyság növelésében az adatintegrációs folyamat során. További információ |
A Data Factory Studio új kezdőlapja | A Data Factory panel kezdőlapja az Azure Portalon. További információ |
2021. június
Szolgáltatáskategória | Szolgáltatásfejlesztések | Részletek |
Adatáthelyezés | Új felhasználói élmény a Data Factory Adatok másolása eszközével | Az újratervezett Adatok másolása eszköz mostantól továbbfejlesztett adatbetöltési felülettel érhető el. További információ |
A MongoDB és a MongoDB Atlas forrásként és fogadóként is támogatott | Ez a fejlesztés támogatja az adatok másolását bármely támogatott adattár és MongoDB vagy MongoDB Atlas-adatbázis között. További információ | |
Az Always Encrypted az SQL Database, a felügyelt SQL-példány és az SQL Server-összekötők esetében egyaránt támogatott forrásként és fogadóként | Az Always Encrypted az SQL Database-hez, a felügyelt SQL-példányhoz és az SQL Server-összekötőkhöz készült Data Factoryben érhető el a Copy tevékenység. További információ | |
Az egyéni metaadatok beállítása támogatott a Copy tevékenység a Data Lake Storage Gen2 vagy a Blob Storage szolgáltatásba való süllyedéskor | Amikor a Data Lake Storage Gen2-be vagy a Blob Storage-ba ír, a Copy tevékenység támogatja a forrásfájl utolsó módosított információinak egyéni metaadatainak vagy tárterületének metaadatként való beállítását. További információ | |
Adatfolyam | Az SQL Server mostantól forrásként és fogadóként is támogatott az adatfolyamokban | Az SQL Server mostantól forrásként és fogadóként is támogatott az adatfolyamokban. Kövesse a hivatkozásra mutató útmutatást a hálózat konfigurálásához az Azure IR által felügyelt virtuális hálózat funkcióval a helyszíni SQL Server és a felhőalapú virtuálisgép-alapú példányok közötti beszélgetéshez. További információ |
Az adatfolyamfürt gyors újrafelhasználása alapértelmezés szerint engedélyezve van az összes új Azure IRS-hez | Az adatfolyamok gyors üzembe helyezésének népszerű újrafelhasználási funkciója mostantól általánosan elérhető a Data Factory számára. Az összes új Azure IRS alapértelmezés szerint engedélyezve van a gyors újrafelhasználással. További információ | |
Power Query -tevékenység (nyilvános előzetes verzió) | Mostantól összetett mezőleképezéseket hozhat létre a Power Query fogadójához a Data Factory adatmegfeleltetésével. A fogadó most már konfigurálva van a folyamatban a Power Query (nyilvános előzetes verzió) tevékenységben a frissítés fogadására. További információ | |
Frissített adatfolyamok monitorozási felhasználói felülete a Data Factoryben | A Data Factory új frissítéssel rendelkezik a monitorozási felhasználói felülethez, amely megkönnyíti az adatfolyamok ETL-feladatvégrehajtásainak megtekintését és a teljesítményhangolás területeinek gyors azonosítását. További információ | |
SQL Server Integration Services | Futtasson bármilyen SQL-utasítást vagy szkriptet három lépésben az SSIS használatával a Data Factoryben | Ez a bejegyzés három lépést tartalmaz bármely SQL-utasítás vagy szkript futtatásához bárhol az SSIS-vel a Data Factoryben.
|