Mi a Microsoft Fabric adatmérnöki szolgáltatása?
A Microsoft Fabric adatfejlesztése lehetővé teszi, hogy a felhasználók olyan infrastruktúrákat és rendszereket tervezhessenek, építsenek ki és tartsanak fenn, amelyek lehetővé teszik a szervezetek számára a nagy mennyiségű adat gyűjtését, tárolását, feldolgozását és elemzését.
A Microsoft Fabric különböző adatmérnöki képességeket biztosít, hogy az adatok könnyen hozzáférhetők, rendezettek és kiváló minőségűek legyenek. Az adatmérnöki kezdőlapon a következőt teheti:
Adatok létrehozása és kezelése egy lakehouse használatával
Adatcsatornák tervezése az adatok lakehouse-ba másolásához
Spark-feladatdefiníciók használata köteg-/streamelési feladat Spark-fürtbe való elküldéséhez
Kód írása adatbetöltéshez, előkészítéshez és átalakításhoz jegyzetfüzetek használatával
Lakehouse
A Lakehouse-k olyan adatarchitektúrák, amelyek lehetővé teszik a szervezetek számára a strukturált és strukturálatlan adatok egyetlen helyen való tárolását és kezelését, különböző eszközök és keretrendszerek használatával az adatok feldolgozásához és elemzéséhez. Ezek az eszközök és keretrendszerek sql-alapú lekérdezéseket és elemzéseket, valamint gépi tanulási és egyéb fejlett elemzési technikákat is tartalmazhatnak.
Apache Spark feladat meghatározása
A Spark-feladatdefiníciók olyan utasítások, amelyek meghatározzák, hogyan hajthat végre feladatokat Egy Spark-fürtön. Olyan információkat tartalmaz, mint a bemeneti és kimeneti adatforrások, az átalakítások és a Spark-alkalmazás konfigurációs beállításai. A Spark-feladat definíciója lehetővé teszi, hogy kötegelt és folyamatos futtatású feladatokat küldjön a Spark-fürtnek, alkalmazzon különböző átalakítási logikákat a lakehouse-on tárolt adatokra, továbbá sok más műveletet is végezzen.
Jegyzetfüzet
A jegyzetfüzetek interaktív számítástechnikai környezetek, amelyekkel a felhasználók élő kódot, egyenleteket, vizualizációkat és elbeszélő szöveget tartalmazó dokumentumokat hozhatnak létre és oszthatnak meg. Lehetővé teszik a felhasználók számára, hogy kódot írjanak és hajtsanak végre különböző programozási nyelveken, beleértve a Pythont, az R-t és a Scalát. Jegyzetfüzeteket használhat adatbetöltéshez, előkészítéshez, elemzéshez és más, adatokkal kapcsolatos feladatokhoz.
Adatcsővezeték
Az adatfolyamok olyan lépések sorozatai, amelyek adatokat gyűjthetnek, dolgozhatnak fel és alakíthatnak át nyers formájukból olyan formátumba, amelyet elemzéshez és döntéshozatalhoz használhat. Ezek az adatelemzés kritikus összetevői, mivel lehetővé teszik az adatok megbízható, méretezhető és hatékony áthelyezését a forrásból a célhelyre.
A Microsoft Fabricben ingyenesen használhatja az adatelemzést, ha regisztrál a Fabric próbaverziós. Vásárolhat Microsoft Fabric-kapacitást vagy fenntartott Fabric-kapacitást is
Kapcsolódó tartalom
Ismerkedés az adatmérnöki szolgáltatással:
- Ha többet szeretne megtudni a tóházakról, olvassa el Mi az a tóház a Microsoft Fabricben?
- A tóház használatának megkezdéséhez tekintse meg Tóház létrehozása a Microsoft Fabric.
- Az Apache Spark-feladatdefiníciókkal kapcsolatos további információkért lásd Mi az Apache Spark-feladatdefiníció?
- Az Apache Spark-feladatdefinícióval való munka megkezdéséhez lásd: Hogyan hozzunk létre Apache Spark-feladatdefiníciót a Fabricban.
- A jegyzetfüzetekről további információt A jegyzetfüzet létrehozása és végrehajtásacímű témakörben talál.
- A folyamatmásolási tevékenység első lépéseit a Adatok másolása másolási tevékenységgelcímű témakörben talál.