Získanie údajov z Eventstreamu
V tomto článku sa dozviete, ako získať údaje z existujúceho toku udalostí do novej alebo existujúcej tabuľky.
Ak chcete získať údaje z nového toku udalostí, pozrite si tému Získanie údajov z nového toku udalostí.
Požiadavky
- Pracovný priestor s kapacitou povolenou pre službu Microsoft Fabric
- Databáza KQL s povoleniami na úpravu
- Udalosťstream so zdrojom údajov
Source
Ak chcete získať údaje z eventstreamu, musíte ako zdroj údajov vybrať udalosť eventstream. Existujúce udalosti môžete vybrať nasledujúcimi spôsobmi:
Na dolnom páse s nástrojmi databázy KQL môžete napríklad:
V rozbaľovacej ponuke Získať údaje a potom v časti Spojité vyberte možnosť Eventstream Existing Eventstream (Aktuálny tok>udalostí).
Vyberte položku Získať údaje a potom v okne Získať údaje vyberte položku Eventstream.
V rozbaľovacej ponuke Získať údaje v časti Spojité vyberte položku Centrum>údajov v reálnom čase Existujúca udalosť.
Konfigurácia
Vyberte cieľovú tabuľku. Ak chcete ingestovať údaje do novej tabuľky, vyberte položku + Nová tabuľka a zadajte názov tabuľky.
Poznámka
Názvy tabuliek môžu mať maximálne 1 024 znakov vrátane medzier, alfanumerických znakov, spojovoviek a znakov podčiarknutia. Špeciálne znaky nie sú podporované.
V časti Konfigurácia zdroja údajov vyplňte nastavenia pomocou informácií v nasledujúcej tabuľke:
Nastavenie Popis Pracovný priestor Umiestnenie pracovného priestoru eventstreamu. Z rozbaľovacieho zoznamu vyberte pracovný priestor. Názov toku udalosti Názov vášho eventstreamu. Z rozbaľovacieho zoznamu vyberte udalosťstream. Názov údajového pripojenia Názov používaný na odkazovanie a spravovanie údajového pripojenia v pracovnom priestore. Názov údajového pripojenia sa vyplní automaticky. Voliteľne môžete zadať nový názov. Názov môže obsahovať iba alfanumerické znaky, pomlčku a bodku a môže mať dĺžku až 40 znakov. Proces udalosti pred príjmum v Eventstreame Táto možnosť vám umožňuje konfigurovať spracovanie údajov pred presunutím údajov do cieľovej tabuľky. Ak je vybratá, pokračujte v procese príjmu údajov v eventstreame. Ďalšie informácie nájdete v téme Spracovanie udalosti pred príjmom v Eventstreame. Rozšírené filtre Kompresia Kompresia údajov udalostí vychádzajúca z centra udalostí. Možnosti sú Žiadne (predvolené) alebo kompresia Gzip. Systémové vlastnosti udalosti Ak pre každú správu udalosti existuje viacero záznamov, systémové vlastnosti sa pridajú k prvému. Ďalšie informácie nájdete v téme Systémové vlastnosti udalosti. Dátum začatia načítania udalosti Údajové pripojenie načíta existujúce udalosti vytvorené od počiatočného dátumu načítania udalosti. Môže načítať iba udalosti zachované centrom udalostí na základe jeho obdobia uchovávania. Časové pásmo je UTC. Ak nie je zadaný žiadny čas, predvoleným časom je čas vytvorenia údajového pripojenia. Vyberte Ďalej
Proces udalosti pred príjmum v Eventstreame
Udalosť Proces pred príjmem v Eventstreame umožňuje spracovať údaje ešte predtým, ako sa prejdú do cieľovej tabuľky. Pomocou tejto možnosti proces získania údajov bez problémov pokračuje v Eventstreame, kde sa automaticky vyplnia podrobnosti cieľovej tabuľky a zdroja údajov.
Spracovanie udalosti pred príjmum v Eventstreame:
Na karte Konfigurovať vyberte pred príjmom do Eventstreamu položku Proces udalosti.
V dialógovom okne Spracovanie udalostí v eventstreame vyberte položku Pokračovať v Eventstreame.
Dôležité
Výberom položky Pokračovať v eventstreame sa ukončí proces získania údajov v umelej inteligencii v reálnom čase a pokračuje v Udalostistreame, kde sa automaticky vyplní cieľová tabuľka a podrobnosti zdroja údajov.
V eventstreame vyberte cieľový uzol Databázy KQL a na table Databáza KQL overte, či je pred výberom príjmu vybratá možnosť Spracovanie udalosti a či sú podrobnosti cieľa správne.
Vyberte položku Otvoriť procesor udalostí a nakonfigurujte spracovanie údajov a potom vyberte položku Uložiť. Ďalšie informácie nájdete v téme Spracovanie údajov o udalosti pomocou editora procesora udalosti.
Vráťte sa na tablu Databáza KQL a výberom položky Pridať dokončite nastavenie cieľového uzla databázy KQL.
Overte, či sa údaje presunú do cieľovej tabuľky.
Poznámka
Proces udalosti pred príjmum do procesu eventstreamu sa dokončí a zostávajúce kroky v tomto článku nie sú potrebné.
Skontrolovať
Otvorí sa karta Kontrola s ukážkou údajov.
Proces príjmu dokončíte výberom položky Dokončiť.
Voliteľne:
- Výberom položky Zobrazovač príkazov zobrazte a skopírujte automatické príkazy vygenerované zo vstupov.
- Automaticky odvodený formát údajov môžete zmeniť výberom požadovaného formátu z rozbaľovacieho zoznamu. Údaje sa čítajú z centra udalostí vo forme objektov EventData . Podporované formáty sú CSV, JSON, PSV, SCsv, SOHsv TSV, TXT a TSVE.
- Upraviť stĺpce.
- Preskúmajte rozšírené možnosti na základe typu údajov.
Úprava stĺpcov
Poznámka
- V prípade tabuľkových formátov (CSV, TSV, PSV) nie je možné priradiť stĺpec dvakrát. Ak chcete priradiť k existujúcemu stĺpcu, najskôr odstráňte nový stĺpec.
- Nemôžete zmeniť existujúci typ stĺpca. Ak sa pokúsite priradiť stĺpec, ktorý má iný formát, pravdepodobne budete mať prázdne stĺpce.
Zmeny, ktoré môžete vykonať v tabuľke, závisia od nasledujúcich parametrov:
- Typ tabuľky je nový alebo existujúci
- Typ mapovania je nový alebo existujúci
| Typ tabuľky | Typ mapovania | Dostupné úpravy |
|---|---|---|
| Nová tabuľka | Nové priradenie | Premenovanie stĺpca, zmena typu údajov, zmena zdroja údajov, transformácia priradenia, pridanie stĺpca, odstránenie stĺpca |
| Existujúca tabuľka | Nové priradenie | Pridať stĺpec (v ktorom môžete potom zmeniť typ údajov, premenovať a aktualizovať) |
| Existujúca tabuľka | Existujúce priradenie | žiadne |
Transformácie mapovania
Niektoré priradenia formátov údajov (Parquet, JSON a Avro) podporujú jednoduché transformácie času ingestu. Ak chcete použiť transformácie mapovania, vytvorte alebo aktualizujte stĺpec v okne Upraviť stĺpce .
Transformácie mapovania možno vykonať v stĺpci typu reťazec alebo dátum a čas, pričom zdroj má typ údajov int alebo long. Podporované transformácie mapovania sú:
- DateTimeFromUnixSeconds
- DateTimeFromUnixMilliseconds
- DateTimeFromUnixMicroseconds
- DateTimeFromUnixNanoseconds
Rozšírené možnosti na základe typu údajov
Tabular (CSV, TSV, PSV):
Tabuľkové údaje nemusia nevyhnutne obsahovať názvy stĺpcov, ktoré sa používajú na priradenie zdrojových údajov k existujúcim stĺpcom. Ak chcete použiť prvý riadok ako názvy stĺpcov, zapnite možnosť Prvý riadok je hlavička stĺpca.
JSON:
Ak chcete určiť delenie údajov JSON stĺpcom, vyberte položku Rozšírené>vnorené úrovne od 1 do 100.
Súhrn
V okne Príprava údajov sú všetky tri kroky označené zelenými značkami začiarknutia po úspešnom dokončení príjmu údajov. Kartu môžete vybrať na dotazovanie, zrušenie prijatia údajov alebo zobrazenie tabule súhrnu príjmu. Ak chcete okno zavrieť, vyberte položku Zavrieť .
Súvisiaci obsah
- Ak chcete spravovať databázu, pozrite si tému Správa údajov.
- Ak chcete vytvoriť, uložiť a exportovať dotazy, pozrite si tému Údaje dotazu v množine dotazov KQL.