Monitorovanie stavu a výkonu udalostistreamu
Funkcia Streamy udalostí služby Microsoft Fabric umožňuje jednoducho monitorovať údaje streamovacej udalosti, stav príjmu a výkon príjmu. Tento článok vysvetľuje, ako monitorovať stav udalosti v toku udalosti, skontrolovať denníky, chyby a prehľady údajov pomocou metriky.
V prípade eventstreamu existujú dva typy monitorovania: Prehľady údajov a denníky modulu runtime. Zobrazí sa jedno alebo obe zobrazenia v závislosti od zdroja alebo cieľa, ktorý vyberiete.
Požiadavky
Skôr než začnete, musíte mať:
- Prístup do pracovného priestoru s povoleniami Čitateľ alebo vyššie, kde sa nachádza vaša položka Eventstream.
- Zdroj centra udalostí Azure alebo cieľ služby Lakehouse pridaný do vášho eventstreamu.
Prehľady údajov
Karta Prehľady údajov sa zobrazí v dolnej table hlavného editora. Karta poskytuje metriky, ktoré môžete použiť na monitorovanie stavu a výkonu tokov udalosti, zdrojov a cieľov. Rôzne zdroje a ciele majú rôzne metriky. Keď vyberiete uzol na plátne hlavného editora, metriky pre daný konkrétny uzol sa zobrazia na karte Prehľady údajov.
Prehľady údajov v uzli eventstreamu
Nasledujúce metriky sa zobrazujú pre uzol eventstreamu na karte Prehľady údajov:
| Metric | Jednotka | Description |
|---|---|---|
| IncomingMessages | počítať | Počet udalostí alebo správ odoslaných do eventstreamu za zadané obdobie. |
| Odchádzajúce správy | počítať | Počet udalostí alebo správ odlivu z eventstreamu za zadané obdobie. |
| Prichádzajúcebajty | Bajtov | Prichádzajúce bajtov pre udalosťstream v zadanom období. |
| Odchádzajúcichbajtov | Bajtov | Odchádzajúce bajtov pre udalosťstream v zadanom období. |
Zobrazenie prehľadov údajov pre udalosťstream:
Vyberte uzol eventstream na plátne hlavného editora.
Na dolnej table vyberte kartu Prehľady údajov.
Ak sa v streame udalosti nachádzajú údaje, graf metrík sa zobrazí na karte Prehľady údajov.
Na pravej strane karty začiarknite políčka vedľa metrík, ktoré chcete zobraziť.
Prehľady údajov v centre udalostí Azure, centre Azure iot, lakehouse, Eventhouse, odvodenom streame a aktivátorových uzloch služby Fabric
Nasledujúce metriky sú k dispozícii na karte Prehľady údajov pre centrum udalostí Azure, Azure iot hub, lakehouse, Eventhouse('Spracovanie udalosti pred príjmum'), odvodené streamy a aktivačné uzly služby Fabric:
| Metric | Jednotka | Description |
|---|---|---|
| Vstupné udalosti | počítať | Počet údajov udalosti, ktoré nástroj eventstream načíta zo zdroja udalostí (v lakehouse, Eventhouse, odvodenom streame alebo aktivátore služby Fabric) alebo zo zdroja udalosti (v centre udalostí Azure alebo zdroji centra udalostí Azure iot). |
| Bajty udalosti vstupu | Bajtov | Množstvo údajov o udalostiach, ktoré nástroj eventstream načíta zo zdroja udalosti (v centre jazera, eventhouse, odvodeného streamu alebo aktivátora služby Fabric) alebo zo zdroja udalosti (v centre udalostí Azure alebo zdroji centra udalostí Azure iot). |
| Výstupné udalosti | počítať | Počet údajov udalosti, ktoré mechanizmus eventstreamu odošle do jazera alebo služby Eventhouse (v službe Lakehouse, Eventhouse, odvodenom streame alebo aktivátore služby Fabric) alebo zo zdroja udalosti (v centre udalostí Azure alebo zdroju centra udalostí Azure iot). |
| Nenáhľadné vstupné udalosti | počítať | Počet vstupných udalostí, ktoré sú backlogged v nástroji eventstream. |
| Chyby modulu runtime | počítať | Celkový počet chýb súvisiacich so spracovaním udalosti. |
| Chyby konverzie údajov | počítať | Počet výstupných udalostí, ktoré sa nedali skonvertovať na očakávanú schému výstupu. |
| chyby pri deserializácii | počítať | Počet vstupných udalostí, ktoré nebolo možné deserializovať v rámci nástroja eventstream. |
| Oneskorenie vodotlače | Sekunda | Maximálne oneskorenie vodotlače v rámci všetkých oblastí všetkých výstupov pre tento zdroj alebo cieľ. Vypočíta sa ako čas nástenných hodín mínus najväčší vodotlač. |
Ak chcete zobraziť prehľady údajov pre centrum udalostí Azure, centrum Azure iot, lakehouse, Eventhouse('Spracovanie udalostí pred príjme'), odvodené streamy a činnosťátor služby Fabric:
Vyberte uzol udalostí Azure, centrum Azure iot, lakehouse, Eventhouse, odvodený stream alebo uzol aktivácie služby Fabric na plátne hlavného editora
Na dolnej table vyberte kartu Prehľady údajov.
Ak sa v centre udalostí Azure nachádzajú údaje, centrum Azure iot, lakehouse, Eventhouse, odvodený stream alebo aktivovač služby Fabric, graf metrík sa zobrazí na karte Prehľady údajov.
Na pravej strane karty začiarknite políčka vedľa metrík, ktoré chcete zobraziť.
Prehľady údajov v uzloch zdroja konektora streamovania
Zdrojové uzly konektora streamovania obsahujú nasledujúce zdroje:
- Azure SQL Database Change Data Capture (CDC)
- Azure Service Bus
- PostgreSQL Database CDC
- Databáza MySQL CDC
- Azure Cosmos DB CDC
- SQL Server vo VM DB (CDC)
- Azure SQL Managed Instance CDC
- Google Cloud Pub/Sub
- Údajové streamy služby Amazon Kinesis
- Confluent Cloud Kafka
- Apache Kafka
- Amazon MSK Kafka
Nasledujúce metriky sú k dispozícii na karte Prehľady údajov pre uzly zdroja konektora streamovania:
| Metric | Jednotka | Description |
|---|---|---|
| Odchádzajúce udalosti zdroja | počítať | Počet záznamov výstupných z transformácií (ak existuje) a zapísaných do udalosťstreamu pre úlohu patriacu do pomenovaného zdrojového konektora v pracovníkovi (pretože úloha bola naposledy reštartovaná). |
| Source Prichádzajúce udalosti | počítať | Pred použitím transformácií ide o počet záznamov, ktoré vytvorila alebo načítala úloha patriaca do pomenovaného zdrojového konektora v pracovníkovi (od posledného reštartovania úlohy). |
| Chyby konektora sa zapísali do denníka | počítať | Počet chýb, ktoré boli zaznamenané pre túto úlohu(-y) konektora. |
| Chyby spracovania konektora | počítať | Počet chýb pri spracovaní záznamu v týchto úlohách konektora. |
| Zlyhania spracovania konektora | počítať | Počet zlyhaní spracovania záznamu v týchto úlohách konektora vrátane zlyhaní opakovania. |
| Vynechané udalosti konektora | počítať | Počet záznamov vynechaných v dôsledku chýb v rámci týchto úloh konektora. |
Ak chcete zobraziť prehľady údajov pre zdroj konektora streamovania:
- Vyberte položku Použiť externý zdroj a potom vyberte zdroj konektora streamovania.
- Nakonfigurujte a publikujte zdroj konektora streamovania.
- Na dolnej table v dynamickom zobrazení vyberte kartu Prehľady údajov.
- Ak sa v zdroji konektora streamovania nachádzajú údaje, graf metrík sa zobrazí na karte Data insights (Prehľady údajov).
- Na pravej strane karty začiarknite políčka vedľa metrík, ktoré chcete zobraziť.
Denníky modulu runtime
Karta Denníky modulu runtime umožňuje skontrolovať podrobné denníky, ktoré sa vyskytujú v nástroji eventstream. Denníky modulu runtime majú tri úrovne závažnosti: upozornenie, chyba a informácie.
Ak chcete zobraziť denníky režimu runtime pre centrum udalostí Azure, centrum Azure iot, zdroj stream konektora, lakehouse, Eventhouse (spracovanie udalostí pred príjmum) alebo aktivátor služby Fabric:
Vyberte uzol na plátne hlavného editora.
Na dolnej table vyberte kartu Denníky modulu runtime.
Ak sa v centre udalostí Azure, v centre udalostí Azure iot nachádzajú údaje, zdroj streamu konektora, lakehouse, eventhouse alebo aktivátor služby Fabric, denníky sa zobrazia na karte denníkov modulu runtime.
Prehľadajte denníky pomocou možnosti Filtrovať podľa kľúčového slova alebo filtrujte zoznam zmenou závažnosti alebo typu.
Ak chcete zobraziť najnovšie denníky, vyberte položku Obnoviť.
