Integrációs modul monitorozása az Azure Data Factoryben

A következőkre vonatkozik: Azure Data Factory Azure Synapse Analytics

Az integrációs modul az Azure Data Factory (ADF) által használt számítási infrastruktúra, amely különböző adatintegrációs képességeket biztosít különböző hálózati környezetekben. A Data Factory háromféle integrációs modult kínál:

• Azure integrációs modul
• Helyi integrációs modul
• Azure-SQL Server Integration Services (SSIS) integrációs modul

Az integrációs modul (IR) egy példányának állapotának lekéréséhez futtassa a következő PowerShell-parancsot:

Get-AzDataFactoryV2IntegrationRuntime -DataFactoryName MyDataFactory -ResourceGroupName MyResourceGroup -Name MyAzureIR -Status

A parancsmag különböző információkat ad vissza a különböző típusú integrációs futtatókörnyezetekhez. Ez a cikk az egyes integrációs futtatókörnyezetek tulajdonságait és állapotát ismerteti.

Azure integrációs modul

Az Azure-integrációs futtatókörnyezet számítási erőforrása rugalmasan felügyelve van az Azure-ban. Az alábbi táblázat a Get-AzDataFactoryV2IntegrationRuntime parancs által visszaadott tulajdonságok leírását tartalmazza:

Tulajdonságok

Az alábbi táblázat az Azure-integrációs futtatókörnyezet parancsmagja által visszaadott tulajdonságok leírását tartalmazza:

Állapot

Az alábbi táblázat egy Azure-integrációs futtatókörnyezet lehetséges állapotát tartalmazza:

Helyi integrációs modul

Ez a szakasz a Get-AzDataFactoryV2IntegrationRuntime parancsmag által visszaadott tulajdonságok leírását tartalmazza.

Tulajdonságok

Az alábbi táblázat az egyes csomópontok figyelési tulajdonságainak leírását tartalmazza:

A tulajdonságok egyes beállításainak akkor van értelme, ha két vagy több csomópont található a saját üzemeltetésű integrációs modulban (azaz vertikális felskálázási forgatókönyvben).

Egyidejű feladatok korlátja

Az egyidejű feladatok korlátjának alapértelmezett értéke a gép mérete alapján van beállítva. Az érték kiszámításához használt tényezők a RAM mennyiségétől és a gép processzormagjainak számától függenek. Minél több mag és több memória van, annál magasabb az egyidejű feladatok alapértelmezett korlátja.

A csomópontok számának növelésével skálázhatja fel a skálázást. A csomópontok számának növelésekor az egyidejű feladatok korlátja az összes elérhető csomópont egyidejű feladatkorlátjának összege. Ha például egy csomóponton egyszerre legfeljebb tizenkét feladatot futtathat, akkor három további hasonló csomópont hozzáadásával legfeljebb 48 egyidejű feladatot futtathat (azaz 4 x 12-et). Azt javasoljuk, hogy csak akkor növelje az egyidejű feladatok korlátját, ha alacsony erőforrás-használatot lát az egyes csomópontok alapértelmezett értékeivel.

Az Azure Portalon felülbírálhatja a számított alapértelmezett értéket. Válassza a Author > Connections > Integration Runtimes > Edit > Nodes > Modify párhuzamos feladat értékét csomópontonként. A PowerShell update-Azdatafactoryv2integrationruntimenode parancsot is használhatja .

Állapot (csomópontonként)

Az alábbi táblázat egy saját üzemeltetésű integrációs futtatókörnyezeti csomópont lehetséges állapotát tartalmazza:

A csomópontok inaktívak lehetnek, ha nem tudnak más csomópontokhoz csatlakozni.

Állapot (általános, saját üzemeltetésű integrációs modul)

Az alábbi táblázat egy saját üzemeltetésű integrációs modul lehetséges állapotát ismerteti. Ez az állapot a futtatókörnyezethez tartozó összes csomópont állapotától függ.

A Get-AzDataFactoryV2IntegrationRuntimeMetric parancsmaggal lekérheti a JSON hasznos adatait, amelyek tartalmazzák a részletes helyi integrációs modul tulajdonságait és pillanatkép-értékeit a parancsmag végrehajtása során.

Get-AzDataFactoryV2IntegrationRuntimeMetric -name $integrationRuntimeName -ResourceGroupName $resourceGroupName -DataFactoryName $dataFactoryName | ConvertTo-Json 

Mintakimenet (feltételezi, hogy két csomópont van társítva ehhez a saját üzemeltetésű integrációs modulhoz):

{
	"IntegrationRuntimeName":  "<Name of your integration runtime>",
    "ResourceGroupName":  "<Resource Group Name>",
    "DataFactoryName":  "<Data Factory Name>",
    "Nodes":  [
		{
			"NodeName":  "<Node Name>",
			"AvailableMemoryInMB":  <Value>,
			"CpuUtilization":  <Value>,
			"ConcurrentJobsLimit":  <Value>,
			"ConcurrentJobsRunning":  <Value>,
			"MaxConcurrentJobs":  <Value>,
			"SentBytes":  <Value>,
			"ReceivedBytes":  <Value>
		},
		{
			"NodeName":  "<Node Name>",
			"AvailableMemoryInMB":  <Value>,
			"CpuUtilization":  <Value>,
			"ConcurrentJobsLimit":  <Value>,
			"ConcurrentJobsRunning":  <Value>,
			"MaxConcurrentJobs":  <Value>,
			"SentBytes":  <Value>,
			"ReceivedBytes":  <Value>
		}

	]
} 

Azure SSIS Integration Runtime

Az Azure-SSIS IR az SSIS-csomagok futtatására dedikált Azure-beli virtuális gépek (virtuális gépek vagy csomópontok) teljes körűen felügyelt fürtje. Az SSIS-csomagvégrehajtásokat az Azure-SSIS integrációs modulon különböző módszerekkel hívhatja meg, például az Azure-kompatibilis SQL Server Data Tools (SSDT), az AzureDTExec parancssori segédprogram, az SQL Server Management Studio (SSMS)/SQL Server-ügynökön futó T-SQL és az SSIS-csomag tevékenységeinek végrehajtása ADF-folyamatokban. Az Azure-SSIS integrációs modul nem futtat más ADF-tevékenységeket. A kiépítés után az Azure PowerShell, az Azure Portal és az Azure Monitor segítségével figyelheti az általános/csomópontspecifikus tulajdonságokat és állapotokat.

Az Azure-SSIS integrációs modul monitorozása az Azure PowerShell-lel

Az Alábbi Azure PowerShell-parancsmaggal monitorozhatja az Azure-SSIS integrációs modul általános/csomópontspecifikus tulajdonságait és állapotát.

Get-AzDataFactoryV2IntegrationRuntime -DataFactoryName $DataFactoryName -Name $AzureSSISName -ResourceGroupName $ResourceGroupName -Status

Tulajdonságok

Az alábbi táblázat az Azure-SSIS integrációs modulra vonatkozó fenti parancsmag által visszaadott tulajdonságok leírását tartalmazza.

Állapot (Azure-SSIS IR-csomópontonként)

Az alábbi táblázat egy Azure-SSIS IR-csomópont lehetséges állapotát tartalmazza:

Állapot (az Azure-SSIS teljes integrációs modulja)

Az alábbi táblázat az Azure-SSIS integrációs modul lehetséges általános állapotát ismerteti. A teljes állapot viszont az Azure-SSIS integrációs modulhoz tartozó összes csomópont összesített állapotától függ.

Az Azure-SSIS integrációs modul monitorozása az Azure Portalon

Az Azure-SSIS integrációs modul az Azure Portalon való figyeléséhez nyissa meg a Monitor hub integrációs moduljainak lapját az ADF felhasználói felületén, ahol megtekintheti az összes integrációs modult.

Ezután válassza ki az Azure-SSIS integrációs modul nevét a monitorozási oldal megnyitásához, ahol megtekintheti annak általános/csomópontspecifikus tulajdonságait és állapotát. Ezen a lapon az Azure-SSIS integrációs modul általános, üzembe helyezési és speciális beállításainak konfigurálásának módjától függően különböző információs/funkcionális csempéket talál.

A TYPE és REGION információs csempék az Azure-SSIS IR típusát és régióját jelenítik meg.

A NODE SIZE információs csempén az SKU (SSIS edition_VM tier_VM sorozat), a processzormagok száma és az Azure-SSIS INTEGRÁCIÓs modul csomópontonkénti RAM-mérete látható.

A FUTÓ/KÉRT CSOMÓPONT(ok) információs csempe összehasonlítja a jelenleg futó csomópontok számát az Azure-SSIS integrációs modulhoz korábban kért csomópontok teljes számával.

A KETTŐS KÉSZENLÉTI PÁR / SZEREPKÖR információs csempe a kettős készenléti Azure-SSIS IR-pár nevét jeleníti meg, amely szinkronban működik az Azure SQL Managed Instance feladatátvételi csoporttal az üzletmenet-folytonosság és a vészhelyreállítás (BCDR) érdekében, valamint az Azure-SSIS integrációs modul aktuális elsődleges/másodlagos szerepkörével. Az SSISDB feladatátvételekor az elsődleges és másodlagos Azure-SSIS IRS-ek felcserélik a szerepköröket (lásd : Az Azure-SSIS integrációs modul konfigurálása a BCDR-hez).

A funkcionális csempéket az alábbi további részletek ismertetik.

ÁLLAPOT csempe

Az Azure-SSIS integrációs modul monitorozási oldalának STATUS csempéjén láthatja annak általános állapotát, például a Futtatás vagy a Leállítás lehetőséget. A Futtatás állapot kiválasztásával megjelenik egy ablak az Élő leállítás gombbal az Azure-SSIS integrációs modul leállításához. Ha a Leállított állapotot választja, megjelenik egy ablak az Élő indítás gombbal az Azure-SSIS integrációs modul elindításához. Az előugró ablakban található egy SSIS-csomag végrehajtása gomb is, amellyel automatikusan létrehozhat egy ADF-folyamatot az Azure-SSIS integrációs modulon futó SSIS-csomagtevékenységek végrehajtásával (lásd: SSIS-csomagok futtatása SSIS-csomagtevékenységek végrehajtása ADF-folyamatokban) és egy erőforrás-azonosító szövegmező, amelyből másolhatja az Azure-SSIS INTEGRÁCIÓS MODUL erőforrás-azonosítóját (/subscriptions/YourAzureSubscription/resourcegroups/YourResourceGroup/providers/Microsoft.DataFactory/factories/YourADF/integrationruntimes/YourAzureSSISIR). Az ADF- és Az Azure-SSIS IR-neveket tartalmazó Azure-SSIS IR-erőforrásazonosító utótagja egy fürtazonosítót alkot, amely további prémium/licenccel rendelkező SSIS-összetevők független szoftvergyártóktól (ISV-ktől) való megvásárlásához és az Azure-SSIS IR-hez való kötéséhez használható (lásd: Prémium/licenccel rendelkező összetevők telepítése az Azure-SSIS IR-ben).

SSISDB SERVER ENDPOINT csempe

Ha a Project Deployment Modelt használja, ahol a csomagok az Azure SQL Database-kiszolgáló vagy a felügyelt példány által üzemeltetett SSISDB-ben vannak tárolva, az SSISDB SERVER ENDPOINT csempéje megjelenik az Azure-SSIS IR monitorozási oldalán (lásd: Az Azure-SSIS INTEGRÁCIÓS MODUL üzembehelyezési beállításainak konfigurálása). Ezen a csempén kiválaszthat egy hivatkozást, amely kijelöli az Azure SQL Database-kiszolgálót vagy a felügyelt példányt, hogy előugrasson egy ablakot, ahol átmásolhatja a kiszolgálóvégpontot egy szövegmezőből, és használhatja azt az SSMS-ből való csatlakozáskor a csomagok üzembe helyezéséhez, konfigurálásához, futtatásához és kezeléséhez. Az előugró ablakban az Azure SQL Database vagy a felügyelt példány beállításai hivatkozásra kattintva újrakonfigurálhatja/átméretezheti az SSISDB-t az Azure Portalon.

PROXY / Átmeneti csempe

Ha letölti, telepíti és konfigurálja a saját üzemeltetésű integrációs modult (SHIR) proxyként az Azure-SSIS IR-hez a helyszíni adatok eléréséhez, akkor az Azure-SSIS IR monitorozási oldalán megjelenik a PROXY/átmeneti csempe (lásd : Az SHIR konfigurálása proxyként az Azure-SSIS IR-hez). Ezen a csempén kiválaszthat egy hivatkozást, amely kijelöli az SHIR-t a monitorozási oldal megnyitásához. Választhat egy másik hivatkozást is, amely kijelöli az Azure Blob Storage-t az előkészítéshez a társított szolgáltatás újrakonfigurálásához.

VNET/SUBNET csempe ELLENŐRZÉSE

Ha csatlakozik az Azure-SSIS integrációs moduljához egy virtuális hálózathoz, az Azure-SSIS IR monitorozási oldalán megjelenik a VNET/ALHÁLÓZAT ÉRVÉNYESÍTÉSE csempe (lásd: Csatlakozás az Azure-SSIS integrációs modulhoz virtuális hálózathoz). Ezen a csempén kiválaszthat egy hivatkozást, amely kijelöli a virtuális hálózatot és az alhálózatot, hogy előugrjon egy ablak, ahol szövegmezőkből másolhatja a virtuális hálózat erőforrás-azonosítóját (/subscriptions/YourAzureSubscription/resourceGroups/YourResourceGroup/providers/Microsoft.Network/virtualNetworks/YourARMVNet) és alhálózatnevét, valamint ellenőrizheti a virtuális hálózat és az alhálózat konfigurációját annak érdekében, hogy a szükséges bejövő/kimenő hálózati forgalom és az Azure-SSIS integrációs modul kezelése ne legyen akadálymentes.

A KAPCSOLATOK DIAGNOSZTIZÁLÁSA csempe

Az Azure-SSIS integrációs modul monitorozási oldalÁNAK DIAGNOSZTIZÁLÁSI KAPCSOLAT csempéjén a Kapcsolat tesztelése hivatkozásra kattintva előugrik egy ablak, ahol ellenőrizheti az Azure-SSIS IR és a kapcsolódó csomag/konfiguráció/adattárak, valamint a felügyeleti szolgáltatások közötti kapcsolatokat a teljes tartománynévvel (FQDN)/IP-címmel és a kijelölt porttal (lásd: Az Azure-SSIS integrációs modul kapcsolatainak tesztelése).

STATIKUS NYILVÁNOS IP-CÍMEK csempe

Ha saját statikus nyilvános IP-címeket hoz létre az Azure-SSIS IR-hez, az Azure-SSIS IR monitorozási oldalán megjelenik a STATIKUS NYILVÁNOS IP-CÍMEK csempe (lásd: Saját statikus nyilvános IP-címek létrehozása az Azure-SSIS IR-hez). Ezen a csempén kiválaszthatja az Azure-SSIS IR első/második statikus nyilvános IP-címét kijelölő hivatkozásokat egy ablak felugrásához, ahol az erőforrás-azonosítójukat (/subscriptions/YourAzureSubscription/resourceGroups/YourResourceGroup/providers/Microsoft.Network/publicIPAddresses/YourPublicIPAddress) egy szövegmezőből másolhatja. Az előugró ablakban az első/második statikus nyilvános IP-cím beállításainak megtekintése hivatkozásra kattintva kezelheti az első/második statikus nyilvános IP-címet az Azure Portalon.

PACKAGE STORES csempe

Ha olyan csomagtelepítési modellt használ, amelyben a csomagok a felügyelt Azure SQL-példány által üzemeltetett fájlrendszerben/Azure Files/SQL Server-adatbázisban (MSDB) vannak tárolva, és az Azure-SSIS IR csomagtárolókon keresztül vannak felügyelve, akkor az Azure-SSIS INTEGRÁCIÓS MODUL monitorozási oldalán megjelenik a PACKAGE STORES csempe (lásd : Az Azure-SSIS INTEGRÁCIÓS MODUL üzembehelyezési beállításainak konfigurálása). Ezen a csempén kiválaszthat egy hivatkozást, amely kijelöli az Azure-SSIS integrációs modulhoz csatolt csomagtárolók számát egy ablak felugrásához, ahol újrakonfigurálhatja az Azure-SSIS IR-csomagtárolókhoz tartozó kapcsolódó szolgáltatásokat a felügyelt Azure SQL-példány által üzemeltetett fájlrendszer/Azure Files/MSDB fölé.

ERROR(S) csempe

Ha problémák merülnek fel az Azure-SSIS integrációs modul elindításával/leállításával/karbantartásával/frissítésével kapcsolatban, az Azure-SSIS integrációs modul monitorozási oldalán egy további HIBA(OK) csempe jelenik meg. Ezen a csempén kiválaszthat egy hivatkozást, amely kijelöli az Azure-SSIS integrációs modul által generált hibák számát egy ablak megjelenítéséhez, ahol további részletekben láthatja ezeket a hibákat, és a hibaelhárítási útmutatóban megtalálja az ajánlott megoldásokat (lásd az Azure-SSIS integrációs modul hibaelhárítását).

Az Azure-SSIS integrációs modul monitorozása az Azure Monitorral

Az Azure-SSIS integrációs modul Azure Monitorral való monitorozásához tekintse meg az SSIS-műveletek Monitorozása az Azure Monitorral című témakört.

További információ az Azure-SSIS integrációs modulról

Az Azure-SSIS integrációs modullal kapcsolatos további információkért tekintse meg az alábbi cikkeket:

• Azure-SSIS integrációs modul. Ez a cikk általános információkat nyújt az integrációs futtatókörnyezetekről, beleértve az Azure-SSIS integrációs modult is.
• Oktatóanyag: SSIS-csomagok üzembe helyezése az Azure-ban. Ez a cikk részletes útmutatást nyújt az Azure-SSIS integrációs modul létrehozásához és az Azure SQL Database-nek az SSIS-katalógus (SSISDB) üzemeltetéséhez.
• Útmutató: Azure-SSIS integrációs modul létrehozása. Ez a cikk kiterjeszti az oktatóanyagot, és útmutatást nyújt az Azure SQL Managed Instance SSISDB üzemeltetéséhez való használatával kapcsolatban.
• Azure-SSIS integrációs modul kezelése. Ez a cikk bemutatja, hogyan indíthatja el, állíthatja le vagy törölheti az Azure-SSIS integrációs modult. Azt is bemutatja, hogyan skálázhatja fel a csomópontokat további csomópontok hozzáadásával.
• Azure-SSIS integrációs modul csatlakoztatása virtuális hálózathoz. Ez a cikk útmutatást nyújt az Azure-SSIS integrációs modul virtuális hálózathoz való csatlakoztatásához.

Kapcsolódó tartalom

A folyamatok különböző módon történő monitorozását az alábbi cikkekben tekintheti meg:

• Rövid útmutató: adat-előállító létrehozása.
• Data Factory-folyamatok monitorozása az Azure Monitor használatával