OSDU® M23-szolgáltatások az Azure Data Manager for Energy-ben
Az Azure Data Manager for Energy jelenleg megfelel az M23 OSDU® mérföldkő kiadásának. Az alábbiakban áttekintheti az Azure Data Manager for Energy szolgáltatásban jelenleg elérhető OSDU-szolgáltatásokat®. Ez a lap a szolgáltatásverziók és a rendelkezésre állás fejlődésével folyamatosan frissül.
Alap- és segédszolgáltatások
- CRS-katalógus: API-végpontokat biztosít a geodéziai referenciaadatok használatához, lehetővé téve a fejlesztők számára a CRS-definíciók lekérését, a megfelelő CRS-eket az adatbetöltéshez, valamint a CRS-k keresését különböző korlátozások alapján.
- CRS-átalakítás: Lehetővé teszi a koordináták konvertálását egy koordináta-referenciarendszerből (CRS) egy másikba.
- Adatkészlet: Belső és külső API-végpontokat biztosít a különböző típusú adathalmazok tárolási/lekérési utasításainak engedélyezéséhez és alkalmazáshoz vagy felhasználóhoz való lekéréséhez.
- Jogosultságok: Az OSDU-adat-ökoszisztémában való engedélyezés engedélyezésére szolgál. A szolgáltatás lehetővé teszi csoportok létrehozását. A csoportnév meghatároz egy engedélyt. A csoporthoz hozzáadott felhasználók megkapják ezt az engedélyt. A jogosultsági szolgáltatás fő motivációja az adatengedélyezés, de a funkció három használati esetet tesz lehetővé: adatengedélyezéshez használt adatcsoportok, szolgáltatásengedélyezéshez használt szolgáltatáscsoportok, felhasználói és szolgáltatási identitások hierarchikus csoportosításához használt felhasználói csoportok.
- Fájl: Belső és külső API-végpontokat biztosít, hogy az alkalmazás vagy a felhasználó bármilyen rekordot lekérjen a rendszerből, vagy fájlhelyadatokat kérjen le.
- Indexelő: Strukturált vagy strukturálatlan adatokat tartalmazó dokumentumok indexelését teszi lehetővé. A dokumentumok és indexek a keresési műveletekhez optimalizált, különálló állandó tárolóba vannak mentve. Az indexelő API tetszőleges számú dokumentumot indexelhet.
- Indexelői üzenetsor: Olyan API-kat biztosít, amelyek segítenek az üzenetek továbbításában a tárolási szolgáltatásból az indexelő szolgáltatásba.
- Jogi: Az adathalmazokhoz társított LegalTags kezelése. A LegalTag az az entitás, amely az adat-ökoszisztémában lévő adatok jogi állapotát képviseli. Ez a tulajdonsággyűjtemény szabályozza az adatok felhasználásának és betöltésének módját.
- Értesítés: Lehetővé teszi, hogy az érdekelt felhasználók közzétételi/előfizetői minta használatával feliratkozzanak az adatokra és a metaadatok változásaira.
- Python SDK: Eszközöket és kódtárakat kínál a fejlesztőknek az OSDU-szolgáltatások Pythonnal való használatához.
- Regisztráció: Egy alkalmazás regisztrálhat egy műveletet (a függvényt aktiválni kell). Arra számít, hogy az OSDU-tól származó adatok (környezet) engedélyezik a műveletet, és az alkalmazás regisztrálhat egy szűrőt (engedélyezhet/letilthat), hogy elmondja, milyen adatok használhatók ezzel a művelettel.
- Séma: Lehetővé teszi a séma központosított szabályozását és kezelését az adat-ökoszisztémában. A sémaszabvány implementációját kínálja. A Sémaszolgáltatás minden szükséges API-t biztosít a séma elavult lekéréséhez, létrehozásához, frissítéséhez és megjelöléséhez.
- Keresés: Az indexek keresésére szolgáló mechanizmust biztosít. Támogatja a teljes szöveges keresést a sztringmezőkben, a dátumok, numerikus vagy sztringmezők tartomány lekérdezését stb., valamint a térbeli keresést.
- Titkos kulcs (előzetes verzió): Lehetővé teszi a különböző típusú titkos kódok tárolását és lekérését egy adott adattárban(ok) annak érdekében, hogy a titkos kulcsok biztonságosak legyenek, elkülönülhessenek az infrastruktúra-adattár titkos kulcsaitól, és egyszerűen kezelhetők legyenek az alkalmazások összekapcsolásával.
- Szeizmikus fájl metaadatai: A szeizmikus adatokhoz társított metaadatokat kezeli. Megjegyzéseket fűz a dimenziókhoz, az értékcsatornákhoz és az általános kulcs-/érték párokhoz.
- Tárolás: API-k készletét biztosítja a metaadatok teljes életciklusának kezeléséhez, például a betöltési (adatmegőrzési), módosítási, törlési, verziószámozási és adatséma kezeléséhez.
- Egység: Dimenzió-/mérés- és egységdefiníciókat biztosít.
Tartományi adatkezelési szolgáltatások (DDMS)
- Szeizmikus DDMS: Lehetővé teszi a szeizmikus adathalmazok biztonságos elérését és hatékony kezelését.
- Wellbore DDMS: Lehetővé teszi a kútfúrásokkal kapcsolatos adatok biztonságos elérését és kezelését.
- Well Delivery DDMS: Lehetővé teszi a Well Delivery (tervezés és végrehajtás) adatainak biztonságos elérését, tárolását és interakcióját.
Betöltési szolgáltatások
- EDS DMS [Előzetes verzió]: Az OSDU-kompatibilis adatforrásokból ütemezett feladatokon keresztül lekéri a megadott adatokat (metaadatokat), miközben a külső forrásban tárolt társított adathalmazfájlokat (LAS, SEG-Y stb.) igény szerint lekéri.
- EDS Fetch &Ingest DAG: Lehetővé teszi az adatok külső szolgáltatóktól való lekérését és az OSDU platformba való betöltését. Ez olyan lépésekből áll, mint a szolgáltatókkal való regisztráció, az adatfeladatok létrehozása és a betöltés aktiválása. Az M23 kiadásával az EDS Fetch és az Ingest DAG új funkciókat tartalmaz, például a szülő- és referenciaadatok leképezését.
- EDS Scheduler DAG: Automatizálja az adatok beolvasását előre meghatározott ütemezések alapján, és szükség szerint e-maileket küld a címzetteknek. Biztosítja, hogy az adatok manuális beavatkozás nélkül naprakészek maradnak
- Betöltési munkafolyamat: Üzleti folyamatokat kezdeményez a rendszeren belül. A prototípus fázisában megkönnyíti a CRUD-műveleteket a munkafolyamat metaadatain, és elindítja a munkafolyamatokat az Apache Airflow-ban. Emellett a szolgáltatás kezeli a folyamatindítási rekordokat, amelyek burkolóként működnek az Airflow-függvények körül.
- Jegyzékbetöltési DAG: Egy vagy több metaadat-összetevő betöltésére szolgál az Azure Data Manager for Energy-példány adatkészleteiről. További információ a Jegyzékalapú betöltésről.
- CSV-elemző DAG: Segít a CSV-fájlok betöltési és feldolgozási formátumba történő elemzésében.
- osdu-airflow-lib: Olyan kódtár, amely lehetővé teszi a felhasználói környezet betöltését az Airflow-munkafolyamatokon belül.
- osdu-ingestion-lib: Olyan kódtár, amely támogatja a felhasználói környezetek betöltését, és különböző javításokat tartalmaz a Python verziószámozásával és a szolgáltató cseréjével kapcsolatban.
- SegY-to-oVDS DAG: A SegY fájlformátumokat oVDS formátummá alakítja.
- SegY-to-oZGY DAG: Az SrgY fájlformátumokat ZGY formátummá alakítja.
Az OSDU-szolgáltatások® nem érhetők el az Azure Data Manager for Energy szolgáltatásban
Megjegyzés: Az alábbi OSDU-szolgáltatások® jelenleg nem érhetők el az Azure Data Manager for Energy szolgáltatásban.
- Tároló DDMS
- EDS Naturalization DAG
- Jegyzékbetöltés hivatkozási DAG alapján
- Szeizmikus DDMS v4 API-k
- Kőzet- és folyadékminta DDMS
- Production DDMS – történész
- WITSML-elemző DAG
- Energistcs Parser DAG (WITSML Parser v2, Resqml Parser, ProdML Parser)
- Térinformatikai fogyasztási zóna
- Partíció megjegyzés: A műveletek továbbra is elvégezhetők az elérhető adatpartíciós API-k vagy az Azure Portal használatával.
- Szabályzatszolgáltatás
- Sémafrissítés
- Wellbore Domain Services-feldolgozó