Adatokkal kapcsolatos szerepkörök
Az adatokkal elmesélt történet olyan utazás, amely általában nem Önnel kezdődik. Az adatoknak származniuk kell valahonnan. Az adatokat egy Ön által használható helyre juttatni olyan feladat, amely feltehetően nem tartozik a hatáskörébe, különösen egy nagyvállalatnál.
Napjainkban az alkalmazások és a projektek hatalmasak és bonyolultak lehetnek, és gyakran sokak képzettségét és tudását hasznosítják. Mindenki az egyedi tehetségével és szakértelmével járul hozzá a közös munkához, úgy koordinálva a tevékenységeket és felelősségi köröket, hogy a projekt elképzelésből működő termékké váljon.
A közelmúltban az üzleti elemzők és az üzleti intelligencia fejlesztői voltak az adatok feldolgozásának és értelmezésének letéteményesei. Az adatok mennyiségének és változatosságának robbanásszerű növekedése miatt azonban ezek a szerepkörök specializáltabb rész-szakterületekké fejlődtek, amelyek modernizálják az hatékonyabbá teszik az adatfeldolgozási és -elemzési folyamatokat.
A következő szakaszok bemutatják az adatokkal foglalkozó szerepköröket és azok speciális felelősségi körét az adatok felderítésének és megértésének teljes skáláján belül:
Üzleti elemző
Adatelemző
Adatmérnök
Adattudós
Adatbázisgazda
Üzleti elemző
Bár az adatelemző és az üzleti elemző között van néhány hasonlóság, a fő különbség közöttük az, amit az adatokkal tesznek. Az üzleti elemző közelebb áll az üzlethez, és a fő szakterülete az adatok értelmezése a vizualizációk alapján. Az adatelemző és az üzleti elemző szerepkörét gyakran egyetlen személy vállalja magára.
Adatelemző
Az adatelemzők teszik lehetővé, hogy az üzletek a lehető legtöbb értéket nyerjék ki az adatokból az olyan vizualizációs és jelentéskészítő eszközök segítségével, mint a Microsoft Power BI. Az adatelemzők feladata az adatprofilok készítése, valamint az adatok tisztítása és átalakítása. Feladataik közé tartozik továbbá a méretezhető és hatékony szemantikai modellek tervezése és létrehozása, valamint a fejlett elemzési képességek engedélyezése és implementálása elemzési jelentésekben. Az adatelemzők a megfelelő érdekeltekkel közösen azonosítják az adatokra és jelentésekre vonatkozó megfelelő és szükséges követelményeket, majd az ő feladatuk releváns és tartalmas elemzési eredményekké változtatni a nyers adatokat.
Az adatelemzők a Power BI-objektumok kezeléséért is felelősek, beleértve a jelentések, irányítópultok, munkaterületek és a jelentésekben használt mögöttes szemantikai modellek kezelését. Nekik kell az érdekeltek elvárásaival összhangban implementálniuk és konfigurálniuk a helyes biztonsági eljárásokat, így gondoskodva az összes Power BI-összetevő és az adatok biztonságáról.
Az adatelemzők az adatmérnökökkel együttműködve határozzák meg és keresik meg az érdekeltek igényeinek megfelelő adatforrásokat. Emellett az adatelemzők az adatmérnökökkel és adatbázisgazdákkal közösen biztosítják, hogy az elemző megfelelő hozzáféréssel rendelkezzen a szükséges adatforrásokhoz. Az adatelemzők szintén az adatmérnökökkel együtt keresik az elemzési célú adatok gyűjtésének új folyamatait, vagy a meglévő folyamatok továbbfejlesztésének lehetőségeit.
Adatmérnök
Az adatszakértők a helyszíni és felhőbeli adatplatform-technológiákat építik ki és állítják be. Ők kezelik és biztosítják a több forrásból érkező, strukturált és strukturálatlan adatok folyását. Az általuk használt adatplatformok tartalmazhatnak relációs adatbázisokat, nem relációs adatbázisokat, adatfolyamokat és fájltárolókat. Az adatmérnökök azt is biztosítják, hogy az adatszolgáltatások biztonságosan és zökkenőmentesen integrálhatók legyenek az adatplatformok között.
Az adatmérnökök elsődleges feladatai közé tartozik az adatok betöltése, kivezetése és átalakítása több forrásból, különböző helyszíni és felhőbeli szolgáltatásokkal és eszközökkel. Az adatmérnökök az üzleti érdekeltekkel együttműködve azonosítják és elégítik ki az adatokkal kapcsolatos követelményeket. Ehhez megoldásokat terveznek és építenek ki.
Bár az adatmérnök és az adatbázisgazda feladatköre és felelősségi köre bizonyos mértékig átfedheti egymást, az adatmérnök hatóköre túlmutat az adatbázis és az azt üzemeltető kiszolgáló felügyeletén, és feltehetően nem foglalja magában az üzemi adatok általános felügyeletét.
Az adatmérnök óriási értékkel járulhat hozzá az üzleti intelligenciával és adattudománnyal kapcsolatos projektekhez. Amikor egy adatmérnök végzi ezt az úgynevezett adatszervezést, a projektek gyorsabban haladnak, mivel az adattudósok így saját munkaterületeikre összpontosíthatnak.
Adatelemzőként szorosan együttműködne egy adatszakértővel annak érdekében, hogy hozzáférjen a strukturált és strukturálatlan adatforrások széles választékához, mivel ezek támogatják a szemantikai modellek optimalizálását, amelyek jellemzően egy modern adattárházból vagy data lake-ből származnak.
Az adatbázisgazdák és az üzletiintelligencia-szakértők adatmérnöki szerepkörre válthatnak, ha elsajátítják a nagy adatok feldolgozásához szükséges eszközök és technológiák használatát.
Adattudós
Az adattudósok fejlett elemzést végeznek, amellyel értéket nyernek ki az adatokból. Munkájuk része lehet a deskriptív elemzés és a prediktív elemzés is. A deskriptív elemzés egy feltáró jellegű adatelemzés (EDA) nevű folyamattal értékeli az adatokat. A prediktív elemzés a gépi tanulásban használatos, segítségével pedig modellezési technikákkal észlelhetők anomáliák és minták. Ezek az elemzések az előrejelzési modellek fontos részét képezik.
A leíró és az előrejelző elemzés csupán az adattudósok munkájának egy-egy része. Egyes adattudósok mély tanulással is foglalkozhatnak, melynek keretében egyéni algoritmusokat használó, iteratív kísérletekkel próbálnak összetett adatproblémákat megoldani.
Anekdotikus bizonyítékok utalnak arra, hogy egy adattudományi projekt legtöbb idejét felemésztő munka az adatszervezés és a funkciófejlesztés. Az adattudósok felgyorsíthatják a kísérletezési folyamatot, ha az adatmérnökök sikeresen végzik az adatszervezést.
A felszínen úgy tűnhet, hogy az adattudós és az adatelemző munkája távol áll egymástól, de ez téves meglátás. Az adattudósok az adatok vizsgálatával meghatározzák a megválaszolandó kérdéseket, és gyakran hipotéziseket vagy egy kísérletet is kidolgoznak, majd az adatelemzők támogatását veszik igénybe a vizualizációk és jelentések elkészítéséhez.
Adatbázisgazda
Az adatbázisgazdák implementálják és felügyelik a Microsoft Azure-adatszolgáltatásokra és a Microsoft SQL Serverre épülő felhőalapú és hibrid adatplatform-megoldások üzemeltetési oldalát. Az adatbázis-rendszergazdák felelősek az adatbázis-megoldások általános rendelkezésre állásáért, konzisztens teljesítményéért és optimalizálásáért. Az érdekeltekkel együttműködve azonosítják és implementálják az adatok biztonsági másolataira és a helyreállítási tervekre vonatkozó szabályzatokat, eszközöket és eljárásokat.
Az adatbázisgazda szerepköre más, mint az adatmérnöké. Az adatbázisgazdák figyelik és felügyelik az adatbázisok és az azokat kiszolgáló hardver általános állapotát, az adatmérnökök viszont az adatszervezésben vesznek részt, tehát az adatoknak az üzleti igényeknek és követelményeknek megfelelő beolvasásában, átalakításában, ellenőrzésében és tisztításában.
Az adatbázisgazda felel az adatok általános biztonságának kezeléséért is, ő adja meg vagy korlátozza az adatokra vonatkozó felhasználói hozzáféréseket és jogosultságokat, összhangban az üzleti igényekkel és követelményekkel.