Megosztás a következőn keresztül:

Adatok lekérése az Amazon S3-ból

  • Cikk

Ebből a cikkből megtudhatja, hogyan kérhet le adatokat az Amazon S3-ból egy új vagy meglévő táblába. Az Amazon S3 egy objektumtárolási szolgáltatás, amely adatok tárolására és lekérésére készült.

További információ az Amazon S3-ról: Mi az Amazon S3?.

Előfeltételek

Forrás

  1. A KQL-adatbázis alsó menüszalagján válassza az Adatok lekéréselehetőséget.

    Az Adatok lekérése ablakban a Forrás lap van kiválasztva.

  2. Válassza ki az adatforrást az elérhető listából. Ebben a példában az Adatokat Amazon S3.

    Képernyőkép az adatok lekérése ablakról a forráslap kiválasztásával.

Konfigurál

  1. Válasszon ki egy céltáblát. Ha adatokat szeretne bevinni egy új táblába, válassza az +Új tábla lehetőséget, és adjon meg egy táblanevet.

    Jegyzet

    A táblázatnevek legfeljebb 1024 karakter hosszúságúak lehetnek, például szóközök, alfanumerikusak, kötőjelek és aláhúzásjelek. A speciális karakterek nem támogatottak.

  2. A(z) URI mezőbe illessze be egyetlen tároló vagy egyedi objektum kapcsolati karakterláncát az alábbi formátumban.

    Bucket: https://BucketName.s3.RegionName.amazonaws.com;AwsCredentials=AwsAccessID,AwsSecretKey

    Szükség esetén gyűjtőszűrőket is alkalmazhat az adatok adott fájlkiterjesztés szerinti szűréséhez.

    A konfigurálás lap képernyőképe új tábla hozzáadásával és egy Amazon S3 kapcsolat string beillesztve.

  3. Válassza a Következőlehetőséget.

Ellenőriz

Megnyílik a Vizsgálat lap az adatok előnézetével.

A betöltési folyamat befejezéséhez válassza a Befejezéslehetőséget.

Az ellenőrzés fül képernyőképe.

Tetszés szerint:

  • Válassza Parancsmegjelenítő a bemenetekből létrehozott automatikus parancsok megtekintéséhez és másolásához.
  • A sémadefiníciós fájl legördülő listából módosíthatja azt a fájlt, amelyből a séma származik.
  • Az automatikusan kikövetkezési adatformátum módosításához válassza ki a kívánt formátumot a legördülő listából. További információ: Real-Time Intelligenceáltal támogatott adatformátumok.
  • Oszlopok szerkesztése.
  • Fedezze fel a speciális beállításokat azadattípus alapján.

Oszlopok szerkesztése

Jegyzet

  • Táblázatos formátumok (CSV, TSV, PSV) esetén nem lehet kétszer leképezni az oszlopokat. Ha meglévő oszlopra szeretne megfeleltetni, először törölje az új oszlopot.
  • Meglévő oszloptípus nem módosítható. Ha más formátumú oszlopra próbál megfeleltetni, előfordulhat, hogy üres oszlopokat fog létrehozni.

A táblázatban végrehajtott módosítások a következő paraméterektől függnek:

  • tábla típusa új vagy meglévő
  • leképezési típusa új vagy meglévő
Táblázat típusa Leképezés típusa Elérhető módosítások
Új tábla Új leképezés Oszlop átnevezése, adattípus módosítása, adatforrás módosítása, leképezés átalakítása, oszlop hozzáadása, oszlop törlése
Meglévő tábla Új leképezés Oszlop hozzáadása (amelyen ezután módosíthatja az adattípust, átnevezheti és frissítheti)
Meglévő tábla Meglévő leképezés egyik sem

Szerkesztésre megnyitott oszlopok képernyőképe.

Leképezési átalakítások

Egyes adatformátum-leképezések (Parquet, JSON és Avro) támogatják az egyszerű betöltési idejű átalakításokat. A leképezési átalakítások alkalmazásához hozzon létre vagy frissítsen egy oszlopot a Oszlopok szerkesztése ablakban.

Leképezési átalakítások egy string típusú vagy datetime típusú oszlopon végezhetők el, és a forrásnál az adattípus int vagy long. A támogatott leképezési átalakítások a következők:

  • DátumIdőUnixMásodpercekből
  • DátumIdőUnixMilliszekundumból
  • DateTimeFromUnixMicroseconds
  • UnixNanosekundumbólDátumIdő

Speciális beállítások adattípus alapján

táblázatos (CSV, TSV, PSV):

  • Ha táblázatos formátumokat használ egy meglévő táblázatos, kiválaszthatja Speciális>Táblaséma megőrzéselehetőséget. A táblázatos adatok nem feltétlenül tartalmazzák a forrásadatok meglévő oszlopokhoz való leképezéséhez használt oszlopneveket. Ha ez a beállítás be van jelölve, a leképezés sorrendben történik, és a táblaséma változatlan marad. Ha ez a beállítás nincs bejelölve, a rendszer az adatstruktúrától függetlenül új oszlopokat hoz létre a bejövő adatokhoz.

  • Ha az első sort oszlopnévként szeretné használni, válassza Speciális>Az első sor oszlopfejléc.

    Speciális CSV-beállítások képernyőképe.

JSON

  • A JSON-adatok oszlopelosztásának meghatározásához válassza a Haladó>Beágyazott szintek, 1 és 100 között.

  • Ha a Speciális>lehetőséget választja a hibás JSON-sorok kihagyásával, az adatok JSON formátumban kerülnek betöltésre. Ha bejelöletlenül hagyja ezt a jelölőnégyzetet, az adatok több-json formátumban lesznek betöltve.

    Speciális JSON-beállítások képernyőképe.

Összefoglalás

Az Adat-előkészítés ablakban mind a három lépés zöld pipával van megjelölve, amikor az adatbetöltés sikeresen befejeződik. Kiválaszthat egy kártyát a lekérdezéshez, elvetheti a betöltött adatokat, vagy megtekintheti a betöltési összegzés irányítópultját.

A sikeres betöltéssel rendelkező összefoglaló oldal képernyőképe.

Kapcsolódó tartalom