A Source projekthatókörű kapcsolati identitás. Minden illesztőprogram feloldja, hogy az aktuális környezetben mely metaadat-, előnézeti, lekérdezési, átviteli, írási, törlési vagy minőségi műveletek biztonságosak.
Adatműveletek
Alakítsa a külön források adatait ismételhető munkává.
Tekintse át a csatlakoztatott adatbázisokat, készítsen elő fájlokat és táblákat, és szervezze meg a támogatott adatátviteleket és minőségellenőrzéseket. Ismételt munka során tartsa együtt a definíciót, a futás állapotát és a rögzített eredményt.
Az SQL Console ellenőrzött projekt- és forráskörnyezetet, csak olvasható szabályokat és korlátozott eredményeket használ. A lekérdezésből mentett lekérdezés, Dataset vagy vizualizációs alap lehet. A számozott lapok átnevezhetők és automatikusan menthetők. A verzióütközések felismerhetők, így a párhuzamos változások nem írják felül észrevétlenül egymást; a tervezet a böngésző elhagyásakor is megmarad.
A feltöltés és a biztonságos URL-importálás először módosíthatatlan Drive-verziót hoz létre SHA-256-azonosítóval. A Preflight feloldja a tartalmat, az elválasztójelet, az idézőjelet, a fejlécet és a sémát, mielőtt bármilyen átalakítás sorba kerülne.
Az ellenőrzött CSV, az elválasztott UTF-8-szöveg, a JSON-objektumrekordok és az XLSX első munkalapjának tartalma új fizikai táblaverzióba töltődik. A stabil alias csak az eredmény sikeres ellenőrzése után változik meg.
A nyilvános katalógus az ExecuteQ, QueryTransfer, DirectStreamTransfer, SchemaTransfer, TransformSchema, DeleteSchema, NoSqlDelete, DataQualityRule és Master műveleteket teszi elérhetővé. Minden indítás tartósan rögzített PipelineRunt hoz létre; a rejtett örökölt definíciók nem válnak támogatottá pusztán azért, mert egy régi rekord továbbra is létezik.
A sorban álló, futó, sikertelen, részleges, megszakított és helyreállított munka különálló marad. A felügyelet megszakadása nem bizonyítja, hogy az állapotmódosítás nem érte el a célt. A Pipeline-nak nincs általános megszakítási, újrapróbálkozási, visszagörgetési vagy pontosan egyszeri végrehajtási szerződése; továbbra is kötelezők a legkisebb jogosultságú adatbázis-szerepkörök.
A Sources képességeket tesz elérhetővé, nem feltételezéseket.
A Source projekthatókörű kapcsolati identitás. Minden illesztőprogram feloldja, hogy az aktuális környezetben mely metaadat-, előnézeti, lekérdezési, átviteli, írási, törlési vagy minőségi műveletek biztonságosak.
Vizsgálja az adatokat az SQL-tervezet elvesztése nélkül.
Az SQL Console ellenőrzött projekt- és forráskörnyezetet, csak olvasható szabályokat és korlátozott eredményeket használ. A lekérdezésből mentett lekérdezés, Dataset vagy vizualizációs alap lehet. A számozott lapok átnevezhetők és automatikusan menthetők. A verzióütközések felismerhetők, így a párhuzamos változások nem írják felül észrevétlenül egymást; a tervezet a böngésző elhagyásakor is megmarad.
A sikeres vagy sikertelen szolgáltatásvégrehajtást QueryExecutionként őrzi meg a rendszer, amikor egy érvényes Source- és SQL-kérés végrehajtásba kerül.
A SavedQuery szerkeszthető SQL-t őriz meg; a Datasetté történő előléptetés külön irányított adateszközt és származási hivatkozást hoz létre.
A Source dialektusának megjegyzésszintaxisát és a biztonságos, csak olvasható kezelést közös végrehajtási határok normalizálják egyetlen, kizárólag PostgreSQL-re épülő burkoló helyett.
A fájlok megőrzik eredeti azonosságukat.
A feltöltés és a biztonságos URL-importálás először módosíthatatlan Drive-verziót hoz létre SHA-256-azonosítóval. A Preflight feloldja a tartalmat, az elválasztójelet, az idézőjelet, a fejlécet és a sémát, mielőtt bármilyen átalakítás sorba kerülne.
A CSV, TXT, TSV, PSV, DSV, DAT, DATA, LOG, JSON és XLSX formátumot a rendszer formátumtudatos vizsgálattal ismeri fel.
Más kiterjesztésű szövegfájl is követheti az elválasztott szöveges útvonalat, ha a korlátozott tartalombesorolás ezt igazolja.
Az elválasztójel, a vezérlőbájt, az idézőjel/escape, a fejlécdöntés, az előnézeti sorok és a figyelmeztetések láthatók maradnak a felhasználói megerősítéshez.
A fájlnév- és stabilalias-ütközéseket a rendszer kifejezetten feloldja és rögzíti ahelyett, hogy észrevétlenül felülírna egy meglévő objektumot.
A publikálás a stabil alias szintjén atomi.
Az ellenőrzött CSV, az elválasztott UTF-8-szöveg, a JSON-objektumrekordok és az XLSX első munkalapjának tartalma új fizikai táblaverzióba töltődik. A stabil alias csak az eredmény sikeres ellenőrzése után változik meg.
-
A módosíthatatlan bemenet ellenőrzése
A fájl identitását, méretét, ellenőrző összegét, az elemző döntését és a sorstruktúrát a betöltés előtt ellenőrzi a rendszer.
-
Árnyék-táblaverzió létrehozása
Az új fizikai verzió el van különítve az aktuálisan látható stabil aliastól.
-
Betöltés, profilozás és ellenőrzés
A sor-/oszlopszámokat, a sémát és a korlátozott mintákat rögzíti a rendszer; a részleges betöltés soha nem válik az aktuális táblává.
-
Előléptetés vagy megtisztítás
Csak ellenőrzött eredmény helyezi át az aliast; hiba esetén az előző verzió elérhető marad, a rendszer pedig rögzíti a megkísérelt futást.
A System Sandbox Source az aktuális Project sémája alatt teszi elérhetővé a kezelt aliasokat az SQL Console számára.
Az átnevezés és a visszaállítás auditálható életciklus-változásokat hoz létre; a visszaállítás szándékosan újra elérhetővé tehet egy korábbi sémaszerződést.
A Pipeline őszintén mutatja a ténylegesen megvalósított végrehajtást.
A nyilvános katalógus az ExecuteQ, QueryTransfer, DirectStreamTransfer, SchemaTransfer, TransformSchema, DeleteSchema, NoSqlDelete, DataQualityRule és Master műveleteket teszi elérhetővé. Minden indítás tartósan rögzített PipelineRunt hoz létre; a rejtett örökölt definíciók nem válnak támogatottá pusztán azért, mert egy régi rekord továbbra is létezik.
A Master támogatja a rendezett feladatokat, várakozásokat és minőségi kapukat, valamint a soros vagy párhuzamos kötegeket.
A folytatás az előző gyermekállapotból új futást hoz létre; nem írja át az eredeti futást.
A definíció módosításakor rögzített feladatverzió jön létre. A kézi indítások, az ütemezett futások, az újrapróbálkozások és az alfeladatok a végrehajtásra küldés előtt rögzítik a kiválasztott verziót.
Minden jövőbeli ütemezett futás új hozzáférési ellenőrzések után választja ki az aktuális verziót. Az ismétlődő hatások megelőzése és a változtatások visszavonása továbbra is a művelettől, a csatlakozótól, a szabályzattól és az újrapróbálkozás igazolt biztonságától függ.
A hibaállapot az eredmény része.
A sorban álló, futó, sikertelen, részleges, megszakított és helyreállított munka különálló marad. A felügyelet megszakadása nem bizonyítja, hogy az állapotmódosítás nem érte el a célt. A Pipeline-nak nincs általános megszakítási, újrapróbálkozási, visszagörgetési vagy pontosan egyszeri végrehajtási szerződése; továbbra is kötelezők a legkisebb jogosultságú adatbázis-szerepkörök.
Következő lépés
Kezdje azzal a folyamattal, amelyben nincs helye bizonytalanságnak.
Mutassa be a fontos rendszereket, felelősöket, szabályokat, teljesítési kötelezettségeket és bizonyítási követelményeket.
Kritikus folyamat egyeztetéseRöviden
Mire szolgál az advanexus ezen része?
Tekintse át a csatlakoztatott adatbázisokat, készítsen elő fájlokat és táblákat, és szervezze meg a támogatott adatátviteleket és minőségellenőrzéseket. Ismételt munka során tartsa együtt a definíciót, a futás állapotát és a rögzített eredményt.
Mit ellenőrizzek használat előtt?
Egy jövőbeli ütemezési időpont friss befogadási ellenőrzések után az akkor aktuális JobVersion revíziót rögzíti; az exactly-once üzleti hatások és a visszaállítás továbbra is a végrehajtótól, a csatlakozótól, a szabályzattól és a bizonyított idempotenciától függnek.