Source je identitet konekcije u opsegu Project-a. Svaki drajver određuje koje operacije nad metapodacima, pregledom, upitima, prenosom, upisom, brisanjem ili kvalitetom mogu bezbedno da rade u trenutnom okruženju.
Operacije nad podacima
Povežite, pregledajte, transformišite i izvršite uz eksplicitan opseg i kontekst izvršenja.
Pređite od heterogenih Sources i kontrolisanih fajlova do upravljanih tabela, provera kvaliteta i trajne istorije izvršenja bez svođenja svih konektora na isti model upita ili upisa.
Kontekst Source-a i Project-a pod kontrolom servera, politika samo za čitanje i ograničeni rezultati podržavaju otkrivanje pre nego što upit postane SavedQuery, Dataset ili ulaz za vizualizaciju. Numerisani tabovi su trajni radni prostori sa preimenovanjem, automatskim čuvanjem i optimističkom obradom revizija, pa napuštanje pregledača ne odbacuje neprimetno trenutni nacrt.
Otpremanje i bezbedan uvoz sa URL-a prvo kreiraju nepromenljivu Drive verziju sa SHA-256 identitetom. Preliminarna provera utvrđuje sadržaj, razdvajač, navodnik, zaglavlje i šemu pre slanja transformacije u red.
Validirani CSV, UTF-8 tekst razdvojen razdvajačem, zapisi JSON objekata i prvi XLSX radni list učitavaju se u novu fizičku verziju tabele. Stabilni alias menja se tek kada validacija rezultata uspe.
Javni katalog izlaže ExecuteQ, QueryTransfer, DirectStreamTransfer, SchemaTransfer, TransformSchema, DeleteSchema, NoSqlDelete, DataQualityRule i Master. Svako slanje kreira sačuvani PipelineRun; skrivene nasleđene definicije ne postaju podržane samo zato što stari zapis i dalje postoji.
Rad na čekanju, u toku, neuspešan, delimičan, otkazan i oporavljen mora ostati jasno različit. Prekid nadzora nije dokaz da operacija koja menja stanje nikada nije stigla do cilja. Pipeline trenutno nema univerzalni ugovor za otkazivanje, ponovni pokušaj, vraćanje ili obradu tačno jednom, a uloge baze sa najmanjim potrebnim privilegijama ostaju obavezne.
Sources izlažu sposobnosti, a ne pretpostavke.
Source je identitet konekcije u opsegu Project-a. Svaki drajver određuje koje operacije nad metapodacima, pregledom, upitima, prenosom, upisom, brisanjem ili kvalitetom mogu bezbedno da rade u trenutnom okruženju.
SQL Console služi istraživanju, a ne administraciji baze.
Kontekst Source-a i Project-a pod kontrolom servera, politika samo za čitanje i ograničeni rezultati podržavaju otkrivanje pre nego što upit postane SavedQuery, Dataset ili ulaz za vizualizaciju. Numerisani tabovi su trajni radni prostori sa preimenovanjem, automatskim čuvanjem i optimističkom obradom revizija, pa napuštanje pregledača ne odbacuje neprimetno trenutni nacrt.
Uspešno ili neuspešno izvršenje servisa čuva se kao QueryExecution kada važeći Source i SQL zahtev uđu u izvršenje.
SavedQuery čuva izmenjivi SQL; promocija Dataset-a kreira zaseban upravljani resurs podataka i referencu porekla.
Sintaksa komentara dijalekta Source-a i bezbedna obrada samo za čitanje normalizuju se kroz zajedničke granice izvršenja, a ne kroz jedan omotač samo za PostgreSQL.
Fajlovi zadržavaju originalni identitet.
Otpremanje i bezbedan uvoz sa URL-a prvo kreiraju nepromenljivu Drive verziju sa SHA-256 identitetom. Preliminarna provera utvrđuje sadržaj, razdvajač, navodnik, zaglavlje i šemu pre slanja transformacije u red.
CSV, TXT, TSV, PSV, DSV, DAT, DATA, LOG, JSON i XLSX prepoznaju se pregledom svesnim formata.
Tekstualni fajl druge ekstenzije može pratiti putanju delimitiranog teksta kada ga ograničena klasifikacija sadržaja potvrdi.
Razdvajač, kontrolni bajt, navodnik i znak za izbegavanje, odluka o zaglavlju, redovi pregleda i upozorenja ostaju vidljivi za potvrdu korisnika.
Kolizije imena fajla i stabilnog aliasa rešavaju se eksplicitno i beleže umesto neprimetnog prepisivanja postojećeg objekta.
Objavljivanje je atomsko na stabilnom aliasu.
Validirani CSV, UTF-8 tekst razdvojen razdvajačem, zapisi JSON objekata i prvi XLSX radni list učitavaju se u novu fizičku verziju tabele. Stabilni alias menja se tek kada validacija rezultata uspe.
-
Potvrdite nepromenljivi ulaz
Identitet fajla, veličina, kontrolni zbir, odluka parser-a i struktura redova proveravaju se pre učitavanja.
-
Kreirajte pomoćnu verziju tabele
Nova fizička verzija izolovana je od trenutno vidljivog stabilnog aliasa.
-
Učitajte, profilišite i potvrdite
Broj redova/kolona, šema i ograničeni uzorci se beleže; delimično učitavanje nikada ne postaje trenutna tabela.
-
Promovišite ili očistite
Samo potvrđeni rezultat pomera alias; neuspeh zadržava prethodnu verziju dostupnom i beleži pokušano izvršenje.
System Sandbox Source izlaže upravljane aliase SQL Console-u pod trenutnom Project šemom.
Preimenovanje i vraćanje kreiraju proverljive promene životnog ciklusa; vraćanje može namerno ponovo izložiti raniji ugovor šeme.
Pipeline iskreno prikazuje implementirano izvršenje.
Javni katalog izlaže ExecuteQ, QueryTransfer, DirectStreamTransfer, SchemaTransfer, TransformSchema, DeleteSchema, NoSqlDelete, DataQualityRule i Master. Svako slanje kreira sačuvani PipelineRun; skrivene nasleđene definicije ne postaju podržane samo zato što stari zapis i dalje postoji.
Master podržava uređene poslove, čekanja i kontrole kvaliteta, kao i serijske ili paralelne grupe.
Nastavak kreira novo izvršenje iz prethodnog statusa podređenog koraka; ne prepisuje originalno izvršenje.
Definicije poslova su promenljive i trenutno nemaju nepromenljivi JobVersion.
Namera intervalnog ili cron Schedule-a se čuva, ali ne postoji aktivni pokretač rasporeda niti pouzdan proračun sledećeg izvršenja.
Stanje neuspeha deo je rezultata.
Rad na čekanju, u toku, neuspešan, delimičan, otkazan i oporavljen mora ostati jasno različit. Prekid nadzora nije dokaz da operacija koja menja stanje nikada nije stigla do cilja. Pipeline trenutno nema univerzalni ugovor za otkazivanje, ponovni pokušaj, vraćanje ili obradu tačno jednom, a uloge baze sa najmanjim potrebnim privilegijama ostaju obavezne.
Sledeći korak
Počnite od toka koji ne trpi nejasnoće.
Opišite važne sisteme, odgovorna lica, pravila, obaveze isporuke i zahteve za dokazivanje.
Razgovarajte o kritičnom toku