Source on projektikohtainen yhteysidentiteetti. Kukin ajuri ratkaisee, mitkä metatieto-, esikatselu-, kysely-, siirto-, kirjoitus-, poisto- tai laatutoiminnot ovat turvallisia nykyisessä ympäristössä.
Dataoperaatiot
Yhdistä, tarkasta, muunna ja suorita nimenomaisessa laajuus- ja suorituskontekstissa.
Siirry erilaisista Sources- ja hallituista tiedostoista hallittuihin tauluihin, laatutarkistuksiin ja tallennettuun suoritushistoriaan latistamatta kaikkia liitäntöjä samaan kysely- tai kirjoitusmalliin.
Palvelimen hallitsema lähde- ja projektikonteksti, vain luku -käytäntö ja rajatut tulokset tukevat tutkimista ennen kuin kyselystä tulee SavedQuery, Dataset tai visualisoinnin syöte. Numeroiduissa välilehdissä on pysyvä työtila, uudelleennimeäminen, automaattitallennus ja optimistinen revisiohallinta, joten selaimesta poistuminen ei hävitä luonnosta hiljaisesti.
Lataus tai turvallinen URL-tuonti luo ensin muuttumattoman Drive-version SHA-256-tunnisteella. Esitarkistus ratkaisee sisällön, erottimen, lainausmerkin, otsakerivin ja skeeman ennen muunnoksen jonotusta.
Validoitu CSV, eroteltu UTF-8-teksti, JSON-objektitietueet ja ensimmäisen XLSX-laskentataulukon sisältö ladataan uuteen fyysiseen tauluversioon. Vakaa alias vaihtuu vasta tuloksen validoinnin onnistuttua.
Julkinen luettelo sisältää ExecuteQ-, QueryTransfer-, DirectStreamTransfer-, SchemaTransfer-, TransformSchema-, DeleteSchema-, NoSqlDelete-, DataQualityRule- ja Master-tyypit. Jokainen lähetys luo tallennetun PipelineRunin; piilotettu legacy-määritelmä ei muutu tuetuksi vain siksi, että vanha tietue on yhä olemassa.
Jonotettu, käynnissä, epäonnistunut, osittainen, peruutettu ja palautettu työ on voitava erottaa. Valvontakatkos ei todista, ettei tilaa muuttava toiminto saavuttanut kohdettaan. Pipelinella ei tällä hetkellä ole yleistä peruutus-, uudelleenyritys-, palautus- tai taatun kertatoimituksen sopimusta, ja vähimpien oikeuksien tietokantaroolit ovat pakollisia.
Sources näyttää kyvykkyydet, ei oletuksia.
Source on projektikohtainen yhteysidentiteetti. Kukin ajuri ratkaisee, mitkä metatieto-, esikatselu-, kysely-, siirto-, kirjoitus-, poisto- tai laatutoiminnot ovat turvallisia nykyisessä ympäristössä.
SQL Console on tutkimista, ei tietokannan ylläpitoa.
Palvelimen hallitsema lähde- ja projektikonteksti, vain luku -käytäntö ja rajatut tulokset tukevat tutkimista ennen kuin kyselystä tulee SavedQuery, Dataset tai visualisoinnin syöte. Numeroiduissa välilehdissä on pysyvä työtila, uudelleennimeäminen, automaattitallennus ja optimistinen revisiohallinta, joten selaimesta poistuminen ei hävitä luonnosta hiljaisesti.
Onnistunut tai epäonnistunut palvelusuoritus säilytetään QueryExecutionina, kun kelvollinen Source- ja SQL-pyyntö siirtyy suoritukseen.
SavedQuery säilyttää muokattavan SQL:n; Dataset-ylennys luo erillisen hallitun dataresurssin ja polveutumisviitteen.
Lähdemurteen kommenttisyntaksi ja turvallinen vain luku -käsittely normalisoidaan yhteisillä suoritusrajoilla yhden PostgreSQL-kääreen sijaan.
Tiedostot säilyttävät alkuperäisen identiteettinsä.
Lataus tai turvallinen URL-tuonti luo ensin muuttumattoman Drive-version SHA-256-tunnisteella. Esitarkistus ratkaisee sisällön, erottimen, lainausmerkin, otsakerivin ja skeeman ennen muunnoksen jonotusta.
CSV, TXT, TSV, PSV, DSV, DAT, DATA, LOG, JSON ja XLSX tunnistetaan formaattitietoisella tarkastuksella.
Muulla päätteellä varustettu tekstitiedosto voi käyttää erotellun tekstin polkua, kun rajattu sisältöluokitus varmentaa sen.
Erotin, kontrollitavu, lainaus/escape, otsakepäätös, esikatselurivit ja varoitukset näkyvät käyttäjän vahvistusta varten.
Tiedostonimi- ja vakaan aliasen törmäykset ratkaistaan nimenomaisesti ja tallennetaan; olemassa olevaa objektia ei ylikirjoiteta hiljaisesti.
Julkaisu on atominen vakaassa aliaksessa.
Validoitu CSV, eroteltu UTF-8-teksti, JSON-objektitietueet ja ensimmäisen XLSX-laskentataulukon sisältö ladataan uuteen fyysiseen tauluversioon. Vakaa alias vaihtuu vasta tuloksen validoinnin onnistuttua.
-
Validoi muuttumaton syöte
Tiedoston identiteetti, koko, tarkistussumma, parseripäätös ja rivirakenne tarkistetaan ennen latausta.
-
Luo varjotauluversio
Uusi fyysinen versio eristetään parhaillaan näkyvästä vakaasta aliaksesta.
-
Lataa, profiloi ja validoi
Rivi- ja sarakemäärät, skeema ja rajatut näytteet tallennetaan; osittainen lataus ei koskaan muutu nykyiseksi tauluksi.
-
Ylennä tai siivoa
Vain validoitu tulos siirtää aliaksen. Virhe säilyttää edellisen version saatavilla ja kirjaa yrityksen.
System Sandbox Source näyttää hallitut aliakset SQL Consolessa nykyisen Project-skeeman alla.
Uudelleennimeäminen ja palautus luovat auditoitavia elinkaarimuutoksia; palautus voi tarkoituksellisesti tuoda aiemman skeemasopimuksen uudelleen näkyviin.
Pipeline näyttää toteutetun suorituksen rehellisesti.
Julkinen luettelo sisältää ExecuteQ-, QueryTransfer-, DirectStreamTransfer-, SchemaTransfer-, TransformSchema-, DeleteSchema-, NoSqlDelete-, DataQualityRule- ja Master-tyypit. Jokainen lähetys luo tallennetun PipelineRunin; piilotettu legacy-määritelmä ei muutu tuetuksi vain siksi, että vanha tietue on yhä olemassa.
Master tukee järjestettyjä töitä, odotuksia ja laatuportteja sekä sarja- tai rinnakkaiseriä.
Jatkaminen luo uuden suorituksen aiemmasta lapsitilasta; se ei kirjoita alkuperäistä suoritusta uudelleen.
Job-määritelmät ovat muuttuvia, eikä muuttumatonta JobVersionia vielä ole.
Interval/cron Schedule -aikomus tallennetaan, mutta aktiivista ajastuslähetintä tai luotettavaa seuraavan suorituksen laskentaa ei ole.
Virhetila kuuluu tulokseen.
Jonotettu, käynnissä, epäonnistunut, osittainen, peruutettu ja palautettu työ on voitava erottaa. Valvontakatkos ei todista, ettei tilaa muuttava toiminto saavuttanut kohdettaan. Pipelinella ei tällä hetkellä ole yleistä peruutus-, uudelleenyritys-, palautus- tai taatun kertatoimituksen sopimusta, ja vähimpien oikeuksien tietokantaroolit ovat pakollisia.
Seuraava vaihe
Aloita työnkulusta, jossa epäselvyyksille ei ole varaa.
Tuo mukaan olennaiset järjestelmät, vastuuhenkilöt, säännöt, toimitusvelvoitteet ja todentamisvaatimukset.
Keskustele kriittisestä työnkulusta