Source on projektikohtainen yhteysidentiteetti. Kukin ajuri ratkaisee, mitkä metatieto-, esikatselu-, kysely-, siirto-, kirjoitus-, poisto- tai laatutoiminnot ovat turvallisia nykyisessä ympäristössä.
Dataoperaatiot
Muuta eri lähteiden tiedot toistettavaksi työksi.
Tutki yhdistettyjä tietokantoja, valmistele tiedostoja ja tauluja sekä järjestä tuettuja tiedonsiirtoja ja laatutarkistuksia. Säilytä työn määritelmä, suoritustila ja kirjattu tulos yhdessä, kun työ toistetaan.
SQL Console käyttää tarkistettua projekti- ja lähdekontekstia, vain lukemisen sääntöjä ja rajattuja tuloksia. Kyselystä voi tulla tallennettu kysely, Dataset tai visualisoinnin pohja. Numeroituja välilehtiä voi nimetä ja tallentaa automaattisesti. Versioristiriidat tunnistetaan, jotta samanaikaiset muutokset eivät ylikirjoitu huomaamatta. Luonnos säilyy selaimesta poistuttaessa.
Lataus tai turvallinen URL-tuonti luo ensin muuttumattoman Drive-version SHA-256-tunnisteella. Esitarkistus ratkaisee sisällön, erottimen, lainausmerkin, otsakerivin ja skeeman ennen muunnoksen jonotusta.
Validoitu CSV, eroteltu UTF-8-teksti, JSON-objektitietueet ja ensimmäisen XLSX-laskentataulukon sisältö ladataan uuteen fyysiseen tauluversioon. Vakaa alias vaihtuu vasta tuloksen validoinnin onnistuttua.
Julkinen luettelo sisältää ExecuteQ-, QueryTransfer-, DirectStreamTransfer-, SchemaTransfer-, TransformSchema-, DeleteSchema-, NoSqlDelete-, DataQualityRule- ja Master-tyypit. Jokainen lähetys luo tallennetun PipelineRunin; piilotettu legacy-määritelmä ei muutu tuetuksi vain siksi, että vanha tietue on yhä olemassa.
Jonotettu, käynnissä, epäonnistunut, osittainen, peruutettu ja palautettu työ on voitava erottaa. Valvontakatkos ei todista, ettei tilaa muuttava toiminto saavuttanut kohdettaan. Pipelinella ei tällä hetkellä ole yleistä peruutus-, uudelleenyritys-, palautus- tai taatun kertatoimituksen sopimusta, ja vähimpien oikeuksien tietokantaroolit ovat pakollisia.
Sources näyttää kyvykkyydet, ei oletuksia.
Source on projektikohtainen yhteysidentiteetti. Kukin ajuri ratkaisee, mitkä metatieto-, esikatselu-, kysely-, siirto-, kirjoitus-, poisto- tai laatutoiminnot ovat turvallisia nykyisessä ympäristössä.
Tutki tietoja menettämättä SQL-luonnosta.
SQL Console käyttää tarkistettua projekti- ja lähdekontekstia, vain lukemisen sääntöjä ja rajattuja tuloksia. Kyselystä voi tulla tallennettu kysely, Dataset tai visualisoinnin pohja. Numeroituja välilehtiä voi nimetä ja tallentaa automaattisesti. Versioristiriidat tunnistetaan, jotta samanaikaiset muutokset eivät ylikirjoitu huomaamatta. Luonnos säilyy selaimesta poistuttaessa.
Onnistunut tai epäonnistunut palvelusuoritus säilytetään QueryExecutionina, kun kelvollinen Source- ja SQL-pyyntö siirtyy suoritukseen.
SavedQuery säilyttää muokattavan SQL:n; Dataset-ylennys luo erillisen hallitun dataresurssin ja polveutumisviitteen.
Lähdemurteen kommenttisyntaksi ja turvallinen vain luku -käsittely normalisoidaan yhteisillä suoritusrajoilla yhden PostgreSQL-kääreen sijaan.
Tiedostot säilyttävät alkuperäisen identiteettinsä.
Lataus tai turvallinen URL-tuonti luo ensin muuttumattoman Drive-version SHA-256-tunnisteella. Esitarkistus ratkaisee sisällön, erottimen, lainausmerkin, otsakerivin ja skeeman ennen muunnoksen jonotusta.
CSV, TXT, TSV, PSV, DSV, DAT, DATA, LOG, JSON ja XLSX tunnistetaan formaattitietoisella tarkastuksella.
Muulla päätteellä varustettu tekstitiedosto voi käyttää erotellun tekstin polkua, kun rajattu sisältöluokitus varmentaa sen.
Erotin, kontrollitavu, lainaus/escape, otsakepäätös, esikatselurivit ja varoitukset näkyvät käyttäjän vahvistusta varten.
Tiedostonimi- ja vakaan aliasen törmäykset ratkaistaan nimenomaisesti ja tallennetaan; olemassa olevaa objektia ei ylikirjoiteta hiljaisesti.
Julkaisu on atominen vakaassa aliaksessa.
Validoitu CSV, eroteltu UTF-8-teksti, JSON-objektitietueet ja ensimmäisen XLSX-laskentataulukon sisältö ladataan uuteen fyysiseen tauluversioon. Vakaa alias vaihtuu vasta tuloksen validoinnin onnistuttua.
-
Validoi muuttumaton syöte
Tiedoston identiteetti, koko, tarkistussumma, parseripäätös ja rivirakenne tarkistetaan ennen latausta.
-
Luo varjotauluversio
Uusi fyysinen versio eristetään parhaillaan näkyvästä vakaasta aliaksesta.
-
Lataa, profiloi ja validoi
Rivi- ja sarakemäärät, skeema ja rajatut näytteet tallennetaan; osittainen lataus ei koskaan muutu nykyiseksi tauluksi.
-
Ylennä tai siivoa
Vain validoitu tulos siirtää aliaksen. Virhe säilyttää edellisen version saatavilla ja kirjaa yrityksen.
System Sandbox Source näyttää hallitut aliakset SQL Consolessa nykyisen Project-skeeman alla.
Uudelleennimeäminen ja palautus luovat auditoitavia elinkaarimuutoksia; palautus voi tarkoituksellisesti tuoda aiemman skeemasopimuksen uudelleen näkyviin.
Pipeline näyttää toteutetun suorituksen rehellisesti.
Julkinen luettelo sisältää ExecuteQ-, QueryTransfer-, DirectStreamTransfer-, SchemaTransfer-, TransformSchema-, DeleteSchema-, NoSqlDelete-, DataQualityRule- ja Master-tyypit. Jokainen lähetys luo tallennetun PipelineRunin; piilotettu legacy-määritelmä ei muutu tuetuksi vain siksi, että vanha tietue on yhä olemassa.
Master tukee järjestettyjä töitä, odotuksia ja laatuportteja sekä sarja- tai rinnakkaiseriä.
Jatkaminen luo uuden suorituksen aiemmasta lapsitilasta; se ei kirjoita alkuperäistä suoritusta uudelleen.
Määritelmän muutos luo tehtävästä kiinteän version. Manuaaliset käynnistykset, ajastukset, uudelleenyritykset ja alitehtävät tallentavat valitun version ennen lähettämistä suoritukseen.
Jokainen tuleva ajastettu suoritus valitsee ajantasaisen version uusien käyttöoikeustarkistusten jälkeen. Päällekkäisten vaikutusten estäminen ja muutosten peruuttaminen riippuvat edelleen toiminnosta, liittimestä, käytännöstä ja uudelleenyritysten todennetusta turvallisuudesta.
Virhetila kuuluu tulokseen.
Jonotettu, käynnissä, epäonnistunut, osittainen, peruutettu ja palautettu työ on voitava erottaa. Valvontakatkos ei todista, ettei tilaa muuttava toiminto saavuttanut kohdettaan. Pipelinella ei tällä hetkellä ole yleistä peruutus-, uudelleenyritys-, palautus- tai taatun kertatoimituksen sopimusta, ja vähimpien oikeuksien tietokantaroolit ovat pakollisia.
Seuraava vaihe
Aloita työnkulusta, jossa epäselvyyksille ei ole varaa.
Tuo mukaan olennaiset järjestelmät, vastuuhenkilöt, säännöt, toimitusvelvoitteet ja todentamisvaatimukset.
Keskustele kriittisestä työnkulustaLyhyesti
Mitä tämä advanexuksen osa tekee?
Tutki yhdistettyjä tietokantoja, valmistele tiedostoja ja tauluja sekä järjestä tuettuja tiedonsiirtoja ja laatutarkistuksia. Säilytä työn määritelmä, suoritustila ja kirjattu tulos yhdessä, kun työ toistetaan.
Mitä minun tulee tarkistaa ennen käyttöä?
Tuleva ajastushetki kiinnittää uusien hyväksyntätarkistusten jälkeen tuolloin ajantasaisen JobVersion-revision; täsmälleen kerran toteutuvat liiketoimintavaikutukset ja palautus riippuvat yhä suorittajasta, liittimestä, käytännöstä ja todennetusta idempotenssista.