データ品質

品質を、実行後の文書ではなく実行そのものの一部にします。

Data Quality は Source 指向の期待値を、明確な合格条件、永続化された QualityRun、制限された失敗証拠を持つ再実行可能な SQL アサーションへ変換します。

Data Quality は Source 指向の期待値を、明確な合格条件、永続化された QualityRun、制限された失敗証拠を持つ再実行可能な SQL アサーションへ変換します。
明示的な期待値から始めます。

視覚的なテンプレートは NULL、空、一意、行件数、値範囲、パターン、受け入れ済みの値、参照整合性チェックを対象とします。合格条件が正確に定義されている場合、カスタム SQL でより複雑なアサーションに対応できます。

プレビュー、保存、実行は別のアクションです。

プレビューは現在の解釈をテストします。保存は変更可能なルールを作成または変更します。今すぐ実行または対応済みの Pipeline ステップは永続的な QualityRun を作成し、失敗時には制限された Finding を作成します。

品質評価は実装済みフローの制御条件にできます。

単独の Data Quality ジョブまたは Master 制御ステップは、失敗時に対応済みの下流の作業を停止できます。正確な PipelineRun、QualityRun、トリガーは別記録のままです。

最小権限は不可欠です。

カスタム SQL には一律の独立した読み取り専用の単一ステートメントのパーサーがありません。以前の結果は現在の下書きを証明しないため、SQL Console ルールモーダルでも SQL 編集後にオペレーターの再実行が必要です。Source には最小権限の読み取り専用認証情報を使用し、失敗サンプルからシークレットと不要な個人データを除外すべきです。

現在の境界は隠しません。

QualityRule は変更可能なで、DatasetVersion に直接固定されません。スイート実行、自動化された修復、完全な Finding 是正、確認済みの通知提供は現在のケイパビリティではありません。管理された Sandbox テーブルは非表示の品質経路ではなく、Project の System Sandbox Source を通じて参加します。

明示的な期待値から始めます。

視覚的なテンプレートは NULL、空、一意、行件数、値範囲、パターン、受け入れ済みの値、参照整合性チェックを対象とします。合格条件が正確に定義されている場合、カスタム SQL でより複雑なアサーションに対応できます。

NULL/空値チェック

一意性/行数上限チェック

数値/比較可能値の範囲チェック

SQL LIKE パターン/許可値チェック

参照先存在チェック

明示的なカスタム SQL アサーション

プレビュー、保存、実行は別のアクションです。

プレビューは現在の解釈をテストします。保存は変更可能なルールを作成または変更します。今すぐ実行または対応済みの Pipeline ステップは永続的な QualityRun を作成し、失敗時には制限された Finding を作成します。

プレビューは同期的で、永続化されません。

保存は変更可能な QualityRule 定義を変更します。

今すぐ実行、Pipeline、Master 実行は QualityRun を永続化します。

失敗は制限された Data Quality Finding を永続化します。これは Assurance Finding ワークフローとは別です。

品質評価は実装済みフローの制御条件にできます。

単独の Data Quality ジョブまたは Master 制御ステップは、失敗時に対応済みの下流の作業を停止できます。正確な PipelineRun、QualityRun、トリガーは別記録のままです。

最小権限は不可欠です。

カスタム SQL には一律の独立した読み取り専用の単一ステートメントのパーサーがありません。以前の結果は現在の下書きを証明しないため、SQL Console ルールモーダルでも SQL 編集後にオペレーターの再実行が必要です。Source には最小権限の読み取り専用認証情報を使用し、失敗サンプルからシークレットと不要な個人データを除外すべきです。

現在の境界は隠しません。

QualityRule は変更可能なで、DatasetVersion に直接固定されません。スイート実行、自動化された修復、完全な Finding 是正、確認済みの通知提供は現在のケイパビリティではありません。管理された Sandbox テーブルは非表示の品質経路ではなく、Project の System Sandbox Source を通じて参加します。

次のステップ

曖昧さを許容できないフローから始めましょう。

重要なシステム、担当者、ルール、提供責任、証拠要件をお聞かせください。

重要なフローについて相談する