Data Validation – Rule-Based Checks¶
AI 기반 Data Validation 모듈 — 데이터 품질 및 관찰성을 위한 digna
목적¶
The Data Validation 모듈은 데이터 품질을 정밀한 규칙 기반 검사로 보장합니다.
조직이 결정론적 비즈니스 및 기술 유효성 검사 로직을 정의할 수 있도록 하여, 데이터가 컴플라이언스 표준, 계약상 SLA 및 규제 요구사항을 충족하도록 합니다.
데이터베이스 내 규칙 실행, 완전한 감사 추적, 및 다른 digna 모듈과의 통합을 결합함으로써, Data Validation은 복잡한 엔터프라이즈 환경 전반에 걸쳐 일관되고 추적 가능한 데이터 품질 및 관찰성을 보장합니다.
기술 개요¶
지원되는 유효성 검사 유형¶
-
일치 검사
값이 예상 결과와 일치하는지 확인합니다 (예: 참조 코드, Boolean 플래그, 범주 매핑). -
임계값 및 범위
숫자 측정값 또는 KPI를 정의된 한계(정적 또는 동적으로 도출됨)에 대해 검증합니다. -
참조 목록 및 조회
필드 값이 승인된 마스터 데이터 세트 내에 존재하는지 확인합니다 (예: VAT 코드, ISO 국가 목록, 제품 카탈로그). -
열 간 일관성
관계적 정합성을 보장합니다 (예: 통화가 지역과 일치하는지, 리스크 카테고리가 자산 유형과 일치하는지). -
널 처리 규칙
중요 열에서 예상치 못한 null 또는 빈 값을 감지합니다.
실행 및 로깅¶
- 데이터베이스 내 처리 – 모든 유효성 검사 규칙은 귀하의 데이터베이스(Teradata, Snowflake, Databricks, PostgreSQL 등)에서 직접 실행됩니다.
- 데이터 추출 없음 – digna는 원시 데이터를 고객 환경 외부로 전송하지 않습니다.
- 완전한 추적성 – 각 규칙 결과는 타임스탬프, 대상 데이터셋, 레코드 수 및 통과/실패 결과와 함께 기록됩니다.
- 감사