MDM1 데이터 파이프라인 거버넌스 구조 정리 기술사 학습노트› AI / 빅데이터› 데이터 파이프라인 & 거버넌스AI/Big Data · 한장정리[기술사토픽] 데이터 파이프라인 & 거버넌스 완벽 정리 - 한장정리데이터 파이프라인 구성, 데이터 품질관리, 데이터 메시·패브릭, 마스터데이터 관리(MDM), 데이터 카탈로그까지 완벽 정리합니다.데이터파이프라인데이터품질MDM데이터메시데이터카탈로그데이터거버넌스정보관리기술사Ⅰ.데이터 파이프라인 구성개념: 데이터 파이프라인은 데이터를 소스에서 목적지까지 수집·처리·저장·제공하는 자동화된 흐름입니다.① 수집(Ingest)배치(Sqoop·Logstash)·스트림(Kafka·Kinesis)·API↓ ② 저장(Store)데이터레이크(S3·ADLS)·DW(Redshift·BigQuery)↓ ③ 처리(Process)배치(S.. 2026. 3. 24. 이전 1 다음 반응형
