DataLake2 데이터 레이크(Data Lake) 핵심 요약: 비정형 원시 데이터(Raw Data) 저장과 활용 기술사 학습노트›AI·빅데이터›데이터레이크AI & Big Data · 정보관리기술사 / 컴퓨터시스템응용기술사데이터레이크(Data Lake)정형·반정형·비정형 데이터를 원형 그대로 대규모로 수집·저장하고, 분석·머신러닝·거버넌스를 유연하게 수행하기 위한 저장 및 처리 아키텍처를 체계적으로 정리한다.정보관리기술사컴퓨터시스템응용기술사데이터레이크메타데이터데이터거버넌스ETLELT분산저장스키마온리드데이터카탈로그Ⅰ. 개요 및 등장배경가. 개념데이터레이크는 기업 내부 업무시스템, 로그, IoT 센서, 이미지, 음성, 문서, 외부 오픈데이터 등 이질적인 데이터를 원본 수준으로 대량 적재하여 필요 시점에 분석 구조를 적용하는 저장소 아키텍처이다. 전통적 데이터웨어하우스가 사전에 주제를 정의하고 정제된 데이터마트 중심으로 .. 2026. 4. 24. 데이터 파이프라인의 진화: Data Lake에서 Data Mesh, 그리고 카파(Kappa) 아키텍처까지 기술사 학습노트 › 데이터베이스 › 빅데이터 아키텍처 DATABASE & BIG DATA · 정보관리기술사 / 컴퓨터시스템응용기술사 빅데이터(Big Data) 파이프라인 아키텍처와 분산 처리 에코시스템 완벽 해부 정형·비정형 데이터의 폭발적 증가에 대응하기 위한 빅데이터의 핵심 특성(5V)과, 하둡(Hadoop) 기반의 분산 저장 메커니즘, 스파크(Spark)의 인메모리 처리, 그리고 데이터 레이크(Data Lake)부터 데이터 메시(Data Mesh)로 이어지는 아키텍처의 패러다임 진화를 심층 분석한다. 정보관리기술사 컴퓨터시스템응용기술사 빅데이터 Hadoop Spark 분산처리 Dat.. 2026. 4. 9. 이전 1 다음
