데이터 카탈로그(Data Catalog)

데이터 카탈로그(Data Catalog)는 기업이나 조직이 보유한 모든 데이터 자산을 체계적으로 정리해 둔 '중앙 집중식 데이터 보물 지도(인벤토리)'를 뜻합니다.

쉽게 비유하자면, 도서관에서 원하는 책을 쉽게 찾을 수 있도록 책의 제목, 저자, 출판사, 서가 위치를 정리해 놓은 '도서 검색 시스템'의 데이터 판이라고 생각하시면 됩니다.

 

 

 

1. 데이터 카탈로그가 관리하는 핵심 정보

데이터 카탈로그는 실제 데이터 원본을 저장하는 것이 아니라, 데이터에 대한 정보인 메타데이터(Metadata)를 수집하고 관리합니다.

기술 메타데이터:테이블 이름, 컬럼명, 데이터 타입(String, Int 등), 데이터베이스 스키마

비즈니스 메타데이터:데이터의 비즈니스적 정의, 데이터 소유자(담당 부서), 활용 목적

운영 메타데이터:데이터가 마지막으로 업데이트된 시간, 데이터 생성 주기, 최근 사용 빈도

데이터 계보 (Data Lineage):이 데이터가 어디서 시작되어, 어떤 변환 과정을 거쳐 현재 테이블로 흘러왔는지 보여주는 흐름도

2. 왜 필요한가요? (도입 효과)

현대 기업은 수많은 데이터베이스, 클라우드, 엑셀 파일 등에 데이터가 흩어져 있는 '데이터 사일로(Silo)' 현상을 겪습니다. 데이터 카탈로그는 이를 한눈에 파악할 수 있게 해줍니다

시간 절약 (데이터 검색 용이성):분석가나 개발자가 "내가 필요한 매출 데이터가 어느 DB의 무슨 테이블에 있지?"를 찾기 위해 몇 시간씩 헤매지 않고 포털 검색창처럼 쉽게 검색해 찾을 수 있습니다.

데이터 신뢰도 상승:해당 데이터의 품질 점수나 다른 사용자들의 리뷰, 소유자를 명확히 확인하고 안심하며 활용할 수 있습니다.

데이터 거버넌스 및 보안 강화:민감한 개인정보(주민번호, 전화번호 등)가 포함된 데이터셋에 태그를 지정해 접근 권한을 통제하고, 보안 규정 준수(SLA, ISMS-P 등)를 감사하기 쉬워집니다.

3. 유사 개념과의 차이점

데이터 사전 (Data Dictionary):특정 데이터베이스 '내부'의 테이블과 컬럼 구조를 기술한 개발자 중심의 명세서입니다. 반면 데이터 카탈로그는 기업 '전체'의 다양한 시스템(DB, 파일, API 등)을 아우르며 비즈니스 사용자도 쉽게 쓸 수 있는 거대한 검색 포털입니다