정보처리기사[실기 핵심 정리] - 데이터 전환

ETL(Extraction, Transformation, Loading)

1) ETL 개념

• 데이터 전환은 기존 원천시스템에서 데이터를 추출(Extraction)하고, 이를 목적시스템 데이터베이스에 적합한 형식과 내용으로 변환(Transformation)한 후, 목적시스템에 적제(Loading)하는 일령의 과정이다
• 일반적으로 ETL 프로세스라고 한다.

 

2) 데이터 전환 절차

1. 데이터 전환 계획 및 요건 정의
2. 데이터 전환 설계
3. 데이터 전환 계발
4. 데이터 전환 테스트 및 검증
5. 데이터 전환

ETL(Extraction, Transformation, Loading)

1) ETL 개념

• ETL은 다양한 소스시스템으로 부터 필요한 데이터를 추출(Extraction),변환(Transformation), 그리고 타깃 시스템에 전송 및 로딩(Loading)하는 전체 과정을 말한다.
• 데이터 웨어하우스 구축 시, 운영 시스템에서 데이터를 추출하여 가공(변환,정제)한 후 데이터 웨어하우스에 적잭하는 과정도 포함된다.
  

기능	설명
추출 (Extraction)	하나 이상의 데이터 소스로부터 데이터를 획득하는 가정
변환 (Transformation)	데이터 클렌징, 형식 변환 및 표준화, 데이터 통합 등을 수행하는 과정
적재 (Load)	변환 단계에서 처리된 데이터를 목표 시스템에 적재하는 과정

 

데이터 정제

1) 데이터 품질 관리 대상

대상	종류
데이터 값	● 데이터 현상적 값: 데이터의 실제 내용 ● 데이터 구조적 값: 데이터가 어떻게 구성되어 있는지를 나타내는 값
데이터 구조	● 각 단계별 데이터구조: 데이터 처리의 각 단계에서 사용되는 데이터 구조 ● 각 조직 단위별 데이터 구조: 조직의 각 부분에서 사용하는 데이터 구조
데이터 관리 프로세스	● 데이터 정의, 변경, 평가 프로세스 : 데이터를 정의 변경, 평가하는 방법론과 절차

 

2) 데이터 품질 관리 프레임 워크

• 데이터 품질 관리 프레임 워크 개념
  • 조직 내에서 데이터의 품질을 관리하고 유지하는 데 사용되는 체계적인 접근 방식이다.
  • 다양한 관리자와 사용자가 데이터 값, 데이터 구조, 데이터 관리 프로세스를 다루는 데 필요한 역활과 책임을 정의한다.