[개미의 걸음 ADsP 2과목] ② 빅데이터 분석방법론

빅데이터 분석방법론

빅데이터 분석의 계층적 프로세스

     ① 단계[Phase]

프로세스 그룹[Process Group]을 통해 완성된 단계별 산출물이 생성

각 단계는 기준선[Baseline]으로 설정되어 관리되어야 하며, 비전관리 등을 통해 통제가 이루어져야 한다.

     ② 테스크[Task]

각 단계는 여러 개의 Task로 구성

각 Task는 단계를 구성하는 단위 활동이며 물리적 또는 논리적 단위로 품질 검토 항목이 될 수 있다.

     ③ 스텝[Step]

WBS[Work Breakdown Structure]의 Work Package에 해당되고 입력자료[Input], 처리 및 도구[Process&Tool], 출력자료[Output]로 구성된 단위 프로세스[Unit Process]이다.

 

 

빅데이터 분석 방법론 5단계

<빅데이터 분석방법론>

     ① 분석기획[Planning]

• 비즈니스 도메인과 문제점을 인식하고 분석계획 및 프로젝트 수행계획을 수립하는 단계

 

     ② 데이터준비[Preparing]

• 비즈니스 요구사항과 데이터 분석에 필요한 원천 데이터를 정의하고 준비하는 단계

 

     ③ 데이터 분석[Analyzing]

• 원천데이터를 분석용 데이터셋으로 편성하고 다양한 분석기법과 알고리즘을 이용해 데이터를 분석하는 단계
• 분석 단계를 수행하는 과정에서 추가적인 데이터 확보가 필요한 경우, 데이터준비단계로 피드백해 두 단계를 반복진행

# 알고리즘 설명서[모델적용 및 운영방안 단계에서의 출력자료]

가동중인 운영시스템에 모델을 적용하기 위해서는 모델에 대한 상세한 알고리즘 설명서 작성이 필요

알고리즘 설명서는 시스템 구현 단계에서 중요한 입력 자료로 활용되므로 필요시 의사코드 수준의 상세한 작성이 필요하다.

 

     ④ 시스템 구현[Developing]

• 분석기획에 맞는 모델을 도출하고 이를 운영중인 가동시스템에 적용하거나 시스템 개발을 위한 사전검증으로 프로트라입 시스템을 구현

# 시스템 테스트

품질 관리 차원에서 진행함으로써 적용된 시스템의 객관성과 완전성을 확보

구축된 시스템 검증을 위해 단위테스트, 통합테스트, 시스템 테스트 등을 수행  

 

     ⑤ 평가 및 전개

• 데이터분석 및 시스템구현 단게 수행 후, 프로트 성과를 평가하고 정리하거나 모델의 발전 계획을 수립해 차기분석 기획으로 전달하고 프로젝트를 종료하는 단계