[데이터 분석 기사] 빅데이터 분석 기획 - 빅데이터 분석 계획

분석 수행 방안 수립

1. 고려사항

 1) 주어진 문제에 대하여 구체적으로 정의가 가능함

 2) 필요한 데이터 존재

 3) 데이터를 분석 할수 잇는 분석 역량 보유

 4) 데이터 분석의 6단계

    - Version1: 문제인식 -> 관련 연구조사 -> 모형화 -> 자료수집 -> 자료분석 -> 분석결과 제시

    - Version2: 수집 -> 저장 -> 처리 -> 분석 -> 시각화 -> 이용 -> 폐기  

 

2. 빅데이터 분석 프로세스

  1) 문제인식: 문제가 무엇인지, 왜 이 문제를 해결해야하는지 알아야함 -> 문제는 보통 가설의 형태로 표현

 

  2) 관련연구조사: 각종 문헌을 조사하여 문제와 관련되는 내용을 요약, 분류하고 해결하고자 하는 문제를 정의

 

  3) 모형화: 복잡한 현상을 문제의 본질과 관련되는 제어 가능한 변수들로 추려서 단순화

 

  4) 자료수집: 이미 수집(정리)되어있는 데이터를 가공, 조사자가 직접 관찰, 실험

    - 데이터 베이스: 수집된 데이터

    - 데이터 베이스의 네가지 특징(ACID): 원자성, 일관성, 고립성, 지속성

 

  5) 자료분석: 수집 데이터를 분석하여 데이터 속에 내재된 의미 파악

    - 데이터 마이닝 기법: 분류, 예측, 관련성 분석, 군집분석, 소셜네트워크 분석

 

  6) 분석결과 제시: 변수들 사이의 관련성을 토함한 데이터 분석결과를 해석하여 의사결정자에게 제시

 

분석 절차 및 작업 계획 수립

1. 분석 절차 수립(NCS)

 

  1) 도메인 이슈 도출: 데 분석하고 하는 과제 현황을 파악 -> 개선과제

    - 개념의 타당성, 내용의 타당성 검토 -> 측정값들의 상관관계 추정, 그론바하 알파값을 이용 신뢰도 평가

    - 문제의 주요 이슈별 개선방향 도출 -> 최종 개선방향 수립

    - 빅데이터 요건 정의서 작성 -> 기획의도, 분석을 통해 개선되는 부분등이 반드시 포함되어야 함

 

  2) 분석 목표 수립

    - 개선방향에 맞는 분석 목표 수립

    - 데이터 원천, 데이터 입수 난이도, 분석방법 및 개별 분석 난이도, 분석 수행주기, 성과평가 기준등을 고려

    - 분석목표 정의서 작성

       - 분석의 기본정보(분석목적, 우선순위, 접근 방안)
       - 성과 측정 방법(정량, 정성)

       - 데이터 관련정보 및 분석 타당성에 대한 검토 의견

 

  3) 프로젝트 계획 수립

    - 프로젝트 수행 계획을 수립하기 위해 사전에 자원(인력, 인프라, 예산, 기간)을 고려함

    - 전체 작업분할 구조도(WBS, Work Breakdown Structure) 설계

        - 프로젝트 소요비용을 배분하고 작성(인건비, 하드웨어, 소프트웨어)

        - 분석목표정의서, 프로젝트 소요비용 배분계획을 중심으로 수립

        - 분석과제 정의 -> 데이터 준비 및 탐색 -> 데이터 분석 모델링 및 검증 -> 산출물 정리 및 기타

 

  4) 보유데이터 자산 확인

    - 보유된 데이터들 중 어떤 시스템의 데이터, 보관 데이터중 어느 영역의 데이터를 활용할 건지 파악

    - 데이터의 품질, 분량, 수집 경로, 데이터 유형등을 정리 -> 사전 전처리 수행과정 용이하게 함

    - 데이터 별로 컴플라이언스 준수여부 파악

    - 외부 데이터를 수집하는 경우 결로에 및 필요한 제약사항을 표기, 개인정보 제거

 

  5) 빅데이터 분석결과 시각화

    - 다양한 분석 도구를 이용하여 빅데이터 시각화 -> 결과를 보고서로 작성

 

2. 로드맵 설정과 작업 분할 구조도 설정

 

  - 빅데이터 분석 프로젝트 계획 수립 밑 WBS를 작성하는 절차

    - 프로젝트 소요비용 배분: 인건비, 하드웨어 비용, 소프트웨어 비용, 기타 비용

    - 프로젝트 WBS 수립: 데이터 분석과제 정의 , 데이터 탐색 및 준비, 데이터 분석 모델링 및 검증, 산출물 및 기타

    - 프로젝트 업무 분장 계획 및 배분: 소요기간별 투입인원, 역할 정의 , 프로젝트 필수 산출물 정의, 프로젝트 평가