수행 내용-빅데이터 저장 계획 수립하기

CODEDRAGON Development/AI

반응형


 

 

수행 내용-빅데이터 저장 계획 수립하기

 

 

 

 

수행 tip

빅데이터 저장계획을 수립하는 데는 저장 시스템을 구축하는 주체가 되는 조직 구성원의 참여와 피드백이 필수적입니다.

 

 

 

 

 

수행 순서

단계

설명

Step1

안정성과 신뢰성 확보 접근성 제어계획 수립한다

Step2

빅데이터 저장 시스템의 관리자 관련 사용자들을 정의한다.

Step3

저장 대상 데이터의 특성을 파악하여 정리 분석한다.

Step4

빅데이터 저장 시스템 구축을 위한 세부계획을 수립한다.

Step5

빅데이터 저장계획 수립에서 도출된 산출물은 다음과 같다.

 

 

 

 

 

 

안정성과 신뢰성 확보 접근성 제어계획 수립한다

 

·         빅데이터 저장시스템 안정성 신뢰성 확보

·         접근성 제어계획 수립

 

 

빅데이터 저장시스템 안정성 신뢰성 확보

빅데이터 저장시스템의 안정성 신뢰성을 확보하고 보장하기 위해 저장 계획 수립단계에서 용량산정이 필요합니다. 조직의 빅데이터 활용목적에 부합하는 현재와 향후 증가 추세를 추정 반영하여 빅데이터 저장 용량을 산정하여 계획하고 전체 저장시스템 구축계획에 반영하는 것은 필수적입니다.

 

·         저장대상이 되는 데이터의 유형, 크기, 저장방식 기간 등을 파악한다.

·         데이터, 아카이브 여유율 등을 고려하여 적정 디스크 용량 계획을 산정한다.

·         private 클라우드 public 클라우드 안정성 신뢰성을 고려한 시스템 구축방안을 계획한다.

 

 

접근성 제어계획 수립

저장 시스템의 사용자와 관리자 유형, 역할 기능을 정의하고 각각에 해당하는 제어계획을 수립합니다.

 

 

 

 

 

 

 

 

 

빅데이터 저장 시스템의 관리자 관련 사용자들을 정의한다.

빅데이터 저장 시스템이 구축되는 경우, 어떤 사용자들이 어떤 용도로 시스템을 사용할지를 정의하고 이를 관리하는 관리자 기능과 요구사항을 분석하여 정리합니다.

 

 

 

 

저장 대상 데이터의 특성을 파악하여 정리 분석한다.

대상 데이터의 용량, 실시간 여부, 정형, 비정형 유형 요건을 파악하여 정리하고 특성에 부합하는 저장 시스템 단계에서 후보군으로 선정된 빅데이터 저장방식에 대하여 기존 시스템과의 연계 가능성 복잡도를 검토하고 이에 따른 수정안을 작성합니다.

 

 

 

 

 

 

빅데이터 저장 시스템 구축을 위한 세부계획을 수립한다.

 

구분

설명

빅데이터 저장 시스템 도입 설정

·         선정된 빅데이터 저장 시스템 도입 설정에 필요한 준비 일정에 대한 세부계획을 수립합니다.

·         시스템 설치에 필요한 하드웨어 등의 제반 환경을 점검하고 이에 대한 체크 리스트를 작성하여 준비상황을 점검합니다.

빅데이터 저장 시스템 구축일정 역할

·         도입 설정이 완료된 시스템에 대하여 빅데이터 모델 설계, 타당성 검증, 시스템 설치및 설정, 설치 테스트, 샘플 데이터 적재 테스트, 실데이터 적재, 검증, 가동(go-live)일정 역할을 정의합니다.

빅데이터 수집 처리 시스템과 연계 방안 수립

·         이미 도입된 빅데이터 수집 처리 시스템과의 연계 방안을 수립합니다.

·         누가 언제 어떻게 연계할지를 계획과 일정에 명확하게 반영하되 수집 부문, 처리 부문 전문가 데이터 유형별(, 비정형 정형, 배치 실시간 스트리밍) 전문가를 배치하여 전문성을 확보하는 방안을 마련합니다.

빅데이터 저장 시스템 검증 운영 방안 수립

·         구축이 완료된 저장 시스템의 최종 검증 계획을 작성하고 운영 조직체계를 포함하는 운영방안을 수립합니다.

 

 

 

 

 

 

 

 

빅데이터 저장계획 수립에서 도출된 산출물은 다음과 같다.

빅데이터 저장시스템 준비상황을 점검하기 위한 체크리스트의 예시입니다.


 

 


'Development > AI' 카테고리의 다른 글

CART 이해  (0) 2020.01.04
과적합(overfitting) 예시  (0) 2020.01.04
가설 검정 방법  (0) 2020.01.03
빅데이터 품질 요소 및 품질 전략  (0) 2020.01.02
4.Summary - 4.수집 데이터 검증모듈 개발하기  (0) 2020.01.02