연관토픽
개념
- 대량의 데이터로부터 숨겨진 패턴과 알려지지 않은 정보 간의 관계를 찾아가는 과정
데이터 분석
- 데이터 기반 여러 분석을 적용하여 비즈니스 문제에 새로운/최적의 문제 해결 방안을 도출
Epoch, Batch, Iteration
- 1 Epoch : 전체 데이터 셋을 한번 학습하는 것
- Batch Size : 1회 학습 시 사용되는 데이터의 수
- Iteration : 정해진 Batch Size를 이용하여 학습을 반복하는 횟수
- (예) 전체 데이터 셋이 1000개, Batch size가 20개라고 하면, 1 Epoch = 50 Iteration
빅데이터 분석 단계
- 분석기획(Planning), 데이터 준비(Preparing), 데이터 분석(Analyzing), 시스템 구현(Developing), 평가 및 전개(Deploying)으로 진행됨
빅데이터 분석 절차