본문 바로가기

AWS 구성도 & 아키텍처/데이터 분석 파이프 라인(Data Analystics Pipeline)

스케줄링(배치)을 활용한 데이터 분석 파이프라인 구성도

728x90
반응형

# 스케줄링(배치)를 활용한 데이터 분석 파이프라인 구성

1. S3 → Glue → Athena → QuickSight or S3 → Glue → S3 (데이터 정제) → QuickSight

2. S3 → Redshift → Glue → Athena → QuickSight or S3 → Redshift → Glue → S3 → QuickSight

3. S3 → QuickSight

4. Redshift → QuickSight

- 데이터 성격, 활용용도 및 데이터 정제 정도에 따라서 프로세스를 선택 후 구성가능...
- 데이터가 복잡하거나 여러 정제 작업이 필요할 경우에는 보다 복잡한 프로세스가 될 가능성이 높음...

Ver.02

728x90
반응형