AWS Online Analytics Immersion Day Webinar 정리 :: 행복한 프로그래머

posted by 쁘로그램어 2020. 6. 18. 17:03

# AWS Online Analytics Immersion Day Webinar (2020.03.18 ~ 2020.03.19)

- AWS Analytics Services (ex. Kinesis, Athena, Redshift, EMR, etc)의  기본 개념을 알고 있지만, 이러한 서비스 활용 방법 및 데이터 분석 시스템 구축 과정이 궁금하신 분

- 데이터 분석 시스템을 구축한 경험은 있지만, 자신이 만든 시스템을 아키텍처 관점에서 어떻게 평가하고 확인할 수 있는지 궁금하신 분


# AWS를 통한 빅데이터 기반 비즈니스 인텔리전스(BI) 구축 방법 (선행 학습)

- 발표 영상 https://youtu.be/27LwZIaJtVQ

- 발표 자료 https://www.slideshare.net/awskorea/1-bigdata-bi-configuration


# AWS Online Analytics Immersion Day

• 발표 영상

https://tinyurl.com/y7ek3jdk

https://tinyurl.com/y8mxf9xa


• 발표 자료

https://tinyurl.com/ybxkb74b


• github

https://github.com/ksmin23/aws-analytics-immersion-day


# AWS Online Analytics Immersion Day1

1. 고객 사례 소개: 데이터 분석 시스템을 구축하려고 하는 가상의 고객 사례 소개 및 아키텍처 리뷰

2. Batch Layer - 수집/저장: Kinesis Data Firehose와 S3를 이용해서 데이터를 수집 및 저장 방법 소개

3. Demo: Kinesis Data Firehose와 S3를 이용한 데이터 수집

4. Batch Layer - 분석/시각화: Athena와 QuickSight를 이용한 데이터 분석 및시각화 방법 소개

5. Demo: Athena를 이용한 대화식 분석 및 QuickSight를 활용한 시각화


# AWS Online Analytics Immersion Day2

1. 3가지 실시간 데이터 분석 아키텍처 소개

- Spark/Flink on EMR

- Kinesis Data Analytics

- Elasticsearch Service

2. Batch와 Speed Layer를 통합한 데이터 분석 시스템 아키텍처 소개

- Lambda vs Kapa Architecture

3. Elasticsearch Service와 Kibana를 이용한 실시간 데이터 분석 및 시각화

4. 데이터 분석 시스템의 확장 사례 소개

- Network analysis (with Amazon Neptune)

- Recommendation (with Amazon Personalize)

- Machine Learning (with Amazon SageMaker)