AWS Glue 기반 Amazon Aurora 데이터 추출 및 Quicksight 시각화 하기 AWS Glue는 서버리스 ETL 서비스로 데이터 분석을 위해 손쉽게 데이터를 준비하고 로딩할 수 있도록 지원하는 서비스 입니다. AWS Glue는 AWS에 저장된 데이터의 메타 데이터를 통해 데이터 카탈로그를 생성하고, 해당 카탈로그로 다양한 서비스에서 데이터에 접근하여 사용할 수 있습니다. 이 글에서는 실제 많은 고객들이 서비스 운영 데이터베이스로 사용하고 있는 Amazon Aurora의 DB 데이터를 AWS Glue를 통해 데이터 카탈로그를 생성하고, 생성된 카탈로그를 통해 데이터를 Amazon S3로 추출 / 로드 시킨 후에 해당 데이터를 통해 다양한 비즈니스 분석을 수행하는 예제를 소개합니다. 참고로 소스 데이터가 S3에 이미 저장되어 있는 경우, Amazon S3 및 AWS Glue를 이용한 데이터 레이크 구축하기을 참고하면 간단히 AWS Glue를 통해 데이터를 확인해 볼 수 있습니다. 실습을 위한 환경에서는 원본이 되는 데이터는 Amazon Aurora(postgreSQL) DB에 저장되어 있으며, 다음과 같은 단계로 해당 데이터를 추출/로드/분석에 활용해 보겠습니다. AWS Glue Crawler를 통해 Aurora DB에 [ more... ]
원문출처 : https://jirak.net/wp/aws-glue-%EA%B8%B0%EB%B0%98-amazon-aurora-%EB%8D%B0%EC%9D%B4%ED%84%B0-%EC%B6%94%EC%B6%9C-%EB%B0%8F-quicksight-%EC%8B%9C%EA%B0%81%ED%99%94-%ED%95%98%EA%B8%B0/
원문출처 : https://jirak.net/wp/aws-glue-%EA%B8%B0%EB%B0%98-amazon-aurora-%EB%8D%B0%EC%9D%B4%ED%84%B0-%EC%B6%94%EC%B6%9C-%EB%B0%8F-quicksight-%EC%8B%9C%EA%B0%81%ED%99%94-%ED%95%98%EA%B8%B0/
댓글 0
번호 | 제목 | 글쓴이 | 날짜 | 조회 수 |
---|---|---|---|---|
1180 | 문의가 있으시다면? 한국어 포럼을 활용해 주세요! | 관리자 | 2016.05.18 | 7 |
1179 | Microservices: From Design to Deployment, a Free Ebook from NGINX | 관리자 | 2016.05.19 | 81 |
1178 | Microservices Reference Architecture, Part 2 – The Proxy Model | 관리자 | 2016.05.19 | 14 |
1177 | AWS IoT 페스티벌 성료 – 다양한 IoT 아이디어 선보여… | 관리자 | 2016.05.21 | 3 |
1176 | Windows Nano Server Technical Preview 5 and MySQL | 관리자 | 2016.05.24 | 3 |
1175 | AWS 클라우드를 배우는 방법 (3) – AWS 전문 교육 과정 | 관리자 | 2016.05.25 | 51 |
1174 | AWS Summit 행사 발표 자료 및 동영상 공유 | 관리자 | 2016.05.31 | 7 |
1173 | Amazon ElastiCache 업데이트 – Redis 스냅샷 S3에 저장하기 | 관리자 | 2016.06.03 | 96 |
1172 | Amazon Aurrora, 리전간 Read Replica 추가 가능 | 관리자 | 2016.06.03 | 104 |
1171 | Supporting HTTP/2 for Google Chrome Users | 관리자 | 2016.06.08 | 42 |
1170 | MySQL 5.7: New Audit Log Filtering Feature – Part 1 | 관리자 | 2016.06.14 | 3 |
1169 | Doing DevOps | 관리자 | 2016.06.14 | 3 |
1168 | Microservices Reference Architecture, Part 3 – The Fabric Model | 관리자 | 2016.06.17 | 7 |
1167 | AWS CodeDeploy 서울 리전 서비스 출시 | 관리자 | 2016.06.17 | 6 |
1166 | Improvements to XA Support in MySQL 5.7 | 관리자 | 2016.06.23 | 4 |