메뉴 건너뛰기

GREATUSER

free

AWS Glue 기반 Amazon Aurora 데이터 추출 및 Quicksight 시각화 하기 AWS Glue는 서버리스 ETL 서비스로 데이터 분석을 위해 손쉽게 데이터를 준비하고 로딩할 수 있도록 지원하는 서비스 입니다. AWS Glue는 AWS에 저장된 데이터의 메타 데이터를 통해 데이터 카탈로그를 생성하고, 해당 카탈로그로 다양한 서비스에서 데이터에 접근하여 사용할 수 있습니다. 이 글에서는 실제 많은 고객들이 서비스 운영 데이터베이스로 사용하고 있는 Amazon Aurora의 DB 데이터를 AWS Glue를 통해 데이터 카탈로그를 생성하고, 생성된 카탈로그를 통해 데이터를 Amazon S3로 추출 / 로드 시킨 후에 해당 데이터를 통해 다양한 비즈니스 분석을 수행하는 예제를 소개합니다. 참고로 소스 데이터가 S3에 이미 저장되어 있는 경우, Amazon S3 및 AWS Glue를 이용한 데이터 레이크 구축하기을 참고하면 간단히 AWS Glue를 통해 데이터를 확인해 볼 수 있습니다. 실습을 위한 환경에서는 원본이 되는 데이터는 Amazon Aurora(postgreSQL) DB에 저장되어 있으며, 다음과 같은 단계로 해당 데이터를 추출/로드/분석에 활용해 보겠습니다. AWS Glue Crawler를 통해 Aurora DB에 [ more... ]


원문출처 : https://jirak.net/wp/aws-glue-%EA%B8%B0%EB%B0%98-amazon-aurora-%EB%8D%B0%EC%9D%B4%ED%84%B0-%EC%B6%94%EC%B6%9C-%EB%B0%8F-quicksight-%EC%8B%9C%EA%B0%81%ED%99%94-%ED%95%98%EA%B8%B0/
번호 제목 글쓴이 날짜 조회 수
1150 Announcing Windows Server 2019 Insider Preview Build 17639 관리자 2018.04.11 564
1149 Amazon ElastiCache 업데이트– Redis 클러스터 온라인 크기 조절 기능 출시 관리자 2017.11.21 564
1148 EC2 Systems Manager – EC2 및 온-프레미스 서버 함께 관리하기 관리자 2017.01.12 564
1147 Amazon DynamoDB 지속적 백업 및 특정 시점으로 복구(PITR) 기능 출시 관리자 2018.03.28 563
1146 Stephen Orban – 엔터프라이즈 DevOps: DevOps를 수행할 때 기대할 수 있는 것들 관리자 2017.12.05 563
1145 Black Marble uses Microsoft HoloLens to help revolutionise Crime Scene Investigation with tuServ 관리자 2017.10.10 563
1144 Amazon SageMaker를 통한 美 대학 농구 결과 예측하기 관리자 2018.03.28 562
1143 AWS 도움말 문서, GitHub에서 오픈 소스로 공개 관리자 2018.03.16 562
1142 Steigenberger Airport Hotel transforms back-of-house operations with Windows 10 IoT and Microsoft Azure IoT 관리자 2017.08.30 562
1141 Design entrepreneur and Surface fan Patrick DuChene 관리자 2016.10.22 562
1140 Amazon Redshift 를 위한 10가지 성능 튜닝 기법 관리자 2016.12.10 561
1139 Spatial Reference Systems in MySQL 8.0 관리자 2018.05.01 560
1138 Amazon EC2 차세대 M5 및 C5 인스턴스 타입 서울 리전 출시 관리자 2018.04.10 560
1137 Announcing Windows 10 Insider Preview Build 17634 for Skip Ahead 관리자 2018.03.30 560
1136 AWS 2월 온라인 세미나 – AWS 클라우드 소개, DynamoDB 시작하기, New Feature 소개, Amazon SageMaker를 통한 Jupyter Notebook 활용 관리자 2018.02.12 559
위로