메뉴 건너뛰기

GREATUSER

free

AWS Glue 기반 Amazon Aurora 데이터 추출 및 Quicksight 시각화 하기 AWS Glue는 서버리스 ETL 서비스로 데이터 분석을 위해 손쉽게 데이터를 준비하고 로딩할 수 있도록 지원하는 서비스 입니다. AWS Glue는 AWS에 저장된 데이터의 메타 데이터를 통해 데이터 카탈로그를 생성하고, 해당 카탈로그로 다양한 서비스에서 데이터에 접근하여 사용할 수 있습니다. 이 글에서는 실제 많은 고객들이 서비스 운영 데이터베이스로 사용하고 있는 Amazon Aurora의 DB 데이터를 AWS Glue를 통해 데이터 카탈로그를 생성하고, 생성된 카탈로그를 통해 데이터를 Amazon S3로 추출 / 로드 시킨 후에 해당 데이터를 통해 다양한 비즈니스 분석을 수행하는 예제를 소개합니다. 참고로 소스 데이터가 S3에 이미 저장되어 있는 경우, Amazon S3 및 AWS Glue를 이용한 데이터 레이크 구축하기을 참고하면 간단히 AWS Glue를 통해 데이터를 확인해 볼 수 있습니다. 실습을 위한 환경에서는 원본이 되는 데이터는 Amazon Aurora(postgreSQL) DB에 저장되어 있으며, 다음과 같은 단계로 해당 데이터를 추출/로드/분석에 활용해 보겠습니다. AWS Glue Crawler를 통해 Aurora DB에 [ more... ]


원문출처 : https://jirak.net/wp/aws-glue-%EA%B8%B0%EB%B0%98-amazon-aurora-%EB%8D%B0%EC%9D%B4%ED%84%B0-%EC%B6%94%EC%B6%9C-%EB%B0%8F-quicksight-%EC%8B%9C%EA%B0%81%ED%99%94-%ED%95%98%EA%B8%B0/
번호 제목 글쓴이 날짜 조회 수
880 Microsoft HoloLens comes to Japan 관리자 2016.11.29 351
879 Node-ChakraCore and VM Neutrality in Node.js 관리자 2016.11.30 283
878 Amazon Athena – 초단위 페타바이트급 동적 데이터 질의 서비스 관리자 2016.12.01 398
877 Amazon Lex – 대화형 음성 및 텍스트 인터페이스 개발 서비스 관리자 2016.12.01 231
876 Polly – 클라우드 기반 24개 언어 47개 음성 합성 서비스 관리자 2016.12.01 305
875 Amazon Rekognition – 딥러닝을 기반한 이미지 탐지 및 인식 서비스 관리자 2016.12.01 278
874 AWS Greengrass – 유비쿼터스 및 실세계 컴퓨팅 서비스 관리자 2016.12.01 287
873 AWS Snowball Edge – 클러스터링 및 용량 추가, 로컬 엔드포인트와 Lambda 함수 지원 관리자 2016.12.01 348
872 AWS Snowmobile – 엑사 바이트(Exabyte)급 데이터를 몇 주 만에 클라우드로 관리자 2016.12.01 403
871 HP announces ProBook x360 11 Education Edition powered by Windows 10 관리자 2016.12.02 256
870 Celebrating the past and future of Minecraft: Pocket Edition 관리자 2016.12.02 42
869 Announcing Windows 10 Insider Preview Build 14977 for Mobile 관리자 2016.12.02 263
868 AWS Shield – DDoS 공격 대비 애플리케이션 보안 서비스 관리자 2016.12.02 311
867 AWS Batch – 배치(Batch) 컴퓨팅 관리 서비스 출시 관리자 2016.12.02 268
866 AWS 개인 상태 대시 보드 – 신규 기능 제공 관리자 2016.12.02 266
위로